摘要：
package lianjie; import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.SQLException;import java.sql.State 阅读全文
posted @ 2018-07-27 23:24
小#安
阅读(128)
评论(0)
推荐(0)
摘要：
防火墙 先进入init.d目录，命令如下：[root@centos6 ~]# cd /etc/init.d/ [root@centos6 init.d]# 然后查看防火墙状态：[root@centos6 init.d]# /etc/init.d/iptables status 暂时关闭防火墙：[ro 阅读全文
posted @ 2018-07-27 23:23
小#安
阅读(73)
评论(0)
推荐(0)
摘要：
电脑型号 戴尔 Inspiron 5548 笔记本电脑 (扫描时间：2018年07月10日)操作系统 Windows 8.1 64位 ( DirectX 11 ) 处理器 英特尔 Core i5-5200U @ 2.20GHz 双核主板 戴尔 03WM8D ( 英特尔 Broadwell-U - 5 阅读全文
posted @ 2018-07-27 23:22
小#安
阅读(698)
评论(0)
推荐(0)
摘要：
spark依赖配置网址http://mvnrepository.com/1.create new project2.meven，直接next3.输入group id等4.输入project name5.可以删掉main下的java和resources6.右键点击项目，选Add Framework S 阅读全文
posted @ 2018-07-27 23:21
小#安
阅读(1952)
评论(0)
推荐(0)
摘要：
阅读全文
posted @ 2018-07-27 23:19
小#安
阅读(76)
评论(0)
推荐(0)
摘要：
flume简介与使用（1） - -flume安装与配置https://www.cnblogs.com/vincent-vg/p/5809626.html6.4https://item.btime.com/m_987e56ab945bc05cf 阅读全文
posted @ 2018-07-27 23:18
小#安
阅读(103)
评论(0)
推荐(0)
摘要：
1.八爪鱼，抓取数据 2.八爪鱼数据导入mysql（navicat连的虚拟机上的），表为an 3.给定mysql的表an自增id 4.开启hadoop，yarn， 5.利用sqoop导入mysql的表an sqoop import --connect jdbc:mysql://192.168.218 阅读全文
posted @ 2018-07-27 23:17
小#安
阅读(176)
评论(0)
推荐(0)
摘要：
name node is in safe mode方法： hadoop dfsadmin -safemode leave 阅读全文
posted @ 2018-07-27 23:16
小#安
阅读(76)
评论(0)
推荐(0)
摘要：
C:\Users\dell-pc\Desktop\node\大数据\hive的jdbc连接hdfs需导入的jar包 阅读全文
posted @ 2018-07-27 23:15
小#安
阅读(115)
评论(0)
推荐(0)
摘要：
core-site.xml <property> <name>hadoop.tmp.dir</name> <value>file:/home/admin/hadoop-2.8.0/tmp</value> <description>Abase for other temporary directori 阅读全文
posted @ 2018-07-27 23:13
小#安
阅读(116)
评论(0)
推荐(0)
摘要：
mysql的yum安装法ww.cnblogs.com/renjidong/p/7047396.html service mysqld start mysql -u root -p进入mysql\q退出 ERROR 1044 (42000): Access denied for user ''@'lo 阅读全文
posted @ 2018-07-27 23:10
小#安
阅读(213)
评论(0)
推荐(0)
摘要：
显示mysql的数据库sqoop list-databases --connect jdbc:mysql://192.168.218.133:3306/hive --username root --password 123456 显示mysql数据库中所有的表sqoop list-tables -- 阅读全文
posted @ 2018-07-27 23:05
小#安
阅读(104)
评论(0)
推荐(0)
摘要：
查hive报错信息hive -hiveconf hive.root.logger=DEBUG,console 启动元数据库hive --service metastore hive --service hiveserver -v 开启 阅读全文
posted @ 2018-07-27 23:04
小#安
阅读(312)
评论(0)
推荐(0)
摘要：
以下全部在kafka目录下进行开启zookeeperbin/zookeeper-server-start.sh config/zookeeper.properties开启kafkanohup bin/kafka-server-start.sh config/server.properties &创建 阅读全文
posted @ 2018-07-27 23:03
小#安
阅读(502)
评论(0)
推荐(0)
摘要：
package bao; import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.SQLException;import java.sql.Statement 阅读全文
posted @ 2018-07-27 23:01
小#安
阅读(415)
评论(0)
推荐(0)
摘要：
sqooplist-databases：列出所有数据库$ sqoop list-databases --connect jdbc:mysql://192.168.218.134:3306 --username root --password 111列出库中所有表$ sqoop list-tables 阅读全文
posted @ 2018-07-27 22:51
小#安
阅读(271)
评论(0)
推荐(0)
摘要：
hadoop web为standy，将其变为active：hdfs haadmin -transitionToActive --forcemanual nn1spark scala语言写的 RDD resilient distributed datatest，弹性分布式数据集val 调度器 三级调度 阅读全文
posted @ 2018-07-27 22:50
小#安
阅读(92)
评论(0)
推荐(0)
摘要：
读源码 第三天 1 job提交源代码考察 第三天 2 本地并发度设置 第三天 3 分区切片计算 第三天 4 job提交过程分析 第三天 5 job提交过程分析 阅读全文
posted @ 2018-07-27 22:49
小#安
阅读(52)
评论(0)
推荐(0)
摘要：
对源码的解析 第四天 1 spark提交作业过程图形化解释1 第四天 2 spark提交作业2 第四天 3 spark提交作业3 阅读全文
posted @ 2018-07-27 22:49
小#安
阅读(49)
评论(0)
推荐(0)
摘要：
spark编程指南 英文版：http://spark.apache.org/docs/latest/streaming-programming-guide.htmlspark1.val a=sc.textFile("/opt/spark/user/word") //弹性分布式数据集2.val b=a 阅读全文
posted @ 2018-07-27 22:48
小#安
阅读(97)
评论(0)
推荐(0)
摘要：
第一天 hadoop的几个主要端口 并行和并发的概念 1.wordcount 2.spark支持的库 3.trabsformations（变换：返回新的rdd） 4.action（动作） 5.spark集群部署配置 6.启动集群 7.分析/opt/spark/sbin下 start-all.sh脚本 阅读全文
posted @ 2018-07-27 22:47
小#安
阅读(112)
评论(0)
推荐(0)
摘要：
hadoop [webui] namenode:50070datanode:500752nn :50090RM :8088[hbase]master :16010 spark并发：单机下多线程计算并行：分布式集群下的计算，非单机 *********************************** 阅读全文
posted @ 2018-07-27 22:47
小#安
阅读(87)
评论(0)
推荐(0)
摘要：
scala 函数和方法的区别：函数和类无关方法是和对象有关的1.元祖tuple22()val x=(,,,,,);对偶 val x=(1,100); //对偶是特殊的元祖 val x="001"->"tomact"val x=Array(1,2,3,4) //等同于Array.apply()val 阅读全文
posted @ 2018-07-27 22:45
小#安
阅读(93)
评论(0)
推荐(0)
摘要：
scala>:help //帮助scala 1 to 10 //to 包含101 until 10 //until 不包含 10 方法是针对对象的 1.*************************************函数 def define定义 1.scala>def add(a:Int 阅读全文
posted @ 2018-07-27 22:44
小#安
阅读(113)
评论(0)
推荐(0)
摘要：
scala区分大小写ctrl+l 清屏scala常用类型： Byte Char Short Int Long Float Double Boolean scala方法 3 intersect //交集6 distinct //去重7 apply //取出第几个字符，可省略8 大数运算 1.赋值等sc 阅读全文
posted @ 2018-07-27 22:43
小#安
阅读(110)
评论(0)
推荐(0)
摘要：
第一天 scala常用类型，清屏，scala方法 1.赋值 2.类型相关 3.intersect（交集） 4.scala只能用+=/-= 5.scala导入包 6.distinct（去重） 7.apply 8.大数运算 9.定义数组 10.条件表达式 11.语句终止 12.注释 13.readLin 阅读全文
posted @ 2018-07-27 22:42
小#安
阅读(76)
评论(0)
推荐(0)
摘要：
xml文件 阅读全文
posted @ 2018-07-27 22:25
小#安
阅读(436)
评论(0)
推荐(0)
摘要：
models -》 里面写关于数据库方面数据controllers -》逻辑，请求方法等conf -》注册数据库信息routers -》初始化路由线路views -》测试界面 实际运行：1.通过models 来连接数据库，在models.go中注册models，每一个其余models（不包含mode 阅读全文
posted @ 2018-07-27 22:20
小#安
阅读(142)
评论(0)
推荐(0)
摘要：
第一步:创建布局 material design: TabLayout与ViewPager一起使用 <?xml version="1.0" encoding="utf-8"?><LinearLayout xmlns:android="http://schemas.android.com/apk/re 阅读全文
posted @ 2018-07-27 22:18
小#安
阅读(93)
评论(0)
推荐(0)
摘要：
main.go为整个程序的入口 main函数不在main包里，构建工具不会生成可执行文件 import为导包 直接的无github的为标准库的包。 所有同一个文件夹里的代码文件必须使用同一个包名，例（controllers下文件开头全为 package controllers） 一个包定义了一组编译 阅读全文
posted @ 2018-07-27 22:16
小#安
阅读(941)
评论(0)
推荐(0)
摘要：
建立项目文件：cd %GOPATH%/src //gopathbee new hello //建立的项目为hellocd hello //进入hellobee run hello //开hello，在localhost:8080可看到结果 go文件写在/e/mygo/src/an 文件夹中（an是项 阅读全文
posted @ 2018-07-27 22:14
小#安
阅读(135)
评论(0)
推荐(0)
摘要：
Module的gradle文件apply plugin: 'com.android.application'android { compileSdkVersion 26 defaultConfig { applicationId "com.culturer.guishi_shoper" minSdk 阅读全文
posted @ 2018-07-27 22:09
小#安
阅读(337)
评论(0)
推荐(0)
摘要：
见 Guishi_shoper 的RegisterActivity短信验证调试 手机与电脑后台需在同一局域网 必须在同一个局域网private 注册所有控件private static final String TAG = "RegisterActivity"; //调试logcat 的info模式 阅读全文
posted @ 2018-07-27 22:07
小#安
阅读(273)
评论(0)
推荐(0)
浙公网安备 33010602011771号