摘要: 一、冒泡排序 原理: 比较相邻的元素。如果第一个比第二个大,就交换他们两个。 对每一对相邻元素做同样的工作,从开始第一对到结尾的最后一对。在这一点,最后的元素应该会是最大的数。 针对所有的元素重复以上的步骤,除了最后一个。 持续每次对越来越少的元素重复上面的步骤,直到没有任何一对数字需要比较。 要点 阅读全文
posted @ 2019-07-06 15:20 溜肉段小能手 阅读(144) 评论(0) 推荐(0) 编辑
摘要: 今天改了一个core-site文件,检查了好多遍都没有发现错误,有再网上找了很多资料,也没有解决。 突发奇想是不是需要重启hdfs,重启后成功了。脑子僵住了,重启的道理很明显,一个多小时没转过来弯,耽误了太多时间,引以为戒! 阅读全文
posted @ 2019-06-30 19:13 溜肉段小能手 阅读(112) 评论(0) 推荐(0) 编辑
摘要: 修改hbase.site.xml 修改hbase.rootdir的hdfs端口号。例如9000 阅读全文
posted @ 2019-06-30 15:44 溜肉段小能手 阅读(238) 评论(0) 推荐(0) 编辑
摘要: 1.临时显示/取消行号 2.永久显示行号 添加 set no 保存退出 阅读全文
posted @ 2019-06-29 16:21 溜肉段小能手 阅读(332) 评论(0) 推荐(0) 编辑
摘要: 1.配置ip地址 打开VMware编辑的虚拟网络编辑器查看ip类型 进入centos界面,输入 进行如下配置 保存输入ifconfig查看ip是否配置成功 然后回到windows界面,打开cmd ping一下刚才设置的ip地址,会出现类似如下的请求应答包 最后ping一下百度看看网络是否正常 阅读全文
posted @ 2019-06-28 19:21 溜肉段小能手 阅读(166) 评论(0) 推荐(0) 编辑
摘要: 1.选择新建虚拟机选项,选择典型安装。点击下一步 2.选择稍后安装操作系统。点击下一步 3.选择linux操作系统,并根据自己的centOS版本进行选择。点击下一步 4.设置虚拟机名称和位置(最好单独为每一个虚拟机安装文件夹,因为文件较多,且与其他虚拟机有相同的文件)。点击下一步 5.设置磁盘大小( 阅读全文
posted @ 2019-06-28 17:03 溜肉段小能手 阅读(268) 评论(0) 推荐(0) 编辑
摘要: 仅仅将hive-site.xml拷贝到spark的conf目录下是不够的,还需要将mysql的jdbc驱动包拷贝到spark的jar目录下 阅读全文
posted @ 2019-06-27 09:17 溜肉段小能手 阅读(508) 评论(0) 推荐(0) 编辑
摘要: Tom,DataBase,80 Tom,Algorithm,50 Tom,DataStructure,60 Jim,DataBase,90 Jim,Algorithm,60 Jim,DataStructure,80 …… (1) 该系总共有多少学生; scala> val rdd = sc.text 阅读全文
posted @ 2019-06-21 14:41 溜肉段小能手 阅读(1722) 评论(0) 推荐(0) 编辑
摘要: hdfs dfsadmin -safemode leave 阅读全文
posted @ 2019-06-19 08:05 溜肉段小能手 阅读(643) 评论(0) 推荐(0) 编辑
摘要: 原因出在我的Spark配置的是一个集群,每一个节点都要工作,都要找到自己节点的本地文件,因此需要每一个节点的路径下都要存在对应的文件。 阅读全文
posted @ 2019-06-15 13:10 溜肉段小能手 阅读(1239) 评论(0) 推荐(0) 编辑