One-Way
爱一人,攀一山,追一梦
posts - 113,  comments - 12,  trackbacks - 0
摘要:操作系统 CentOS7.5.1804 下载地址:http://mirrors.163.com/centos/7.5.1804/isos/x86_64/ 安装Ambari说明:https://hortonworks.com/downloads/#data-platform 版本和操作系统的对应关系: 阅读全文
posted @ 2018-12-09 00:51 单行道| 阅读 (46) 评论 (0) 编辑
摘要:Google机器学习课程基于TensorFlow : https://developers.google.cn/machine-learning/crash-course https://developers.google.com/machine-learning/crash-course 阅读全文
posted @ 2018-03-01 13:06 单行道| 阅读 (2030) 评论 (0) 编辑
摘要:一、隐式转换 隐式转换函数: 指的是以implicit关键字声明的带有单个参数的函数。这样的函数将被自动应用,将值从一种类型转换为另一种类型。 例子: 结果: 二、利用隐式转换丰富现有类库的功能 结果: 三、引入隐式转换 Scala会考虑如下的隐式转换函数: 1.位于源或目标类型的伴生对象中的隐式函 阅读全文
posted @ 2018-02-08 17:54 单行道| 阅读 (92) 评论 (0) 编辑
摘要:模式匹配应用场景:switch语句,类型查询,析构,样例类 一、更好的switch case _ 匹配其他情况,case 结尾不需要break跳出 二、守卫 守卫可以是任何Boolean条件; 匹配是顺序下来的,上面的例子是匹配不到守卫的。 三、模式中的变量 case _ 看做是这个特性的一个特殊情 阅读全文
posted @ 2018-02-01 17:47 单行道| 阅读 (69) 评论 (0) 编辑
摘要:Spark性能优化指南——基础篇 https://tech.meituan.com/spark-tuning-basic.html Spark性能优化指南——高级篇 https://tech.meituan.com/spark-tuning-pro.html [Spark性能调优] 第二章:彻底解密 阅读全文
posted @ 2018-01-09 15:56 单行道| 阅读 (111) 评论 (0) 编辑
摘要:异常:进入Hive View提示user home check fail 详细日志:Service 'userhome' check failed: java.io.FileNotFoundException: File does not exist: /user/admin 处理方式: 查看目录结 阅读全文
posted @ 2017-12-30 18:25 单行道| 阅读 (1582) 评论 (0) 编辑
摘要:指定行:n 光标行之前或之后的n个字符nl 之后 2l 光标位置两个字符后nh 之前 2h 光标位置两个字符前 光标行之上或之下的n个字符nk 之上 1k 光标位置1个字符之上nj 之下 1j 光标位置1个字符之下 在vi的命令状态下,执行如下指令 ::%!xxd 将当前文本转换为16进制格式,十六 阅读全文
posted @ 2017-11-21 17:14 单行道| 阅读 (2123) 评论 (0) 编辑
摘要:方法1: hive -f sql文件 t.sql文件内容: 执行命令 方法2: 进入hive shell, 执行source命令 进入hive 终端 使用source命令执行 阅读全文
posted @ 2017-10-09 10:46 单行道| 阅读 (12790) 评论 (0) 编辑
摘要:知识点1:创建关联Hbase的Hive表 知识点2:Spark访问Hive 知识点3:Spark访问与Hbase关联的Hive表 知识点1:创建关联Hbase的Hive表 两种方式创建,内部表和外部表 内部表,如果删除hive表,hbase表也会删除;不建议使用这种方式,大多数都是关联进行查询操作 阅读全文
posted @ 2017-10-03 14:12 单行道| 阅读 (3172) 评论 (0) 编辑
摘要:终于完成了这个课程,从开始学习,到现在差不多过了一年的时间,中间由于一些原因耽搁了,最终还是完成了,记录一下! 阅读全文
posted @ 2017-09-26 17:06 单行道| 阅读 (94) 评论 (0) 编辑