文章分类 -  hive

• 记一次22亿大数据分析处理踩坑实践
  摘要：1. hive脚本相关操作 2. mysql数据插入,批量插入脚本的使用,及其中我遇到的一些坑. 3. 脚本处理数据的一些操作(遍历目录下的每一个文件, 遍历文件的每一行,获取每一行中的每一列,记录shell线程,执行时间,函数传参和返回值) 4. 理解做事情的思路是多么的重要. 5. 这是一次xxx的经历. 阅读全文
  posted @ 2017-04-17 17:45 奔跑的小河 阅读(153) 评论(0) 推荐(0)