2021年2月2日
Hive学习总结
摘要： Hive学习总结 环境配置 本人用的是mysql存储hive元数据，需要提前下载mysql hive-env.sh # Set HADOOP_HOME to point to a specific hadoop install directory HADOOP_HOME=/export/server 阅读全文
posted @ 2021-02-02 23:08 公鸡不下蛋 阅读(169) 评论(0) 推荐(0)
MapReduce学习总结
摘要： MapReduce计算过程 全流程 文件读取阶段 MapReduce默认是Text读取方式，即一行一行读取文本内容，以读取数据的偏移量，每行文本内容组成”KEY-VALUE“键值对输送给下一阶段。 PS：如果指定一个文件夹，则会读取文件夹下所有文件；如果指定文件，则只会读取此文件。 Map阶段 在M 阅读全文
posted @ 2021-02-02 23:02 公鸡不下蛋 阅读(560) 评论(0) 推荐(0)