随笔分类 -  Hadoop相关

Hive导入数据的四种方法
摘要：Hive的几种常见的数据导入方式这里介绍四种：（1）、从本地文件系统中导入数据到Hive表；（2）、从HDFS上导入数据到Hive表；（3）、从别的表中查询出相应的数据并导入到Hive表中；（4）、在创建表的时候通过从别的表中查询出相应的记录并插入到所创建的表中。 一、从本地文件系统中导入数据到Hi 阅读全文
posted @ 2018-09-28 11:35 大嗯呐丶 阅读(7443) 评论(0) 推荐(0)
Hadoop提交作业流程
摘要：一 、需要知道的内容 1.ResourceManager >yarn的老大 2.NodeManager >yarn的小弟 3.ResourceManager调度器 a.默认调度器 >先进先出FIFO b.公平调度器 >每个任务都有执行的机会...... 4.心跳机制 >NodeManager可通过心 阅读全文
posted @ 2018-09-26 16:34 大嗯呐丶 阅读(1629) 评论(0) 推荐(0)