摘要: 作用 保存执行job任务节点的执行日志 将多个节点执行map任务的日志和最终reduce日志聚合在一起 在mapred-site.xml中添加配置 1 <property> 2 <name>mapreduce.jobhistory.address</name> 3 <value>hostname:1 阅读全文
posted @ 2020-04-18 15:19 Q1Zhen 阅读(292) 评论(0) 推荐(0)
摘要: 如何对NameNode中数据持久化 FsImage:保存NameNode当前这一时刻数据状态 Editslog:日志文件,只记录client到hdfs写操作(二进制文件) Editslog和FsImage会定期合并,这项任务由SecondNameNode执行,当在合并的时候,客户端执行的写操作不再写 阅读全文
posted @ 2020-04-18 11:06 Q1Zhen 阅读(164) 评论(0) 推荐(0)