Fork me on GitHub
摘要: hadoop-04 1.流量案例分析 统计每个人总流量 import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.apac 阅读全文
posted @ 2020-11-29 23:16 是阿凯啊 阅读(116) 评论(0) 推荐(0)
摘要: hadoop 03 1.checkpoint机制 hadoop如何进行checkpoint的呢? hdfs的源数据记录在内存中,它是一个对象。当客户端进行hdfs操作(rm mkdir...),然后传输给服务端namenode进行解析,执行更新操作,为了保证数据持久化,它会把数据进行序列化存储,当然 阅读全文
posted @ 2020-11-29 11:41 是阿凯啊 阅读(126) 评论(0) 推荐(0)