09 2020 档案

hadoop演进与hadoop生态
摘要：一、了解对比Hadoop不同版本的特性，可以用图表的形式呈现。 0.141 HDFS中更好的校验和。校验和不再存储在并行HDFS文件中，而是由数据节点与块一起直接存储。这对于命名节点更加有效，并且还提高了数据完整性。 管道：MapReduce的C ++ API Eclipse插件，包括HDFS浏览， 阅读全文
posted @ 2020-09-18 11:04 ☞简单、快乐ᝰ 阅读(178) 评论(0) 推荐(0)
大数据概念与资源
摘要：了解微信、微博、小视频每天产生的数据量与数据类型。 微信每天可以产生超过10亿人的数据量，数据类型有String、Number、Object、Array、Bool、Date、Geo、Null等 微博每天可以产生上亿条数据，数据类型有String、Number、Object、Array、Bool、Da 阅读全文
posted @ 2020-09-11 10:19 ☞简单、快乐ᝰ 阅读(304) 评论(0) 推荐(0)