03 2018 档案

摘要:Hadoop 产生背景及发展历程? Hadoop 产生背景 ● Hadoop最早起源于Nutch。 ● Nutch的设计目标是构建一个大型的全网搜索引擎,包括网页抓取、索引、查询等功能,但随着抓取网页数量的增加,它遇到了严重的可扩展性问题,它不能解决数十亿网页的存储与索引问题。 ● 谷歌发表了两篇论 阅读全文
posted @ 2018-03-23 11:43 进阶仙女 阅读(223) 评论(0) 推荐(0)
摘要:剖析美国平均气温项目,掌握MapReduce编程 MapReduce 是一种可用于数据处理的编程模型。该模型比较简单,但要想写出有用的程序却不太容易。Hadoop 可以运行各种语言版本的 MapReduce 程序, 比如Java、Ruby、Python和C++语言版本。最重要的是,MapReduce 阅读全文
posted @ 2018-03-23 11:43 进阶仙女 阅读(559) 评论(0) 推荐(0)