随笔分类 -  Hadoop

Hadoop相关
The Road To Hadoop(网盘系统的实现)
摘要:因为毕业设计的原因,得从零开始学习hadoop。虽然接触Hadoop也有一段时间了,但是没有一个完整的时间段去学习,在公司实习的同时,只能利用零零碎碎的时间学习,今天完成了第一个版本的基于Hadoop的云存储系统,实际上就是平常用的网盘。该版本实现了网盘应有的基本功能,借此总结一下实现过程中的... 阅读全文

posted @ 2015-04-12 22:31 itRed 阅读(5727) 评论(3) 推荐(2)

Hadoop入门学习笔记---part4
摘要:紧接着《Hadoop入门学习笔记---part3》中的继续了解如何用java在程序中操作HDFS。 众所周知,对文件的操作无非是创建,查看,下载,删除。下面我们就开始应用java程序进行操作,前提是按照《Hadoop入门学习笔记---part2》中的已经在虚拟机中搭建好了Hadoop伪分布环... 阅读全文

posted @ 2015-01-04 20:59 itRed 阅读(878) 评论(0) 推荐(0)

Hadoop入门学习笔记---part3
摘要:2015年元旦,好好学习,天天向上。良好的开端是成功的一半,任何学习都不能中断,只有坚持才会出结果。继续学习Hadoop。冰冻三尺,非一日之寒! 经过Hadoop的伪分布集群环境的搭建,基本对Hadoop有了一个基础的了解。但是还是有一些理论性的东西需要重复理解,这样才能彻底的记住它们。个人认为重... 阅读全文

posted @ 2015-01-01 19:37 itRed 阅读(1043) 评论(0) 推荐(0)

Hadoop入门学习笔记---part2
摘要:在《Hadoop入门学习笔记---part1》中感觉自己虽然总结的比较详细,但是始终感觉有点凌乱。不够系统化,不够简洁。经过自己的推敲和总结,现在在此处概括性的总结一下,认为在准备搭建hadoop环境时,需要在linux机器上做一些设置,在搭建Hadoop集群环境前,需要在本地机器上做以下设置:... 阅读全文

posted @ 2014-12-28 20:31 itRed 阅读(1177) 评论(1) 推荐(1)

Hadoop入门学习笔记---part1
摘要:随着毕业设计的进行,大学四年正式进入尾声。任你玩四年的大学的最后一次作业最后在激烈的选题中尘埃落定。无论选择了怎样的选题,无论最后的结果是怎样的,对于大学里面的这最后一份作业,也希望自己能够尽心尽力,好好做。正是因为选题和hadoop有关,现在正式开始学习hadoop。将笔记整理于此,希望与志同道... 阅读全文

posted @ 2014-12-27 22:50 itRed 阅读(1575) 评论(1) 推荐(2)

导航