pannyvan

导航

2014年7月22日 #

hbase首次导入大批次的数据成功!

摘要: 本次主要是采用hbase自带的importtsv工具来导入。首先要把数据文件上传到hdfs上,然后导入hbase表格。该导入方式只支持.tsv数据文件的导入。导入流程:1.下载数据。我们在本文中将使用 “美国国家海洋和大气管理局 气候平均值”的公共数据集合。访问http://www1.ncdc.no... 阅读全文

posted @ 2014-07-22 16:19 pannyvan 阅读(1162) 评论(1) 推荐(0) 编辑

2014年7月14日 #

Chubby是什么?

摘要: 先简单的理解,以后补充:为了解决hadoop分布式系统的一致性问题 ,有很多人提出很多protocol,其中就有有名的Paxos算法(Latex作者提出,算法需要学习),但是Chubby并不是一个算法或者protocol,它是一项service,是一个lock service,这个service的实... 阅读全文

posted @ 2014-07-14 14:26 pannyvan 阅读(978) 评论(0) 推荐(0) 编辑