随笔分类 -  Hadoop

摘要：一直使用hbase作大容量存储，因为hbase易于存取。今天，在录入数据的时候，突然报出一个KeyValue size too large。很是奇怪。后来发现，该数据特别大，经查源码 Java代码 private void validatePut(final Put put) throws Ille 阅读全文

摘要：生活中，可能所有人都间接用过他的作品，他是Lucene、Nutch 、Hadoop等项目的发起人。是他，把高深莫测的搜索技术形成产品，贡献给普罗大众；还是他，打造了目前在云计算和大数据领域里如日中天的Hadoop。他是某种意义上的盗火者，他就是Doug Cutting。从实习生做起1985年，Cutting毕业于美国斯坦福大学。他并不是一开始就决心投身IT行业的，在大学时代的头两年，Cutting学习了诸如物理、地理等常规课程。因为学费的压力，Cutting开始意识到，自己必须学习一些更加实用、有趣的技能。这样，一方面可以帮助自己还清贷款，另一方面，也是为自己未来的生活做打算。因为斯坦福大学座 阅读全文