随笔分类 -  Hadoop

摘要：ZooKeeper 是一个分布式开源框架，提供了协调分布式应用的基本服务，它向外部应用暴露一组通用服务——分布式同步（Distributed Synchronization）、命名服务（Naming Service）、集群维护（Group Maintenance）等，简化分布式应用协调及其管理的难度，提供高性能的分布式服务。ZooKeeper本身可以以Standalone模式安装运 行，不过它的长处在于通过分布式ZooKeeper集群（一个Leader，多个Follower），基于一定的策略来保证ZooKeeper集群的稳定 性和可用性，从而实现分布式应用的可靠性。有关ZooKeeper的介绍 阅读全文

摘要：最近几天闲来无事，准备研究一下Hadoop，折腾了一个星期，总算在elcipse下将WordCount跑起来了，写篇日志，以做记录。各种下载请看这里，http://dl.dbank.com/c0b3kwezsa，这个搭配完全可以运行，一开始下载了各种版本的eclipse和hadoop，结果搭配不是那么完美。ubuntu的安装就不在这里介绍了，ubuntu11.10的软件源里没有jdk，索性连jdk的安装也在这里一并说了。主要说一下jdk，hadoop，eclipse的安装。1. JDK的安装（jdk-6u30-linux-i586.bin）sudo cp jdk-6u30-linux-i5.. 阅读全文