随笔分类 -  大数据

solr+hadoop版本不一致导致的异常
摘要：Caused by: com.google.protobuf.InvalidProtocolBufferException: Protocol message contained an invalid tag (zero). at com.google.protobuf.InvalidProt... 阅读全文

posted @ 2014-05-21 14:47 里克尔奇 阅读(2459) 评论(0) 推荐(0)

solrcloud将索引数据写到hdfs
摘要：Running Solrcloud＋HdfsSolrCloud客户端Solr启动脚本SolrCloud＋Hdfs模式的solr启动脚本与之前稍有差异，如下：exec java $JVM_ARGS -Djetty.port=$1 -XX:MaxDirectMemorySize=5g -Dsolr.di... 阅读全文

posted @ 2014-05-21 12:12 里克尔奇 阅读(1344) 评论(0) 推荐(0)

Federation＋HA集群运维
摘要：Federation＋HA集群运维hadoop管理客户端copy一个hadoop部署目录作为客户端，用于集群的管理和监控，我的客户端如下：客户端目录：/home/deploy/hadoop/ hadoop-2.0.6-cilent-lin修改客户端hadoop的core-site.xml fs.de... 阅读全文

posted @ 2014-05-21 11:54 里克尔奇 阅读(311) 评论(0) 推荐(0)

Hadoop2搭建Federation+HA
摘要：一、知识框架整体架构后续会和solr集群一起。HA还是看官网吧～ http://hadoop.apache.org/docs/r2.2.0/hadoop-yarn/hadoop-yarn-site/HDFSHighAvailabilityWithQJM.htmlHDFS Federation 官网官... 阅读全文

posted @ 2014-05-21 11:37 里克尔奇 阅读(366) 评论(0) 推荐(0)