2017年6月6日
Ambari介绍
摘要： Ambari目标 解决Hadoop生态系统部署 部署：hadoop组件间有依赖，包括配置、版本、启动顺序、权限配置等。 部署过程跟踪。能够展示出部署过程中每个步骤的状态及相关信息。 多机部署问题，当集群规模增加后，机器出问题机率增加，在部署或更新中可能会出现机器故障 组件本身设计：hadoop及其组 阅读全文
posted @ 2017-06-06 16:27 Dlimeng 阅读(34) 评论(0) 推荐(0)
Ambari介绍_李孟_新浪博客
摘要： Ambari目标 解决Hadoop生态系统部署 部署：hadoop组件间有依赖，包括配置、版本、启动顺序、权限配置等。 部署过程跟踪。能够展示出部署过程中每个步骤的状态及相关信息。 多机部署问题，当集群规模增加后，机器出问题机率增加，在部署或更新中可能会出现机器故障 组件本身设计：hadoop及其组 阅读全文
posted @ 2017-06-06 16:27 Dlimeng 阅读(33) 评论(0) 推荐(0)
ambari安装
摘要： 1.安装环境说明： 三台Centos7 Jdk1.7 Mysql5.7 2.操作系统准备 2.1配置ssh免密码登录 mkdir ~/.ssh/ ssh-keygen -t rsa （四个回车） 执行完这个命令后，会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥） 将公钥拷贝到要免登陆 阅读全文
posted @ 2017-06-06 16:11 Dlimeng 阅读(32) 评论(0) 推荐(0)
solr系列--solrj使用
摘要： solrj是solr的java客户端，用于访问solr索引库。它提供了添加、删除、查询、优化等功能。 配置jar: /dist/solrj-lib下的所有jar solr-solrj-5.2.1.jar server/lib/ext下所有jar 如果Maven来构建项目，添加以下代码到你的pom.x 阅读全文
posted @ 2017-06-06 16:06 Dlimeng 阅读(19) 评论(0) 推荐(0)
solr系列--索引库存储在hdfs中
摘要： 软件准备： 1.Tomcat 2.solr-5.2.1.tgz 3.hadoop-2.7.2 运行环境 centos7 看以前文档hadoop安装好 在hadoop-2.7.2/etc/hadoop下的hdfs-site.xml增加了以下内容 <property> <name>dfs.webhdfs 阅读全文
posted @ 2017-06-06 16:05 Dlimeng 阅读(12) 评论(0) 推荐(0)
solr系列--导入文件
摘要： dataimporthandler插件导入pdf 从PDF文件中提取文本进行索引 首先依然是在solrconfig.xml配置文件中配置dataimport请求处理器，并指定data-config.xml配置文件加载路径： <requestHandler name="/dataimport" cla 阅读全文
posted @ 2017-06-06 16:03 Dlimeng 阅读(30) 评论(0) 推荐(0)
ambari系列--报错问题
摘要： hbase 启动不起来，通常是因为节点日期不同步。 HDFS 无法启动，通常是因为hdfs 进入了安全模式，需要先退出来，再启动。 hadoop dfsadmin -safemode leave repo源的地址是可以随时更改的。 更改路径：admin -> stacks and Versions 阅读全文
posted @ 2017-06-06 15:40 Dlimeng 阅读(110) 评论(0) 推荐(0)