Dlimeng

2017年6月6日

摘要： 1.安装环境说明：三台Centos7 Jdk1.7 Mysql5.7 2.操作系统准备 2.1配置ssh免密码登录 mkdir ~/.ssh/ ssh-keygen -t rsa （四个回车）执行完这个命令后，会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥）将公钥拷贝到要免登陆阅读全文

posted @ 2017-06-06 16:11 Dlimeng 阅读(16) 评论(0) 推荐(0)

solr系列--solrj使用

摘要： solrj是solr的java客户端，用于访问solr索引库。它提供了添加、删除、查询、优化等功能。配置jar: /dist/solrj-lib下的所有jar solr-solrj-5.2.1.jar server/lib/ext下所有jar 如果Maven来构建项目，添加以下代码到你的pom.x 阅读全文

posted @ 2017-06-06 16:06 Dlimeng 阅读(7) 评论(0) 推荐(0)

solr系列--索引库存储在hdfs中

摘要：软件准备： 1.Tomcat 2.solr-5.2.1.tgz 3.hadoop-2.7.2 运行环境 centos7 看以前文档hadoop安装好在hadoop-2.7.2/etc/hadoop下的hdfs-site.xml增加了以下内容 <property> <name>dfs.webhdfs 阅读全文

posted @ 2017-06-06 16:05 Dlimeng 阅读(5) 评论(0) 推荐(0)

solr系列--导入文件

摘要： dataimporthandler插件导入pdf 从PDF文件中提取文本进行索引首先依然是在solrconfig.xml配置文件中配置dataimport请求处理器，并指定data-config.xml配置文件加载路径： <requestHandler name="/dataimport" cla 阅读全文

posted @ 2017-06-06 16:03 Dlimeng 阅读(17) 评论(0) 推荐(0)

ambari系列--报错问题

摘要： hbase 启动不起来，通常是因为节点日期不同步。 HDFS 无法启动，通常是因为hdfs 进入了安全模式，需要先退出来，再启动。 hadoop dfsadmin -safemode leave repo源的地址是可以随时更改的。更改路径：admin -> stacks and Versions 阅读全文

posted @ 2017-06-06 15:40 Dlimeng 阅读(70) 评论(0) 推荐(0)

2017年5月17日

Phoenix优化

摘要： hbase-site.xml： <property> <name>hbase.master.maxclockskew</name> <value>45000000</value> </property> <property> <name>hbase.rpc.timeout</name> <value 阅读全文

posted @ 2017-05-17 18:02 Dlimeng 阅读(16) 评论(0) 推荐(0)

2017年5月12日

Phoenix 批量增加

摘要： 1.phoenix 利用CsvBulkLoadTool 批量带入数据并自动创建索引在phoenix 目录下执行 hadoop jar /home/phoenix-4.6.0-HBase-1.0-bin/phoenix-4.6.0-HBase-1.0-client.jar org.apache.ph 阅读全文

posted @ 2017-05-12 15:35 Dlimeng 阅读(47) 评论(0) 推荐(0)

2017年5月9日

squirrel-sql Phoenix安装

摘要：下载安装略导入jar: phoenix-4.8.1-HBase-1.2-client phoenix-4.8.1-HBase-1.2-queryserver phoenix-4.8.1-HBase-1.2-server phoenix-4.8.1-HBase-1.2-thin-client ph 阅读全文

posted @ 2017-05-09 13:56 Dlimeng 阅读(10) 评论(0) 推荐(0)

2017年5月3日

lucene,solr,nutch,hadoop的区别和联系

摘要： apache lucene是apache下一个著名的开源搜索引擎内核，基于Java技术，处理索引，拼写检查，点击高亮和其他分析，分词等技术。 nutch和solr原来都是lucene下的子项目。但后来nutch独立成为独立项目。nutch是2004年由俄勒冈州立大学开源实验室模仿google搜索引擎阅读全文

posted @ 2017-05-03 10:44 Dlimeng 阅读(11) 评论(0) 推荐(0)

lucene,solr,nutch,hadoop的区别和联系_李孟_新浪博客

摘要：引用：http://blog.itpub.net/8912125/viewspace-1120496/ apache lucene是apache下一个著名的开源搜索引擎内核，基于Java技术，处理索引，拼写检查，点击高亮和其他分析，分词等技术。 nutch和solr原来都是lucene下的子项目。但阅读全文

posted @ 2017-05-03 10:44 Dlimeng 阅读(7) 评论(0) 推荐(0)

公告