代码改变世界

随笔分类 -  0_jediael开发

【Nutch2.3基础教程】集成Nutch/Hadoop/Hbase/Solr构建搜索引擎:安装及运行【集群环境】

2015-01-24 17:24 by jediael, 256 阅读, 收藏,
摘要: 1、下载相关软件,并解压版本号如下:(1)apache-nutch-2.3(2) hadoop-1.2.1(3)hbase-0.92.1(4)solr-4.9.0并解压至/opt/jediael。若要下载最新的开发版本nutch,可以进行以下操作 svn co https://svn.apache.... 阅读全文

搭建hbase-0.94.26集群环境

2015-01-24 17:14 by jediael, 173 阅读, 收藏,
摘要: 先安装hadoop1.2.1,见http://blog.csdn.net/jediael_lu/article/details/389264771、配置hbase-site.xml hbase.zookeeper.quorum master,slave1,slave2 hbase.... 阅读全文

安装hadoop1.2.1集群环境

2014-08-29 15:49 by jediael, 159 阅读, 收藏,
摘要: 一、规划(一)硬件资源10.171.29.191 master10.173.54.84 slave110.171.114.223 slave2(二)基本资料用户: jediael目录:/opt/jediael/二、环境配置(一)统一用户名密码,并为jediael赋予执行所有命令的权限#passwd#... 阅读全文

【solr专题之四】在Tomcat 中部署Solr4.x

2014-07-17 16:08 by jediael, 174 阅读, 收藏,
摘要: 1、安装Tomcat(1)下载并解压至/opt/tomcat中# cd /opt/jediael# tar -zxvf apache-tomcat-7.0.54.tar.gz # mv apache-tomcat-7.0.54 tomcat 将目录重命名为tomcat# lsapache-tom... 阅读全文

【搜索引擎Jediael开发4】V0.01完整代码

2014-05-21 21:35 by jediael, 108 阅读, 收藏,
摘要: 截止目前,已完成如下功能:1、指定某个地址,使用HttpClient下载该网页至本地文件2、使用HtmlParser解释第1步下载的网页,抽取其中包含的链接信息3、下载第2步的所有链接指向的网页至本地文件下一步需要完成的功能:1、创建用于保存种子URL的配置文件及其数据结构2、创建用于保存Todo信... 阅读全文