摘要：
ln -s 时bash: : Too many levels of symbolic links改为绝对路径， 阅读全文
posted @ 2016-01-05 17:26
xxxxxxxx1x2xxxxxxx
阅读(333)
评论(0)
推荐(0)
2016年1月5日 #
摘要：
Nutch网页抓取速度优化Here are the things that could potentially slow down fetching1) DNS setup2) The number of crawlers you have, too many, too few.3) Bandwid... 阅读全文
posted @ 2016-01-05 17:10
xxxxxxxx1x2xxxxxxx
阅读(171)
评论(0)
推荐(0)
摘要：
Nutch2.3 编译和安装配置[一]、介绍Nutch 是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。现在Nutch分为两个版本：1.x和2.x，这两个版本的 主要区别在于底层的存储不同。1.x版本是基于Hadoop架构的，底层存储使用的... 阅读全文
posted @ 2016-01-05 16:30
xxxxxxxx1x2xxxxxxx
阅读(473)
评论(0)
推荐(0)
摘要：
idea自动导包设置 1、配置 进入file-setting 2、说明 勾选标注第1个选项，IDEA 自动帮我们导入需要用到的包。但是对于那些同名的包，还是需要手动 Alt + Enter 进行导入的 勾选标注第2个选项，IDEA自动帮我们优化导入的包，比如自动去掉一些没有用到的包。 阅读全文
posted @ 2016-01-05 16:14
xxxxxxxx1x2xxxxxxx
阅读(402)
评论(0)
推荐(0)
摘要：
"技术框架太多，多的眼花缭乱，如何在众多选择中找到自己的方向？"，经常有人这么问我。咱们从开源项目说起，可以从两个维度来对开源项目进行分类，一方面是编程语言，另一方面是应用领域。首先说编程语言，像Java、C#、PHP、C/C++、Ruby、 Python、Go、JS、SCALA等等，有非常多的编程... 阅读全文
posted @ 2016-01-05 15:08
xxxxxxxx1x2xxxxxxx
阅读(195)
评论(0)
推荐(0)
摘要：
基于Nutch+Hadoop+Hbase+ElasticSearch的网络爬虫及搜索引擎网络爬虫架构在Nutch+Hadoop之上，是一个典型的分布式离线批量处理架构，有非常优异的吞吐量和抓取性能并提供了大量的配置定制选项。由于网络爬虫只负责网络资源的抓取，所以，需要一个分布式搜索引擎，用来对网络爬... 阅读全文
posted @ 2016-01-05 15:04
xxxxxxxx1x2xxxxxxx
阅读(251)
评论(0)
推荐(0)
摘要：
http://www.cnblogs.com/clarkchen/archive/2011/03/10/1980194.htmlhttp://www.cnblogs.com/freebsd-pann/archive/2011/11/08/2238163.htmlhttp://www.cnblogs.... 阅读全文
posted @ 2016-01-05 14:43
xxxxxxxx1x2xxxxxxx
阅读(148)
评论(0)
推荐(0)
摘要：
ant安装：http://apache.fayea.com//ant/binaries/apache-ant-1.9.6-bin.tar.gz/etc/profile添加：export ANT_HOME=/opt/apache-ant-1.9.6/export CLASSPATH=.:$ANT_HO... 阅读全文
posted @ 2016-01-05 14:16
xxxxxxxx1x2xxxxxxx
阅读(355)
评论(0)
推荐(0)
摘要：
当前位置:我的异常网» Web前端»selenium经过WebDriverWait实现ajax测试selenium经过WebDriverWait实现ajax测试www.MyException.Cn网友分享于：2013-09-12浏览：217次selenium通过WebDriverWait实现ajax... 阅读全文
posted @ 2016-01-05 11:03
xxxxxxxx1x2xxxxxxx
阅读(200)
评论(0)
推荐(0)
浙公网安备 33010602011771号