yyyyyyyyyyyyyyyyyyyy

摘要： Nutch网页抓取速度优化Here are the things that could potentially slow down fetching1) DNS setup2) The number of crawlers you have, too many, too few.3) Bandwid... 阅读全文

摘要： 裁剪nutch 8步骤 阅读全文

摘要： Nutch2.3 编译和安装配置[一]、介绍Nutch 是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。现在Nutch分为两个版本：1.x和2.x，这两个版本的 主要区别在于底层的存储不同。1.x版本是基于Hadoop架构的，底层存储使用的... 阅读全文

摘要： idea自动导包设置 1、配置 进入file-setting 2、说明 勾选标注第1个选项，IDEA 自动帮我们导入需要用到的包。但是对于那些同名的包，还是需要手动 Alt + Enter 进行导入的 勾选标注第2个选项，IDEA自动帮我们优化导入的包，比如自动去掉一些没有用到的包。 阅读全文

摘要： "技术框架太多，多的眼花缭乱，如何在众多选择中找到自己的方向？"，经常有人这么问我。咱们从开源项目说起，可以从两个维度来对开源项目进行分类，一方面是编程语言，另一方面是应用领域。首先说编程语言，像Java、C#、PHP、C/C++、Ruby、 Python、Go、JS、SCALA等等，有非常多的编程... 阅读全文

摘要： 基于Nutch+Hadoop+Hbase+ElasticSearch的网络爬虫及搜索引擎网络爬虫架构在Nutch+Hadoop之上，是一个典型的分布式离线批量处理架构，有非常优异的吞吐量和抓取性能并提供了大量的配置定制选项。由于网络爬虫只负责网络资源的抓取，所以，需要一个分布式搜索引擎，用来对网络爬... 阅读全文

摘要： http://www.cnblogs.com/clarkchen/archive/2011/03/10/1980194.htmlhttp://www.cnblogs.com/freebsd-pann/archive/2011/11/08/2238163.htmlhttp://www.cnblogs.... 阅读全文

摘要： ant安装：http://apache.fayea.com//ant/binaries/apache-ant-1.9.6-bin.tar.gz/etc/profile添加：export ANT_HOME=/opt/apache-ant-1.9.6/export CLASSPATH=.:$ANT_HO... 阅读全文

摘要： 当前位置:我的异常网» Web前端»selenium经过WebDriverWait实现ajax测试selenium经过WebDriverWait实现ajax测试www.MyException.Cn网友分享于：2013-09-12浏览：217次selenium通过WebDriverWait实现ajax... 阅读全文

摘要： 查看当前android设备已安装的第三方包 adbshellpmlistpackage-32 adbshell"getpropro.build.version.sdk" 阅读全文