07 2017 档案

摘要:Elasticsearch简介 Elasticsearch (ES)是一个基于Apache Lucene(TM)的开源搜索引擎,无论在开源还是专有领域,Lucene可以被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。 但是,Lucene只是一个库。想要发挥其强大的作用,你需使用C#将其集成 阅读全文
posted @ 2017-07-27 13:49 领悟.海洋 阅读(19588) 评论(5) 推荐(4)
摘要:之前都是用正则抓取页面,本人正则不咋地,有些东西用抓取来很费劲,呵呵 在网上看到别人推荐一个 HtmlAgilityPack 的东西,网上找了资料,自己写了个抓取网页的例子,框架用的ASP.NET MVC 4,先看看效果 演示地址:http://www.5imvc.com/Html/cnblogs 阅读全文
posted @ 2017-07-24 11:01 领悟.海洋 阅读(451) 评论(2) 推荐(0)
摘要:刚刚学习了XPath路径表达式,主要是对XML文档中的节点进行搜索,通过XPath表达式可以对XML文档中的节点位置进行快速定位和访问,html也是也是一种类似于xml的标记语言,但是语法没有那么严谨,在codeplex里有一个开源项目HtmlAgilityPack,提供了用XPath解析HTML文 阅读全文
posted @ 2017-07-14 16:45 领悟.海洋 阅读(500) 评论(0) 推荐(0)
摘要:原文转至: http://www.cnblogs.com/coco1s/p/4954063.html 写这篇 blog 其实一开始我是拒绝的,因为爬虫爬的就是cnblog博客园。搞不好编辑看到了就把我的账号给封了:)。 言归正传,前端同学可能向来对爬虫不是很感冒,觉得爬虫需要用偏后端的语言,诸如 p 阅读全文
posted @ 2017-07-10 16:01 领悟.海洋 阅读(253) 评论(0) 推荐(0)
摘要:原文转至:http://www.cnblogs.com/shanyou/p/3221990.html 之前整理过一篇文章《zookeeper 分布式锁服务》,本文介绍的 Zookeeper 是以 3.4.5 这个稳定版本为基础,最新的版本可以通过官网 http://hadoop.apache.org 阅读全文
posted @ 2017-07-06 09:48 领悟.海洋 阅读(6359) 评论(1) 推荐(2)