随笔分类 -  OPEN SOURCE

摘要：上一篇博客中叙述了如何利用nutch爬取网页的过程。本篇则讲述建立逆向索引以及与solr结合展示结果的方法。1. 建立逆向索引 所谓的逆向索引，其实就是从词（字符串）到文本的映射。一般而言，在爬取网页后，我们会自然而然的会得到一种索引——从文本到词的映射，即查询条件为文本，查询结果为该文本中包含哪... 阅读全文

摘要：最近由于项目需要，大致研究了一下protobuf的java使用。说实话，习惯了C++的protobuf，java用起来真别扭。java在mongodb中的存储其实非常方便，假设有定义一个proto，如下所示：message User{ required int64 id = 1; req... 阅读全文