solr - 文章分类 - 清晰-模块-组合-优化

如何使SOLR系统自动AUTO COMMIT

摘要：1.为什么之前修改视频上下线，通知solr后，总有延迟才发现变过来！！在很多情况下，我们并不想自己主动触发COMMIT相应的XML给SOLR，这样带来很多的不便，恰好，SOLR通过配置文件可以自行在满足指定的条件下自动的COMMIT索引，同时，让前端检索实例可以检索到最新生成的数据，而不需要人为干预... 阅读全文

posted @ 2014-12-16 10:00 清晰-模块-组合-优化阅读(273) 评论(0) 推荐(0)

solr 之索引文件介绍（还有部分不懂）

摘要：1. fnm 域文件保存文件的filed 例如 id email name等。2.fdt fdx 存放着store=yes的值3.frq 相同的词语的次数。4.nrm 评分5.prx 偏移量6. 阅读全文

posted @ 2014-12-16 09:27 清晰-模块-组合-优化阅读(132) 评论(0) 推荐(0)

solr 之 facet 查询

摘要：1. 例子：http://172.16.132.159:6602/sse/vod_media/select?q=title%3A%E8%8B%B1%E9%9B%84&wt=json&facet=true&facet.field=category_idfacet_counts:{facet_queri... 阅读全文

posted @ 2014-12-15 17:00 清晰-模块-组合-优化阅读(413) 评论(0) 推荐(0)

solr 之 debug模式（待研究哈）

摘要：1.http://172.16.132.159:6602/sse/vod_media/select?q=title%3A%E5%8D%8E%E5%A4%8F%E6%96%87%E5%9C%B0%E7%90%86+&wt=json&debugQuery=on返回结果如下：debug:{rawquery... 阅读全文

posted @ 2014-12-15 16:01 清晰-模块-组合-优化阅读(218) 评论(0) 推荐(0)

solr 之缓存

摘要：1. fq + filterCache配合使用在13万条数据里面搜索，结果为4-5s，而不适用filterCache或者不使用fq（仅仅使用q），那么查询时间在9-10s左右！！http://172.16.132.159:6602/sse/vod_media/select?sort=modified... 阅读全文

posted @ 2014-12-15 14:27 清晰-模块-组合-优化阅读(97) 评论(0) 推荐(0)

solr 之二次开发需要研究的技术

摘要：1.solr 使用自定义的 QueryParser 阅读全文

posted @ 2014-12-15 14:05 清晰-模块-组合-优化阅读(163) 评论(0) 推荐(0)

solr 之 jar包

摘要：1.solr dataimport 的配置,即单独配置一个xml文件需要以下jar包。apache-solr-dataimporthandler-1.4.0.jar，apache-solr-dataimporthandler-extras-1.4.0.jar，mysql-connector-java... 阅读全文

posted @ 2014-12-15 13:54 清晰-模块-组合-优化阅读(362) 评论(0) 推荐(0)

solr4.8 高亮查询和配置

摘要：问题导读：1.solr如何实现高亮？2.solr高亮参数该如何配置？3.solr使用高亮时需要注意的地方？1.描述我们经常使用搜索引擎，比如在baidu 搜索 spring ，会出现如下结果，结果中与关键字匹配的地方是红色显示与其他内容区别开来。2.solr对高亮的支持solr 默认已经配置了hig... 阅读全文

posted @ 2014-12-11 15:23 清晰-模块-组合-优化阅读(158) 评论(0) 推荐(0)

solr 之实时更新/添加--文档

摘要：1. vod例子,当然一下是中文，需要进行utf-8编码即可：http://172.16.132.159:6602/sse/vod_media/update?wt=json&stream.body=110105464880110105464881001110105464881002110105464... 阅读全文

posted @ 2014-12-11 11:08 清晰-模块-组合-优化阅读(1325) 评论(0) 推荐(0)

Solr Field 延迟加载 enableLazyFieldLoading 分析 --------不懂

摘要：Solr Field 延迟加载 enableLazyFieldLoading 分析2011-10-18 13:38:38|分类：Luence/Solr|标签：solrenablelazyfieldloadi|举报|字号订阅此文原创，转载请说明出处：http://ronxin999.blog.163.... 阅读全文

posted @ 2014-12-10 10:00 清晰-模块-组合-优化阅读(536) 评论(0) 推荐(0)

solr 之 exception

摘要：1.Caused by: org.apache.lucene.search.BooleanQuery$TooManyClauses: maxClauseCount is set to 14原因：solrconfig.xml配置文件maxBooleanClauses 设置的太小导致的哈阅读全文

posted @ 2014-12-10 09:24 清晰-模块-组合-优化阅读(164) 评论(0) 推荐(0)

solr 之 solrconfig.xml

摘要：主要是配置索引的文件配置1、查询处理配置query标记段中以下一些与缓存无关的特性：maxBooleanClauses：就是一次查询字段的最大个数。2014-12-10 09:16:31,301 INFO [org.apache.solr.core.SolrCore] - 阅读全文

posted @ 2014-12-10 09:23 清晰-模块-组合-优化阅读(242) 评论(0) 推荐(0)

solr 之 synonyms.txt stopwords.txt

摘要：前提：索引和搜索都会加Factory1. 如果是StandardTokenizerFactory 那么查询时，synonyms.txt只能配置单个词或者类似植物》动物但不能 ” 英雄》植物“ 因为StandardTokenizerFactory 中文，默认就是字字分开，直接控制匹配度就行，... 阅读全文

posted @ 2014-12-09 16:33 清晰-模块-组合-优化阅读(2804) 评论(0) 推荐(0)

solr 之 datasource

摘要：DataSource(数据源)org.apache.solr.handler.dataimport.DataSource能被继承。public abstract class DataSource { /** * Initializes the DataSource with the Conte... 阅读全文

posted @ 2014-12-08 09:10 清晰-模块-组合-优化阅读(639) 评论(0) 推荐(0)

solr 之实体处理器（不懂）

摘要：yProcessor(实体处理器)默认的情况下，每个实体都会被sqlEntityProcessor处理。在系统使用RDBMS作为数据源的时候，它很适用。对于其他的数据源，例如 REST 或者不是sql的数据源，你可以选择继承org.apache.solr.handler.dataimport.... 阅读全文

posted @ 2014-12-08 09:06 清晰-模块-组合-优化阅读(455) 评论(0) 推荐(0)

solr 之数据源 xml/http格式的数据导入

摘要：1. 例子(1)data-config.xml (2) hello.xml文件如下： 1 1 1486705779268386816 2 2 1486705779269435392 3 3 1486705779269435393 3. ... 阅读全文

posted @ 2014-12-06 13:42 清晰-模块-组合-优化阅读(196) 评论(0) 推荐(0)

solr 之新知识

摘要：1.http://172.16.132.159:6602/sse/vod_media/dataimport?command=abort终止正在操作的命令2.=http://${ip}:${port}/sse/vod_media/dataimport?command=full-import\&comm... 阅读全文

posted @ 2014-12-06 13:36 清晰-模块-组合-优化阅读(167) 评论(0) 推荐(0)

solr 之数据源datasource

摘要：1. data-import.xml文件配置，注意确保entity的media_id唯一2. 结果：3. 详解：多数据源一个配置文件可以配置多个数据源。增加一个dataSource元素就可以增加一个数据源了。name属性可以区分不同的数据源。如果配置了多于一个的数据源，那么要注意将name配置成唯... 阅读全文

posted @ 2014-12-05 17:25 清晰-模块-组合-优化阅读(660) 评论(0) 推荐(0)

solr 之 transformer

摘要：1. 自己的例子，去掉手尾的半角空格：2. 然后 export->java->JAR file 即可打好一个jar包，起个名字叫ltz.jar包3. 把此jar包导入到solr，然后配置一下data-config.xml即可4. 最后处理结果如下5. 详细讲解：ransformer每一条从数据库中取... 阅读全文

posted @ 2014-12-05 14:07 清晰-模块-组合-优化阅读(635) 评论(0) 推荐(0)

一致性hash和solr千万级数据分布式搜索引擎中的应用

摘要：互联网创业中大部分人都是草根创业，这个时候没有强劲的服务器，也没有钱去买很昂贵的海量数据库。在这样严峻的条件下，一批又一批的创业者从创业中获得成功，这个和当前的开源技术、海量数据架构有着必不可分的关系。比如我们使用mysql、nginx等开源软件，通过架构和低成本服务器也可以搭建千万级用户访问量的系... 阅读全文

posted @ 2014-11-27 18:53 清晰-模块-组合-优化阅读(168) 评论(0) 推荐(0)

Refactoring

文章分类 - solr

公告