Hubble.Net

HubbleDotNet 开源全文搜索数据库项目--内存索引

摘要: 经过2周多的努力，HubbleDotNet 的内存索引功能终于搞好了。有了内存索引，搜索不再去读硬盘，实时性大大提高了。hubble的内存索引不同于lucene 的内存索引，本文将具体介绍一下hubble 的内存索引功能和一些内部机制。阅读全文

posted @ 2011-08-10 06:09 eaglet 阅读(3227) | 评论 (39) 编辑 |

1.1.4.0 改动说明(这个版本单个关键字的查询速度大幅提高了)

摘要: 1.1.4.0 版本对底层的查询算法做了很大改进，特别是对单个关键字的查询速度，原来版本当匹配100万时用时 130ms，这个版本用时只有30ms。这个速度大概是 lucene.net 的三倍左右。阅读全文

posted @ 2011-07-24 17:11 eaglet 阅读(930) | 评论 (5) 编辑 |

HubbleDotNet--自定义分词器

摘要: HubbleDotNet 在设计之初就定位为一个开放式的搜索平台，分词器，得分算法，数据库适配器，存储过程，函数等等都可以通过编写自定义的插件来定制。目前版本分词器，数据库适配器的自定义接口已经开放，得分算法的自定义接口也将在最近开放出来。本文将讲述如何编写自己的分词器。阅读全文

posted @ 2011-06-03 06:05 eaglet 阅读(2483) | 评论 (15) 编辑 |

摘要: HubbleDotNet 1.1.2 以前版本客户端和服务器之间都是同步 TCP Socket 方式通讯，这种方式要为每个连接保持一个TCP通道，每次建立连接都要创建新的TCP连接，效率很低。而且有最大连接数限制，当服务器很忙时，1.1.2 以前版本经常会出现 Too many connects on server 错误，虽然通过增大 MaxConnectNum 的值可以缓解，但无法根治。1.1.2 版本推出了全新的异步通讯模式，同一个客户端和服务器之间所有的 Hubbble 连接都共用一个 TCP 链路，这个设计彻底解决了最大连接数不够的问题，大大提高了系统的处理能力阅读全文

posted @ 2011-05-30 08:11 eaglet 阅读(2176) | 评论 (9) 编辑 |

HubbleDotNet 分布式检索算法介绍 (一)

摘要: 全文索引的分布式检索粗想想似乎很简单，感觉就是把多个接入点搜索出来的数据做个合并排序就可以，但如果想要做好，满足商业应用要求，这里面涉及到很多算法优化的问题，比如多路排序的优化，动态路由，翻页的优化，通讯的优化，分发复制，冗余和故障转移等等。从今天开始，我将逐步讲解HubbleDotNet 在分布式检索方面的众多算法考虑。由于涉及的算法很多，无法在一篇全部阐述，我打算采用由浅入深的思路，先从比较简单的算法开始。本文将介绍翻页的优化技术。阅读全文

posted @ 2011-05-18 08:48 eaglet 阅读(2490) | 评论 (14) 编辑 |

HubbleDotNet 软件架构

摘要: HubbleDotNet 目前已经有很多用户，但大部分用户还仅仅停留在使用层面，真正深入去研究和了解的人不是很多。作为一个开源项目，HubbleDotNet 除了可以提供应用的需要外，其本身的代码对希望了解信息检索和底层软件开发技术的开发人员也应该有一定的参考作用。为了方便对这方面感兴趣的开发人员阅读和理解 HubbleDotNet 的代码，我把HubbleDotNet 的软件设计架构公布出来，供大家参考。HubbleDotNet中文社区目前还不是很活跃，主要还是我一个人在回答其他网友的提问，我希望对这方面有兴趣的网友在深入了解了HubbleDotNet 的内部机制后，可以更多的参与到这个社区的建设中来，众人拾柴火焰高。阅读全文

posted @ 2011-03-04 10:49 eaglet 阅读(3945) | 评论 (23) 编辑 |

HubbleDotNet 之后台任务调度

摘要: HubbleDotNet 1.1 版本提供了一个后台任务调度功能，这个功能可以让你设置一些后台任务来定时执行一些系统维护操作，比如同步数据，优化索引等等。以前版本这些功能都需要使用者自己编程实现，1.1 以后版本只需要做个设置就可以了，不需要写任何代码了。阅读全文

posted @ 2011-03-02 19:57 eaglet 阅读(2354) | 评论 (18) 编辑 |

索引缓存方面的一些测试数据

posted @ 2011-01-11 12:28 eaglet 阅读(494) | 评论 (1) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--大量并发访问的解决方案

摘要: HubbleDotNet 推出一年多来，得到了大量用户的支持和使用，其中有些用户的搜索访问量较大，在使用过程中有时会因为同时并发访问过大，出现 Too many connects on server 这个错误，为了缓解这个问题，HubbleDotNet 的 V1.0.4.0 版本做了一些改进，本文将介绍这个改进即相关原理。阅读全文

posted @ 2010-11-26 07:32 eaglet 阅读(4977) | 评论 (17) 编辑 |

HubbleDotNet自动与Oracle中的数据同步解析

摘要: 本文解析HubbleDotNet 如何和 Oracle 数据库连接并同步。阅读全文

posted @ 2010-09-21 09:21 eaglet 阅读(822) | 评论 (4) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--指定文档权重

摘要: 本文讲述如何指定文档的权重阅读全文

posted @ 2010-09-15 14:20 eaglet 阅读(873) | 评论 (18) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--指定字段权重

摘要: 本文讲述如何在搜索时指定字段权重阅读全文

posted @ 2010-09-15 14:13 eaglet 阅读(683) | 评论 (0) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--指定单词权重

摘要: 本文讲述如何在搜索时指定单词权重阅读全文

posted @ 2010-09-15 14:08 eaglet 阅读(888) | 评论 (3) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--建立数据表

摘要: 本文讲述如何创建 HubbleDotNet 的数据表阅读全文

posted @ 2010-09-14 09:35 eaglet 阅读(1512) | 评论 (0) 编辑 |

HubbleDotNet开源全文搜索数据库项目--查询方法汇总

摘要: HubbleDotNet 的查询语法为类 SQL 语句，本文以示例的形式讲述HubbleDotNet 的各种查询方法。随着功能不断的增加，查询方法还会不断补充阅读全文

posted @ 2010-09-08 13:58 eaglet 阅读(3393) | 评论 (26) 编辑 |

HubbleDotNet 和 Lucene.Net 匹配相关度的比较

摘要: 很多网友在使用 Lucene.net (Lucene java 版本也是一样)后会感觉Lucene.net 的匹配相关度存在问题，搜索得到的结果往往不是希望的结果，不完全匹配的记录往往比完全匹配的记录排序还要靠前，很多人试图通过分词来解决，中文环境搜索，分词确实能解决一些问题，但不能根本解决问题，而英文环境下，分词根本无法解决任何问题。问题的本质是由于Lucene的得分算法缺陷造成的，不改进得分算法根本不能根本解决问题。HubbleDotNet的得分算法参考了Lucene的得分算法并做了重大改进，匹配相关度比Lucene.net 有了显著提高。本文结合一个极端的例子来分析两者得分算法的异同，并从原理上讲解为什么HubbleDotNet 的匹配相关度要比Lucene.net 的高。阅读全文

posted @ 2010-09-07 08:51 eaglet 阅读(3377) | 评论 (30) 编辑 |

HubbleDotNet 和 Lucene.net 性能对比测试

摘要: 本文为HubbleDotNet 和 Lucene.net 的性能测试报告，HubbleDotNet 在索引和搜索方面的性能都明显优于Lucene.net。阅读全文

posted @ 2010-09-03 11:40 eaglet 阅读(5176) | 评论 (43) 编辑 |

HubbleDotNet 简介

摘要: HubbleDotNet 是一个基于.net framework 的开源免费的全文搜索数据库组件。阅读全文

posted @ 2010-09-03 10:09 eaglet 阅读(4333) | 评论 (19) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--为数据库现有表建立全文索引(二) Updatable 模式

摘要: 本文介绍了如何通过HubbleDotNet对数据库现有表创建可修改的全文索引，并给出一些搜索示例，特别是Group by 功能的搜索示例。阅读全文

posted @ 2010-08-30 15:21 eaglet 阅读(3400) | 评论 (22) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--如何为Oracle 数据库做全文搜索

摘要: HubbleDotNet 提供了一个开放的数据库适配器接口，不但可以和SQL SERVER 连接，也可以和包括Oracle 在内的任何数据库连接，为基于这些数据库的应用实现全文搜索功能。本文主要说明如何为基于Oracle 数据库开发的项目提供全文搜索功能。阅读全文

posted @ 2010-08-27 13:27 eaglet 阅读(815) | 评论 (0) 编辑 |

HubbleDotNet 0.9 正式版本(0.9.6.0) 发布

摘要: HubbleDotNet 0.9 正式版本(0.9.6.0) 发布阅读全文

posted @ 2010-08-25 14:45 eaglet 阅读(632) | 评论 (9) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--自动和现有表同步

摘要: 对于大部分应用来说，全文搜索功能只是应用的部分功能而非全部功能，很多系统在设计之初往往缺乏全文搜索方面的设计，搜索功能多是用数据库的 like 语句来实现，随着系统容量的增大和用户数量的增加，这种 like 无论从性能还是功能方面都无法满足站内搜索的需要。HubbleDotNet 为这部分用户提供了松耦合度的系统集成方案，用户只需一小时不到时间就可以实现现有系统的全文搜索功能的后台部分，无需对现有数据库表结构做任何改动，无需编写大量代码。其中自动和现有表数据同步是这个解决方案中的重要一环。本文重点介绍如何设置，以完成全文索引和现有数据表的数据同步。阅读全文

posted @ 2010-08-25 14:20 eaglet 阅读(4145) | 评论 (43) 编辑 |

HubbleDotNet 海量数据测试报告

摘要: HubbleDotNet 海量数据测试报告阅读全文

posted @ 2010-08-24 11:55 eaglet 阅读(1801) | 评论 (3) 编辑 |

HubbleDotNet 0.9.1.0 版本性能介绍

摘要: 这个版本索引结构进行了大幅调整，占用内存大幅下降。索引和查询速度大幅提高阅读全文

posted @ 2010-07-19 13:35 eaglet 阅读(697) | 评论 (18) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--通过程序和现有表或视图同步

摘要: 本文描述如何让HubbleDotNet 在被动表模式下和对应的数据表或视图同步。阅读全文

posted @ 2010-07-09 08:40 eaglet 阅读(1998) | 评论 (11) 编辑 |

Hubbledotnet V0.8.3.6 版本性能测试报告

摘要: 今天对 hubbledotnet 0.8.3.6 版本做了一个简单的性能测试，把测试结果公布一下。0.8.3.6 版本是0.8版本的最后一个小版本，后面将进入0.9版本，0.9 版本中我将调整目前的索引数据结构，占用内存数量和索引速度将会比0.8版本要更优化。不过这个0.8版本的测试数据我觉得也已经挺不错了，呵呵。阅读全文

posted @ 2010-06-11 11:07 eaglet 阅读(1697) | 评论 (19) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--为数据库现有表或视图建立全文索引(一) Append Only 模式

摘要: HubbleDotNet 可以非常方便的对数据库现有表或视图创建全文索引，整个过程人工干预的时间不超过5分钟。我将用几个篇幅来阐述如何对现有数据表创建全文索引。本篇将重点介绍如何创建 Append Only 模式的全文索引。阅读全文

posted @ 2010-05-13 10:48 eaglet 阅读(4229) | 评论 (38) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--数据库和数据表

摘要: 本文重点介绍Hubble.net 全文搜索数据库的数据库和数据表概念，并以图解的方式给出一些典型的数据流图。阅读全文

posted @ 2010-05-05 15:47 eaglet 阅读(4188) | 评论 (12) 编辑 |

HubbleDotNet开源全文搜索数据库项目--如何升级

摘要: Hubble.net 是一个开源项目，开源项目的特点就是反应迅速，功能推出会很快，版本会经常需要升级。本文将介绍如何进行版本升级。在开始本文之前，先来看看 hubble.net 包含的组件都有哪些。阅读全文

posted @ 2010-05-05 13:29 eaglet 阅读(2457) | 评论 (2) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--创建、删除数据库

摘要: Hubble.net 的数据库只是一个逻辑概念，设计这个逻辑概念的目的是为了便于对一些具有类似属性的数据表进行管理。Hubble.net 中并没有数据库这个实体，数据库在hubble.net 中可以被理解为一个数据表的管理群组。hubble.net 中的数据表必须归属于一个数据库，并在默认配置时继承所属数据库的公共属性。阅读全文

posted @ 2010-05-04 14:03 eaglet 阅读(2990) | 评论 (34) 编辑 |

HubbleDotNet 开源全文搜索数据库项目--数据表的数据类型和索引类型

摘要: 本文介绍Hubble.net 开源全文搜索数据库项目的数据类型和索引类型阅读全文

posted @ 2010-05-04 08:26 eaglet 阅读(1484) | 评论 (4) 编辑 |

HubbleDotNet开源全文搜索数据库项目--技术详解

摘要: 这个系列文档将详细介绍HubbleDotNet 全文搜索数据库的技术和应用。阅读全文

posted @ 2010-04-07 14:44 eaglet 阅读(15836) | 评论 (94) 编辑 |

Hubble.net V0.7.2.0 版本发布

摘要: Hubble.net V0.7.2.0 版本发布阅读全文

posted @ 2009-12-18 20:21 eaglet 阅读(1330) | 评论 (19) 编辑 |

HubbleDotNet简介及与Lucene.net 对比测试

摘要: Hubble.net 是一个基于.net framework 的开源免费的全文搜索数据库组件。开源协议是 Apache 2.0。Hubble.net 提供了基于SQL的全文检索接口，使用者只需会操作SQL，就可以很快学会使用Hubble.net进行全文检索。Hubble.net 可以实现全文索引和查询、多域检索和排序、分组统计、消重、分类、聚类、多表关联查询等等一系列全文检索和数据挖掘功能。Hubble.net 提供开放的数据库适配器接口，可以和各种数据库完美整合，为各种数据库系统附加全文检索和数据挖掘功能。Hubble.net 设计了较为完善的并发控制程序，数据的增删改查可以多线程同时并发进行，没有任何冲突。Hubble.net 还进行了缓存和内存管理设计，可以帮助用户最大限度的提高查询的效率。Hubble.net 力争在未来的几年内超过Lucene.net成为.net开发环境中最受欢迎的全文检索组件。阅读全文

posted @ 2009-12-15 09:44 eaglet 阅读(5830) | 评论 (49) 编辑 |