bonelee - 博客园

2016年12月29日

摘要：一、简介 syslog是Linux系统默认的日志守护进程。默认的主配置文件和辅助配置文件分别是/etc/syslog.conf和/etc/sysconfig/syslog文件。通常，syslog 接受来自系统的各种功能的信息，每个信息都包括重要级。/etc/syslog.conf 文件通知 sysl 阅读全文

posted @ 2016-12-29 19:53 bonelee 阅读(33925) 评论(0) 推荐(1)

splunk 索引过程

摘要：术语： Event ：Events are records of activity in log files, stored in Splunk indexes. 简单说，处理的日志或话单中中一行记录就是一个Event；Source type：来源类型，identifies the format 阅读全文

posted @ 2016-12-29 17:29 bonelee 阅读(3551) 评论(0) 推荐(0)

2016年12月28日

怎样打造一个分布式数据库——rocksDB, raft, mvcc，本质上是为了解决跨数据中心的复制

摘要：摘自：http://www.infoq.com/cn/articles/how-to-build-a-distributed-database?utm_campaign=rightbar_v2&utm_source=infoq&utm_medium=articles_link&utm_content 阅读全文

posted @ 2016-12-28 12:15 bonelee 阅读(10716) 评论(0) 推荐(0)

2016年12月27日

时间序列数据库选型——本质是列存储，B-tree索引，抑或是搜索引擎中的倒排索引

摘要：时间序列数据库最多，使用也最广泛。一般人们谈论时间序列数据库的时候指代的就是这一类存储。按照底层技术不同可以划分为三类。直接基于文件的简单存储：RRD Tool，Graphite Whisper。这类工具附属于监控告警工具，底层没有一个正规的数据库引擎。只是简单的有一个二进制的文件结构。基于K/ 阅读全文

posted @ 2016-12-27 20:19 bonelee 阅读(1442) 评论(0) 推荐(0)

lucene底层数据结构——底层filter bitset原理，时间序列数据压缩将同一时间数据压缩为一行

摘要：如何联合索引查询？所以给定查询过滤条件 age=18 的过程就是先从term index找到18在term dictionary的大概位置，然后再从term dictionary里精确地找到18这个term，然后得到一个posting list或者一个指向posting list位置的指针。然后再阅读全文

posted @ 2016-12-27 19:41 bonelee 阅读(4066) 评论(0) 推荐(0)

lucene底层数据结构——FST，针对field使用列存储，delta encode压缩doc ids数组，LZ4压缩算法

摘要：参考： http://www.slideshare.net/lucenerevolution/what-is-inaluceneagrandfinal http://www.slideshare.net/jpountz/how-does-lucene-store-your-data http://w 阅读全文

posted @ 2016-12-27 16:28 bonelee 阅读(8302) 评论(0) 推荐(5)

lucene字典实现原理——FST

摘要：转自：http://www.cnblogs.com/LBSer/p/4119841.html 1 lucene字典使用lucene进行查询不可避免都会使用到其提供的字典功能，即根据给定的term找到该term所对应的倒排文档id列表等信息。实际上lucene索引文件后缀名为tim和tip的文件实现阅读全文

posted @ 2016-12-27 15:47 bonelee 阅读(24452) 评论(4) 推荐(8)

lucene索引文件格式

摘要：转自：http://blog.csdn.net/whuqin 本文介绍下lucene生成的索引有哪些文件组成，每个文件包含了什么信息。基于Lucene 4.10.0。数据结构索引(index)包含了存储的文档(document)正排、倒排信息，用于文本搜索。索引又分为多个段(segments)，阅读全文

posted @ 2016-12-27 14:24 bonelee 阅读(783) 评论(0) 推荐(0)

MySQL索引实现

摘要：摘自：http://blog.codinglabs.org/articles/theory-of-mysql-index.html 在MySQL中，索引属于存储引擎级别的概念，不同存储引擎对索引的实现方式是不同的，本文主要讨论MyISAM和InnoDB两个存储引擎的索引实现方式。 MyISAM索引实阅读全文

posted @ 2016-12-27 11:23 bonelee 阅读(9407) 评论(0) 推荐(6)

平衡查找树之B树

摘要：转自：http://www.cnblogs.com/yangecnu/p/Introduce-B-Tree-and-B-Plus-Tree.html 定义 B 树可以看作是对2-3查找树的一种扩展，即他允许每个节点有M-1个子节点。根节点至少有两个子节点每个节点有M-1个key，并且以升序排列阅读全文

posted @ 2016-12-27 11:01 bonelee 阅读(1043) 评论(0) 推荐(0)

将者，智、信、仁、勇、严也。

Hi，我是李智华，华为-安全AI算法专家，欢迎来到安全攻防对抗的有趣世界。

公告