摘要：
1. ssdb数据库说是类似redis，而且他们都有hash结构，但是他们的命名有点不同，ssdb 是（name，key，value） ，其实相对应的redis是（key，field，value），当然了对于使用函数上还是很像的； 2. ssdb中hash结构是（name，key，value），但l 阅读全文
posted @ 2017-05-24 11:41
bonelee
阅读(1078)
评论(0)
推荐(0)
摘要：
下面内容摘自:https://stackoverflow.com/questions/1821811/how-to-read-write-from-to-file-using-golang Start with the basics Here I used os.Open and os.Create 阅读全文
posted @ 2017-05-23 11:51
bonelee
阅读(9841)
评论(0)
推荐(0)
摘要：
Kafka架构 如上图所示，一个典型的kafka集群中包含若干producer（可以是web前端产生的page view，或者是服务器日志，系统CPU、memory等），若干broker（Kafka支持水平扩展，一般broker数量越多，集群吞吐率越高），若干consumer group，以及一个Z 阅读全文
posted @ 2017-05-23 11:32
bonelee
阅读(6999)
评论(0)
推荐(0)
摘要：
splunk的bucket组织目录：db_1481515116_1480695302_0db_1481537316_1481532688_1db_1481547598_1481539988_2db_1481617470_1481613403_3db_1481623046_1481619179_4db 阅读全文
posted @ 2017-05-23 10:14
bonelee
阅读(668)
评论(0)
推荐(0)
摘要：
Topic在逻辑上可以被认为是一个在的queue，每条消费都必须指定它的topic，可以简单理解为必须指明把这条消息放进哪个queue里。 为了使得Kafka的吞吐率可以水平扩展，物理上把topic分成一个或多个partition，每个partition在物理上对应一个文件夹，该文件 夹下存储这个p 阅读全文
posted @ 2017-05-23 10:10
bonelee
阅读(4133)
评论(0)
推荐(0)
摘要：
OverflowException 會在下列情況下執行階段擲回︰ 算術運算會產生作業所傳回的資料型別範圍之外的結果。 下列範例說明 OverflowException 超出範圍的乘法運算所擲回 Int32 型別。 C# int value = 780000000; checked { try { / 阅读全文
posted @ 2017-05-22 14:49
bonelee
阅读(1822)
评论(0)
推荐(0)
摘要：
Elias-Fano编码过程如下：把一组整数的最低l位连接在一起，同时把高位以严格单调增的排序划分为桶。 Example: 2, 3, 5, 7, 11, 13, 24 Count in unary the size of upper bits “buckets” including empty o 阅读全文
posted @ 2017-05-22 12:16
bonelee
阅读(2761)
评论(0)
推荐(0)
摘要：
PForDelta算法 PForDelta算法最早由Heman在2005年提出，它允许同时对整个chunk数据（例128个数）进行压缩处理。基础思想是对于一个chunk的数列（例128个），认为其中占多数的x%数据（例90%）占用较小空间，而剩余的少数1-x%（例10%）才是导致数字存储空间过大的异 阅读全文
posted @ 2017-05-20 14:27
bonelee
阅读(2341)
评论(1)
推荐(0)
摘要：
1. Karma的介绍 Karma是Testacular的新名字，在2012年google开源了Testacular，2013年Testacular改名为Karma。Karma是一个让人感到非常神秘的名字，表示佛教中的缘分，因果报应，比Cassandra这种名字更让人猜不透！ Karma是一个基于N 阅读全文
posted @ 2017-05-20 11:10
bonelee
阅读(502)
评论(0)
推荐(0)
摘要：
来看看倒排索引压缩。压缩是拿CPU换IO的最重要手段之一，不论索引是放在硬盘还是内存中。索引压缩的算法有几十种，跟文本压缩不同，索引压缩算法不仅仅需要考虑压缩率，更要考虑压缩和解压性能，否则会解压太慢而起不到CPU换IO的作用。早期的索引设计里，在尝试了几十种编码之后，基本都确定性采用差分编码＋可变 阅读全文
posted @ 2017-05-19 17:46
bonelee
阅读(2868)
评论(1)
推荐(0)
浙公网安备 33010602011771号