摘要: 一、Split触发条件 一、Split触发条件 1、 有任一一个Hfile的大小超过默认值10G时,都会进行split 2、 达到这个值不在拆分,默认为int_max,不进行拆分 3、compaction时,如果compact的store的大小超过了,则进行split 4、 flush之前会检测区域 阅读全文
posted @ 2015-11-26 17:38 thinker1017 阅读(1035) 评论(0) 推荐(0)
摘要: da 阅读全文
posted @ 2015-11-14 13:02 thinker1017 阅读(1384) 评论(0) 推荐(0)
摘要: HTTP和HTTPS详解 HTTP和HTTPS详解 转自:http://www.cnblogs.com/ok-lanyan/archive/2012/07/14/2591204.html HTTP是一个属于应用层的面向对象的协议,由于其简捷、快速的方式,适用于分布式超媒体信息系统。它于1990年提出 阅读全文
posted @ 2015-11-14 12:57 thinker1017 阅读(368) 评论(0) 推荐(0)
摘要: 构建Java并发模型框架Java的多线程特性为构建高性能的应用提供了极大的方便,但是也带来了不少的麻烦。线程间同步、数据一致性等烦琐的问题需要细心的考虑,一不小心就会出现一些微妙的,难以调试的错误。另外,应用逻辑和线程逻辑纠缠在一起,会导致程序的逻辑结构混乱,难以复用和维护。本文试图给出一个解决这个... 阅读全文
posted @ 2015-11-13 10:13 thinker1017 阅读(458) 评论(0) 推荐(0)
摘要: HTTP协议的主要特点可概括如下:1.支持客户/服务器模式。2.简单快速:客户向服务器请求服务时,只需传送请求方法和路径。请求方法常用的有GET、HEAD、POST。每种方法规定了客户与服务器联系的类型不同。由于HTTP协议简单,使得HTTP服务器的程序规模小,因而通信速度很快。3.灵活:HTTP允 阅读全文
posted @ 2015-11-12 16:03 thinker1017 阅读(353) 评论(0) 推荐(0)
摘要: BloomFilter——大规模数据处理利器(转)http://www.cnblogs.com/heaad/archive/2011/01/02/1924195.html Bloom Filter是由Bloom在1970年提出的一种多哈希函数映射的快速查找算法。通常应用在一些需要快速判断某个元素是否 阅读全文
posted @ 2015-11-11 16:34 thinker1017 阅读(224) 评论(0) 推荐(0)
摘要: 0. 科普1. 为什么需要Bloom Filter2. 基本原理3. 如何设计Bloom Filter4. 实例操作5. 扩展 0. 科普 Bloom Filter是由Bloom在1970年提出的一种多哈希函数映射的快速查找算法。通常应用在一些需要快速判断某个元素是否属于集合,但是并不严格要求100 阅读全文
posted @ 2015-11-11 16:05 thinker1017 阅读(386) 评论(0) 推荐(0)
摘要: 今天用python实现分布式,基于python2.7,注意:在linux下执行测试通过,在windows测试失败。# -*- coding: utf-8 -*-__author__ = 'dell'import random, time, Queuefrom multiprocessing.mana... 阅读全文
posted @ 2015-11-03 17:23 thinker1017 阅读(1209) 评论(0) 推荐(0)
摘要: from sgmllib import SGMLParserimport sys,urllib2,urllib,cookielibclass spider(SGMLParser):def __init__(self,email,password):SGMLParser.__init__(self)s... 阅读全文
posted @ 2015-11-03 12:48 thinker1017 阅读(295) 评论(0) 推荐(0)
摘要: 转载一篇Ricky的系统优化脚本,这个脚本只能针对centos6x其他还没有测试,但centos7肯定不行的#!/bin/bash# ID 201510192126# Author Ricky# E-mail 564001002@qq.com# CentOS 6 系统初始优化脚本 IT运维管理技术交... 阅读全文
posted @ 2015-11-03 12:44 thinker1017 阅读(564) 评论(0) 推荐(0)