岚天逸见

与慢速设备通讯异步化方案

摘要：像MySQL、被对接的银行系统等，都可称作慢速设备。它们的共同特点是只提供了同步调用接口，而且响应通常会比较慢。一般业务系统在业务线程或进程中，直接调用它们提供的API进行访问，如下图所示：结果造成了以下两大问题：1) 性能低：同步阻塞方式；2) 可靠性差：业务... 阅读全文

posted @ 2014-06-24 13:02 岚天逸见阅读(270) 评论(0) 推荐(0)

摘要： taskset是linux自带的一个命令，可用来将进程绑定到指定CPU相关的函数有: sched_setaffinity, CPU_CLR, CPU_ISSET, CPU_SET, CPU_ZERO// cpufreq库可在/usr/lib目录下找到// 编译: g+... 阅读全文

posted @ 2014-06-20 13:01 岚天逸见阅读(721) 评论(0) 推荐(0)

摘要：在没有tuple之前，如果函数需要返回多个值，则必须定义一个结构体，有了C++11，可以基于tuple直接做了，下面是个示例：// 编译：g++ -std=c++11 -g -o x x.cpp#include // tuple头文件#include #includ... 阅读全文

posted @ 2014-05-30 15:34 岚天逸见阅读(2908) 评论(0) 推荐(0)

摘要： C++11之前，标准库没有提供数字类型转字符串的函数，需要借助sprintf、stringstream等，现在C++11提供了std::to_string函数，可以直接使用了：点击(此处)折叠或打开string to_string (int val);string t... 阅读全文

posted @ 2014-05-30 14:17 岚天逸见阅读(706) 评论(0) 推荐(0)

摘要：通过对Cuckoo Hash、多级Hash和BloomFilter的粗浅了解，感觉它们三者存在类似之处，算是近亲（暂且把普通的Hash称作远亲）。 Cuckoo Hash的思想非常简单，冲突时，重Hash，也就是为Key重新找个新的位置。显然，极端情况下，需要反反复... 阅读全文

posted @ 2014-05-20 16:58 岚天逸见阅读(421) 评论(0) 推荐(0)

摘要：目录目录 11. 什么是Lambda？ 12. 语法格式 12.1. 语法格式 12.2. 最简定义 23. 应用示例 24. capture列表 34.1. 基本形式 34.2. 注意事项 35. 对比仿函数 36. 对比函数指针 47. Lamdba和STL 48... 阅读全文

posted @ 2014-05-16 14:54 岚天逸见阅读(220) 评论(0) 推荐(0)

摘要：目录目录 11. 前言 12. 背景 13. 解析 1 1. 前言Federation翻译成中文是联盟或联邦的意思，网上有很多介绍HDFS Federation的文章，官网上的Federation.html也做了专门的介绍。本文试图画蛇添足，以更通俗的方式重复一遍，以... 阅读全文

posted @ 2014-05-15 10:11 岚天逸见阅读(293) 评论(0) 推荐(0)

摘要：消除重复代码代码很多种，比如：1）提炼成函数复用2）使用宏3）继承4）使用闭包（boost::bind、boost::function）上述是最为常用的，对于C++程序，闭包可能用得相对少一点。下列代码使用的是第5种：利用#include消除重复代码：void f1... 阅读全文

posted @ 2014-05-12 17:48 岚天逸见阅读(375) 评论(0) 推荐(0)

摘要：目录目录 11. 约定 12. 安装Scala 12.1. 下载 22.2. 安装 22.3. 设置环境变量 23. 安装Spark 23.1. 部署 23.2. 下载 33.3. 安装 33.4. 配置 33.4.1. 修改conf/spark-env.sh 33.... 阅读全文

posted @ 2014-05-12 09:44 岚天逸见阅读(235) 评论(0) 推荐(0)

摘要： C++11已支持bind和function，之前的不支持，但可以借助boost达到同样目的。看如下两段代码： 1) 创建HDFS目录void hdfs::init(){ if (0 == hdfsExists(fs, data_dirpath.c_str()))... 阅读全文

posted @ 2014-05-08 13:07 岚天逸见阅读(238) 评论(0) 推荐(0)