摘要：HDFS2.x之RPC流程分析1 概述 Hadoop提供了一个统一的RPC机制来处理client-namenode, namenode-dataname,client-dataname之间的通信。RPC是整个Hadoop中通信框架的核心，目前采用ProtocolBuf作为RPC的默认实现。RPC的整体调用流程如下：2 Protobuf Protocol buffer（以下简称PB），PB是Google开源的一种轻便高效的结构化数据存储格式，可以用于结构化数据的序列化和反序列化，很适合做数据存储或 RPC 数据交换格式，目前提供了 C++、Java、Python 三种语言的 API。序列化/反序 阅读全文

摘要：Java自定义日志输出文件日志的打印，在程序中是必不可少的，如果需要将不同的日志打印到不同的地方，则需要定义不同的Appender，然后定义每一个Appender的日志级别、打印形式和日志的输出路径。1 log4j输出多个自定义日志文件如果在实际应用中需要输出独立的日志文件，怎样才能把所需的内容从原有日志中分离，形成单独的日志文件呢？先看一个常见的log4j.properties文件，它是在控制台和test.log文件中记录日志： 1 log4j.rootLogger=DEBUG, stdout, logfile 4 5 log4j.appender.stdout=org.apache.... 阅读全文

摘要：Linux Shell 数学运算 在Linux中直接使用数学运算符进行数学运算往往得不到我们想要的计算结果。要在Shell中进行数学运算，我们需要借助点小手段。目前，Linux Shell中进行数学运算的方法主要有三种：bc、expr、let。1 bc1.1 命令行方式 在bash界面，直接输入bc或者bc -q，就可以进去bc的命令行，通过使用数学运算符能够得到我们想要的结果： 1 [scott@centos1 ~]$ bc -q 2 3 2+4 4 5 6 6 7 2-4 8 9 -210 11 2*412 13 814 15 2/416 17 018 19 2%420 21 22... 阅读全文