指尖上的艺术

摘要： /** * Created by root * Description : 递归函数 */ object RecursionTest { def main(args: Array[String]): Unit = { // a到b的累加 def foo(a:Int,b:Int):Int ={ if (a > b) 0 else a + f... 阅读全文

摘要： /** * Created by root * Description :CallByValue:进入函数就得先计算实参的值；CallByName：函数体重使用到的时候才计算 */ object CallByValueAndCallByName { def main(args: Array[String]): Unit = { val c = add(1+2,3) ... 阅读全文

摘要： 1、>>表示右移（有符号右移），如：15>>2的结果是3，-31>>3的结果是-4，左边以该数的符号位补充，移出的部分将被抛弃。 转为二进制的形式可能更好理解（省略左边的三个字节），0000 1111(15)右移2位的结果是0000 0011(3)，1110 0001(-31)右移3位的结果是111 阅读全文

摘要： 在Yarn中，JobTracker被分为两部分：ResourceManager（RM）和ApplicationMaster（AM）。 MRv1主要由三部分组成：编程模型(API)、数据处理引擎(MapTask和ReduceTask)和运行环境(JobTracker和TaskTracker);Yarn 阅读全文

摘要： Yarn的基本架构 Yarn是Hadoop2.0中的资源管理系统，它的基本设计思想是将MRv1中的JobTracker拆分成两个独立的服务：一个全局的资源管理器ResourceManager和每个应用程序特有的ApplicatioinMaster。其中ResourceManager负责整个系统的资源 阅读全文

摘要： 安装Cloudera Manager Server 和Agent 1、在cdh1解压cloudera-manager-el6-cm5.9.0_x86_64.tar.gz（cdh1节点）tar -zcvf cloudera-manager-el6-cm5.9.0_x86_64.tar.gz 2、为Cl 阅读全文

摘要： 估计要分开来两篇博客说明，因为截图较多。 1、三个节点cdh1（主节点）,cdh2,cdh3 配置就用一张图来说明，因为资源有限 2、版本依赖说明： CDH-5.9.0-1.cdh5.9.0.p0.23-el6.parcel CDH-5.9.0-1.cdh5.9.0.p0.23-el6.parcel 阅读全文

摘要： 1、三个节点时间同步，cdh1,cdh2,cdh3 2、做法：cdh1从网络时间同步，然后cdh2和cdh3从cdh1节点同步 3、安装与自启动设置 yum install ntp 按上面的安装方式在内网每台节点上都安装好NTP软件包 完成后，都需要配置NTP服务为自启动 chkconfig ntp 阅读全文

摘要： 网络配置（所有节点） 修改主机名：vim /etc/sysconfig/network NETWORKING = yes HOSTNAME = cdh1 NETWORKING_IPV6 = no PEERNTP = no 重启网络：service network restart 修改ip与主机名的对 阅读全文

摘要： 1、三个节点cdh1,cdh2,cdh3 2、在每个机器上分别生产公钥对 ssh-keygen -t rsa 3、复制公钥 cd .ssh cat id_rsa.pub >> authorized_keys 4、修改authorized_keys权限 chmod 600 authorized_key 阅读全文