随笔分类 - 大数据
摘要:LifeCycleState: IDLE, START, STOP, ERROR [Source]: org.apache.flume.Source 继承LifeCycleAware{stop() + start() + getLifeCycleState()} + NamedComponent{g
阅读全文
摘要:准备Linux环境 修改主机名: $ vim /etc/sysconfig/network NETWORKING=yes HOSTNAME=hadoop001 修改IP: # vim /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE=eth0 HWAD
阅读全文
摘要:[root@hadoop001 ~]# cd /etc/udev/rules.d/ [root@hadoop001 rules.d]# vim 70-persistent-net.rules 将eth1改成eth0, vim /etc/sysconfig/network-scripts/ifcfg-
阅读全文
摘要:flume优点 1.存储数据到任何中央数据库 2.进入数据速率大于写出速率,可以起到缓存作用,保证流的平稳 3.提供文本式路由 4.支持事务 5.可靠、容错、可伸缩、可定制、可管理 put的缺点 put的缺点 1.put命令一次只能put一个文件,不能满足文件告诉被生成的场景,需要实时传输数据 2.
阅读全文
摘要:预备工作: 启动hadoop集群 准备数据 Synthetic_control.data数据集下载地址http://archive.ics.uci.edu/ml/databases/synthetic_control/synthetic_control.data 在集群中创建 /user/root/
阅读全文

浙公网安备 33010602011771号