随笔分类 -  hadoop

摘要:一. 概要 经过几天的调试,终于在Linux Cent OS 5.5下成功搭建Hadoop测试环境。本次测试在一台服务器上进行伪分布式搭建。Hadoop 伪分布式模式是在单机上模拟 Hadoop 分布式,单机上的分布式并不是真正的伪分布式,而是使用线程模拟分布式。Hadoop 本身是无法区分伪分布... 阅读全文
posted @ 2015-06-11 02:26 一天学点 阅读(340) 评论(0) 推荐(0)
摘要:dfs.name.dirDetermines where on the local filesystem the DFS name node should store the name table(fsimage). If this is a comma-delimited list of dir... 阅读全文
posted @ 2015-06-11 02:11 一天学点 阅读(4184) 评论(0) 推荐(0)
摘要:1)关闭禁用防火墙: /etc/init.d/iptables status 会得到一系列信息,说明防火墙开着。 /etc/rc.d/init.d/iptables stop 关闭防火墙2)禁用SELinux: 查看SELinux状态: 1、/usr/sbin/sestatus -v ##如... 阅读全文
posted @ 2015-06-08 22:22 一天学点 阅读(338) 评论(0) 推荐(0)
摘要:大数据:数据量大,数据价值,分析,挖掘云计算:一般分三层构成【IAAS,SAAS,PAAS】IAAS:基础设施既服务SAAS:平台即服务PAAS:软件既服务Apache Hadoop 特点:扩容能力(Scalable)能可靠的(reliably)存储和处理千兆字节(PB)数据成本低可以通过普通机器组... 阅读全文
posted @ 2015-06-07 10:19 一天学点 阅读(165) 评论(0) 推荐(0)