随笔分类 -  大数据入门

摘要:1.格式化空间(第一次启动的操作): * 格式化后就生成fsimage,fsimage文件其实是Hadoop文件系统元数据的一个永久性的检查点,其中包含Hadoop文件系统中的所有目录和文件idnode的序列化信息; * 而edits文件存放的是Hadoop文件系统的所有更新操作的路径,文件系统客户 阅读全文
posted @ 2017-04-19 14:27 nothing_fish
摘要:1.关闭防火墙service iptables stop,(已经设置开机关闭的忽略) 2.进入hadoop目录,修改hadoop配置文件(4个) core-site.xml(核心配置,fs.defaultFS指定了namenode所在的机器,而datanode是由slave文件中指定的,second 阅读全文
posted @ 2017-04-18 22:54 nothing_fish
摘要:准备一:VMware虚拟工具: 准备二:CentOS6.8虚拟机(64位):如果64位不允许安装,可能是电脑设置问题,重启电脑打开BIOS,设置虚拟机的选项为enable 内存(memory)一般1G以上,Network Adapter要设置成NAT,不然虚拟机跟电脑之间不能通信(也许是我太菜) 进 阅读全文
posted @ 2017-04-17 20:10 nothing_fish
摘要:大数据学习第一步:Linux入门学习所需要的命令(非基础却常用) chmod u+x /filepath/../filename : u、g、o表示三个不同组,r、w、x表示可读可写可执行,+、-表示赋予和取消权限首先关闭防火墙:service iptables stop 永久关闭:sudo chk 阅读全文
posted @ 2017-04-17 18:33 nothing_fish