摘要: 1、环境介绍 涉及到软件下载地址:https://pan.baidu.com/s/1hpcXUSJe85EsU9ara48MsQ 服务器:CentOS 6.8 其中:2 台 namenode、3 台 datanode zookeeper集群地址:192.168.67.11:2181,192.168. 阅读全文
posted @ 2019-08-12 17:38 技术研究与问题解决 阅读(642) 评论(0) 推荐(0)
摘要: 设置hdfs-site.xml SNN启动后需要向NN请求相关image文件,但未配置导致。 阅读全文
posted @ 2019-08-12 16:46 技术研究与问题解决 阅读(723) 评论(0) 推荐(0)
摘要: SecondNamenode名字看起来很象是对第二个Namenode,要么与Namenode一样同时对外提供服务,要么相当于Namenode的HA。 SecondNamenode名字看起来很象是对第二个Namenode,要么与Namenode一样同时对外提供服务,要么相当于Namenode的HA。 阅读全文
posted @ 2019-08-12 16:44 技术研究与问题解决 阅读(924) 评论(0) 推荐(0)
摘要: 这个问题可能是我第一个遇到吧,hadoop启动时WARNING: HADOOP_SECURE_DN_USER has been replaced by HDFS_DATANODE_SECURE_USER. Using value of HADOOP_SECURE_DN_USER.错误。 解决方案,在 阅读全文
posted @ 2019-08-12 16:01 技术研究与问题解决 阅读(2047) 评论(0) 推荐(1)
摘要: netstat命令用于显示与IP、TCP、UDP和ICMP协议相关的统计数据,一般用于检验本机各端口的网络连接情况。netstat是在内核中访问网络及相关信息的程序,它能提供TCP连接,TCP和UDP监听,进程内存管理的相关报告。 netstat常用命令参数 1 2 3 4 5 6 7 8 9 10 阅读全文
posted @ 2019-08-12 15:53 技术研究与问题解决 阅读(2729) 评论(0) 推荐(0)
摘要: #netstat -tnpl 阅读全文
posted @ 2019-08-12 15:05 技术研究与问题解决 阅读(310) 评论(0) 推荐(0)
摘要: Hadoop启动之后,遇到一个奇怪的问题: VMware虚拟机中Hadoop服务的端口50070无法访问的问题 通过127.0.0.1:50070、localhost:50070、主机名:50070均可访问,唯独IP:50070不能访问到。 通过查找日志:发现datanode的日志中提示:访问Mas 阅读全文
posted @ 2019-08-12 15:02 技术研究与问题解决 阅读(11737) 评论(0) 推荐(0)
摘要: 一、临时关闭防火墙 1、 查看防火墙的状态 [root@vpnSS ~]# /etc/init.d/iptables status Table: filter Chain INPUT (policy ACCEPT) num target prot opt source destination 1 A 阅读全文
posted @ 2019-08-12 14:46 技术研究与问题解决 阅读(2241) 评论(0) 推荐(0)
摘要: 1、根据进程名查看进程信息,以查看tomcat进程名为例,查看所对应的进程id为1095(或者使用: ps -aux | grep tomcat 查看占用内存等信息) ps -ef | grep tomcat 2、根据进程id查看进程占用端口,查看对应端口为8080(如果没有netstat命令,使用 阅读全文
posted @ 2019-08-12 14:31 技术研究与问题解决 阅读(223) 评论(0) 推荐(0)
摘要: linux下使用mkdir可以创建目录,使用mkdir -p参数就可以创建:mkdir -p /home/orale/duqiang1/duqiang2 如果父目录存在也不会报错。 linux下使用mkdir可以创建目录,使用mkdir -p参数就可以创建:mkdir -p /home/orale/ 阅读全文
posted @ 2019-08-12 11:59 技术研究与问题解决 阅读(1325) 评论(0) 推荐(0)
摘要: 配置环境要求: Centos7 jdk 8 Vmware 14 pro hadoop 3.1.1 Hadoop下载 安装4台虚拟机,如图所示 克隆之后需要更改网卡选项,ip,mac地址,uuid 重启网卡: 为了方便使用,操作时使用的root账户 设置机器名称 再使用hostname命令,观察是否更 阅读全文
posted @ 2019-08-12 11:32 技术研究与问题解决 阅读(319) 评论(0) 推荐(0)