随笔分类 - Hadoop
摘要:#查看指定队列的所有任务: GET http://<rm http address:port>/ws/v1/cluster/apps?queue=dev #查看指定任务的详细信息: GET http://<rm http address:port>/ws/v1/cluster/apps/applic
阅读全文
摘要:首先,我在windows本地已经安装了一个伪集群 并且配置了hadoop的环境变量 还有path 中 在cmd中检验hadoop环境变量 有了这个伪集群,安装hbase就不需要使用伪Linux环境了 此安装是hbase的单机版,区别与hbase的伪集群安装,只用于单机测试。单机版安装不需要启动had
阅读全文
摘要:package com.zl.kafkademo; import org.apache.kafka.clients.producer.Callback; import org.apache.kafka.clients.producer.KafkaProducer; import org.apache
阅读全文
摘要:在用VMware克隆一台虚拟机后,理论上ip地址是被克隆机器的ip(被克隆机已经配置好了静态ip),但是打开了新虚拟机后,但是xshell连接不上 使用 ip add命令显示的信息没有ip地址信息,无法连接,如图 在 进入目录 ect/sysconfig/network-scripts 后显示的文件
阅读全文
摘要:1 软件准备 安装环境:系统是CentOS7,64位,安装过程中的所有软件需适应这个系统。本文是使用root用户安装。 使用linux命令可查看自己的操作系统: 注意:如果在虚拟机上安装CentOS7,使用了最小安装,在启动CM的时候可能可能会报pstree找不到的错误。 1 [root@maste
阅读全文
摘要:1 主要步骤 配置网络 修改主机名 关闭防火墙 关闭SELinux 安装jdk 增加hadoop用户 配置ssh信任 配置hadoop 集群部署规划 5台服务器, 一个主节点:nn1.hadoop, master (HA) 一个从节点:nn2.hadoop,slave 三个工作节点: s1.hado
阅读全文

浙公网安备 33010602011771号