PBY

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

安装Hadoop

Posted on 2019-05-16 21:54  PBY  阅读(127)  评论(0编辑  收藏  举报

1.安装Linux,MySql

我是用vm workstation来装的

1、创建用户

2、安装mysql

 

 

 

 

2.windows 与 虚拟机互传文件

 

3.安装Hadoop

还不能从windows复制文件的,可在虚拟机里用浏览器下载安装文件,课件:

提取文件:hadoop-2.7.1.tar.gz

链接: https://pan.baidu.com/s/1HIVd9JCZstWm0k7sAbXQCg

提取码: 2thj

配置hosts文件:

 建立hadoop运行帐号:

sudo groupadd hadoop    //设置hadoop用户组

sudo useradd –s /bin/bash –d /home/zj –m zj –g hadoop –G admin   //添加一个zj用户,此用户属于hadoop用户组,且具有admin权限。

sudo passwd zj   //设置用户zj登录密码

su zj   //切换到zj用户中

 配置ssh免密码连入

(1)     每个结点分别产生公私密钥。

键入命令:

以上命令是产生公私密钥,产生目录在用户主目录下的.ssh目录中,如下:

Id_dsa.pub为公钥,id_dsa为私钥,紧接着将公钥文件复制成authorized_keys文件,这个步骤是必须的,过程如下:

 下载并解压hadoop安装包

配置namenode,修改site文件

 配置namenode,core-site.xml、hdfs-site.xml、mapred-site.xml这三个文件。

 格式化namenode

 

 启动hadoop

用jps检验各后台进程是否成功启动

 

Hadoop生态的配置

我的博客https://www.cnblogs.com/MissDu/p/8831525.html

复制配置文件代码。