day3 Hadoop安装与使用-Hadoop安装篇【上】单机模式配置

【os】因为最近没有带大数据实验那本书,这几篇使用的都是大数据原教材-大数据技术原理运用(第三版)。其实两本内容差不多,但是实验那本教材安装过程更详细一点。

 

【正文】

2.Hadoop安装

【Hadoop单机安装】

Hadoop使用版本:3.1.3

下载地址:https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/

  • 老规矩,上火狐!下载!移动位置到 /usr/loacal !解压!

         

          下载 hadoop-3.1.3.tar.gz 那个

  • 将下载的压缩包移到 /usr/local 文件下(在文件下载位置打开终端)
    sudo mv hadoop-3.1.3.tar.gz /usr/local
  • 对hadoop解压
    1 cd /usr/local
    2 sudo tar -zxvf hadoop-3.1.3.tar.gz
  • 修改目录名称
    sudo mv ./hadoop-3.1.3/ ./hadoop 
  • 修改目录权限

    sudo chown -R hadoop ./hadoop

     

  • 查看hadoop版本信息

    ./hadoop/bin/hadoop version

     如图即为安装成功。

【测试grep例子】

  • 新建input目录,用来存放数据
    1 cd /usr/local/hadoop
    2 mkdir input
  • 复制配置文件
    cp ./etc/hadoop/*.xml ./input
  • 执行测试代码
    ./bin/hadoop jar /usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar grep ./input ./output 'dfs[a-z.]+'
  • 查看输出
    cat ./output/*

     如图即为成功。

posted @ 2023-05-10 20:15  杰·富力克士  阅读(51)  评论(0)    收藏  举报