Hadoop在windows环境下进行开发的配置准备

工具需要

1. maven  2.Idea  3 hadoop安装包 4 bin编译完成包 5 jdk包

步骤

1 下载hadoop安装包

https://hadoop.apache.org/   自行选择需要版本 解压到目标文件夹  比如C:\hadoop

2. 下载版本对应的bin编译完成包  ，自己编译比较麻烦,可以到 https://github.com/cdarlint/winutils 选择包下载

3. 放入/替换 C:\hadoop\bin 文件夹内的文件，特别是要放入hadoop.dll和winutils.exe文件，并复制一份hadoop.dll放到C:\Windows\System32下。

4  配置hadoop环境变量，把C:\hadoop添加到HADOOP_HOME，并在Path添加 %HADOOP_HOME%\bin 和 %HADOOP_HOME%\sbin 。

打开CMD，输入hadoop version 测试是否正常显示版本信息。

5. 在idea中开发 配置maven要注意与 下载的hadoop包版本一致

6 之后在idea中进行所需的开发工作