摘要：环境变量： 命令行里可以执行相应的命令 这些命令就是一些可执行的文件 当在命令行执行命令的时候， 系统会根据环境变量里设置的PATH的值 查询所有的目录去寻找相应的可执行文件 数据采集（flume，storm）数据存储（HDFS）数据处理（MapReduce，Hive，Spark）数据分析（Maho 阅读全文

摘要：package hdfs;import java.io.IOException;import java.io.InputStream;import java.net.URI;import org.apache.hadoop.conf.Configuration;import org.apache.h 阅读全文

摘要：命令基本格式: 1.ls 列出hdfs文件系统根目录下的目录和文件 列出hdfs文件系统所有的目录和文件 2.put hdfs file的父目录一定要存在，否则命令不会执行 hdfs dir 一定要存在，否则命令不会执行 从键盘读取输入到hdfs file中，按Ctrl+D结束输入，hdfs fil 阅读全文

摘要：[hadoop@single ~]hadoop：当前登录的用户single：主机名称~：当前所在的目录~：代表用户的根目录 pwd：查看当前所在的路径ll：查看当前目录里的所有的文件tar -zxvf jdk-8u65-linux-x64.tar.gz：解压命令su 用户名：切换用户，如果不写用户名 阅读全文

摘要：Hadoop2.6.0伪分布式设置 准备工作：把JDK和Hadoop安装包上传到linux系统（hadoop用户的根目录） Jdk安装 tar -zxvf jdk-8u65-linux-x64.tar.gz 解压完成后，在hadoop用户的根目录有一个jdk1.8.0_65目录 切到root用户，输 阅读全文