摘要：这是利用eclipse的线程代替linuxe的进程去执行 第一步：首先要将已经下载解压后的hadoop配置好相应的环境变量 第二步： //创建配置文件对象 Configuration conf=new Configuration(true); 也就是下面的两行代码复制到创建配置文件对象的下面 //设 阅读全文

摘要：从该原理图中可以知道：在hadoop2的版本中：resource manager也就是YARNz是只负责资源的调度和回收而不参与应用程序的内部运作机制与运算，而在hadoop1的版本中，resourc manager不但要负责资源的调度和回收还要参与具体的运算。 在hadoop2中resouce m 阅读全文

摘要：第一是大数据的数据获取方式： 数据清洗是将重复，多余的数据筛选清除，将缺失的数据补全完整，将错误的数据纠正或者删除；最后整理成我们可以进一步使用和加工的数据保存到数据库中。 所谓的数据清洗也就是ETL处理，包括抽取Extract,转换TRANSFORM,加载LOAD这三大法宝。 数据清洗的步骤一般都 阅读全文

摘要：一：首先要将linux 和winodws的exlipse关联起来 第一步：在windows中部署hadoop包：解压一个hadoop压缩文件 第二步：将解压后的hadoop文件目录下的bin文件中的文件全部被替换成下面文件夹下的文件：该文件已经压缩并上传：bin.rar 第三步：将替换后的文件夹下的 阅读全文

摘要：一：了解集群的原理： 二：集群环境的搭建之前的准备工作：集群环境的搭建需要退回到hadoop分布式搭建之前：这个时候可以在安装hadoop之前在虚拟机中拍一个快照 如果没有拍快照怎么解决： 1，先停掉Hadoop的运行 :stop-dfs.sh 2检查是否停掉：jps：看里面是否还有与Hadoop相 阅读全文

摘要：一：下载相关的软件 二 ：安装：也是先解压到指定的文件夹 三：检查安装环境，并指定将来要安装的路径 命令语句：./configure --prefix=/usr/local/nginx 四：运行上面的命令语句之后会报错：这是对于安装的是迷你版的xshell来说，如果是完整版的请略过 #缺包报错 ./ 阅读全文

摘要：一：jdk的安装 首先要知道shell文件的解压包和文件的上传与下载 如果没有该插件要下载 yum install lrzsz -y rz 下载 sz 上传 1， 文件的解压包： 文件的压缩：gzip命令 ：gzip a.txt 压缩后的文件的后缀为gz 文件的解压：gzip -d a.txt.gz 阅读全文

摘要：一：修改基本配置： 1，修改主机名 vi /etc/sysconfig/network 2，修改ip地址：这个在安装里面有详细的讲解，而且一般是在安装的时候就配置的；在这里就不做多余的叙述 3，修改ip地址和主机名之间的映射关系：这个也有详细的介绍了 4，防火墙的设置 4,1检查防火墙是否打开 ： 阅读全文

摘要：总的步骤讲解： 安装软件 创建新的虚拟机 然后点击编辑虚拟机设置（这里需要设置两个：一个是CD/DVD,把镜像文件导入；另一个是网络适配器选择连接模式，这里我们选择NAT模式）--点击开启虚拟机（这里直接跳过就可以，不用测试） 然后就是安装完成（这里的黑色界面，点击进入虚拟机）--用root账号和设 阅读全文

摘要：配置完成后 检查是否配置正确： ping 配置的映射名；结果如下： 步骤三：这是还要修改windows的映射配置，否则此时的linux不能与外网相连 第一：hosts文件路径：C:\Windows\System32\drivers\etc，这里有一个hosts文件 在hosts文件中配置你已经在Li 阅读全文