摘要：
1、检查网络状况Dos命令：ping ip地址,同时，在Linux下通过命令：ifconfig可以查看ip信息2、修改虚拟机的ip地址 打开linux网络连接，在桌面右上角，然后编辑ip地址，修改ip地址后，重启网络服务：service network restart,如果网络重启失败，可以在虚拟机... 阅读全文
posted @ 2015-07-16 22:31
天~宇~翱~翔
阅读(415)
评论(0)
推荐(0)
摘要：
一、概述MapReduce框架对处理结果的输出会根据key值进行默认的排序，这个默认排序可以满足一部分需求，但是也是十分有限的。在我们实际的需求当中，往往有要对reduce输出结果进行二次排序的需求。对于二次排序的实现，本文将通过一个实际的MapReduce二次排序例子讲述二次排序的实现和其MapR... 阅读全文
posted @ 2015-07-16 16:29
天~宇~翱~翔
阅读(491)
评论(0)
推荐(0)
摘要：
一、MapReduce执行过程 MapReduce运行时，首先通过Map读取HDFS中的数据，然后经过拆分，将每个文件中的每行数据分拆成键值对，最后输出作为Reduce的输入，大体执行流程如下图所示：整个流程图具体来说：每个Mapper任务是一个java进程，它会读取HDFS中的文件，解析成很多的... 阅读全文
posted @ 2015-07-16 16:12
天~宇~翱~翔
阅读(11348)
评论(0)
推荐(1)
摘要：
转自：http://www.aboutyun.com/thread-7316-1-1.html一、关系运算：1. 等值比较: =语法：A=B操作类型：所有基本类型描述: 如果表达式A与表达式B相等，则为TRUE；否则为FALSE举例：hive>select 1 from lxw_dual where... 阅读全文
posted @ 2015-07-16 12:19
天~宇~翱~翔
阅读(2934)
评论(0)
推荐(0)
摘要：
转自：http://www.aboutyun.com/thread-7327-1-1.html1、Hive不支持等值连接 SQL中对两表内联可以写成：select * from dual a,dual b where a.key = b.key;Hive中应为：select * from dua... 阅读全文
posted @ 2015-07-16 12:05
天~宇~翱~翔
阅读(10980)
评论(0)
推荐(0)
摘要：
1.首先下载Hadoop对应版本的插件，以Hadoop 1.0版本对应的插件Hadoop-eclipse-plugin1.0.3.jar为例2、将下载的插件放置到Ecplise安装目录的plugins目录下3、启动Ecplise，点击Window->Show View->Other，点击MapReu... 阅读全文
posted @ 2015-07-16 09:33
天~宇~翱~翔
阅读(229)
评论(0)
推荐(0)
浙公网安备 33010602011771号