随笔分类 -  hadoop

hive0.13网络接口安装
摘要：安装好hive 0.13以后，在./lib下找不到hive-hwi-0.13.1.war ,那该怎么办？1、下载hive-0.12.0版本，把这一版里面的hive-hwi-0.12.0.war重命名为hive-hwi-0.13.1.war，粘到hive 0.13版的./lib下（这招太毒）2.修改... 阅读全文
posted @ 2014-08-05 16:58 unflynaomi 阅读(232) 评论(0) 推荐(0)
hive报错 Another instance of Derby may have already booted the database
摘要：刚装好hive后，启动之后showtables;等正常，退出之后再进入，就发现会报错Caused by: ERROR XSDB6: Another instance ofDerbymay have already booted the database /opt/apache-hive-0.13.1... 阅读全文
posted @ 2014-08-05 16:53 unflynaomi 阅读(1716) 评论(0) 推荐(0)
hive-0.12升级成hive 0.13.1
摘要：安装了0.12之后，听说0.13.1有许多新的特性，包括永久函数，所以想更新成0.13版的（元数据放在mysql中）2014年8月5日实验成功hive0.13.1的新特性新特性详见http://zh.hortonworks.com/blog/announcing-apache-hive-0-13-c... 阅读全文
posted @ 2014-08-05 10:57 unflynaomi 阅读(480) 评论(0) 推荐(0)
ubuntu启动eclipse时出错cannot open display
摘要：由于要学习hadoop,就在ubuntu下创建了一个hadoop用户，但是eclipse是在naomi用户下装的，在root和naomi用户下都能正常启动，但是一旦切换到hadoop用户，试着启动eclipse,就会cannot open display, no protocol specify打开... 阅读全文
posted @ 2014-08-01 17:43 unflynaomi 阅读(734) 评论(0) 推荐(0)
eclipse运行mapreduce报错Permission denied
摘要：今天用在eclipse-hadoop平台上运行map reduce(word count)出错了，错误信息为org.apache.hadoop.security.AccessControlException:org.apache.hadoop.security.AccessControlExcept... 阅读全文
posted @ 2014-08-01 17:27 unflynaomi 阅读(416) 评论(0) 推荐(0)
Ubuntu环境下eclipse的hadoop开发
摘要：在安装好hadoop伪分布式后，开始搭建eclipse的hadoop开发环境我的版本信息如下：Ubuntu 版本 12.10Hadoop版本 1.2.1Java版本 1.6.0_31（命令java -version）于2014年8月1日安装成功1.安装Eclipse调用我写的这篇博客点击打开链接2.... 阅读全文
posted @ 2014-08-01 16:17 unflynaomi 阅读(317) 评论(0) 推荐(0)
ubuntu下安装eclipse
摘要：1.下载安装包从http://www.eclipse.org/downloads/只能下载最新的支持java8的luna版的eclipse，但是它要求java 的版本是1.7以上，可惜我的是1.6.0_31，不想重新下载jdk,就下载开普勒版的吧地址http://www.eclipse.org/do... 阅读全文
posted @ 2014-08-01 11:26 unflynaomi 阅读(1016) 评论(0) 推荐(0)
Hadoop namenode无法启动问题解决
摘要：原因：在root账户(非hadoop账户)下操作hadoop会导致很大的问题首先运行bin/start-all.sh发现namenode没有启动只有它们9428 DataNode9712 JobTracker9626 SecondaryNameNode9983 Jps9915 TaskTracker... 阅读全文
posted @ 2014-07-30 11:07 unflynaomi 阅读(24712) 评论(0) 推荐(1)
ubuntu下搭建hive(包括hive的web接口)记录
摘要：Hive版本 0.12.0（独立模式）Hadoop版本 1.12.1Ubuntu 版本 12.10今天试着搭建了hive,差点迷失在了网上各种资料中，现在把我的经验分享给大家，亲手实践过，但未必每一步都是必须的，正确的，大家可以参考一下。第一步：安装和测试mysql（已装好的可跳过）见我总结的htt... 阅读全文
posted @ 2014-07-16 13:36 unflynaomi 阅读(478) 评论(0) 推荐(0)