会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
在路上
码在路上
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
2014年8月27日
spark cdh5编译安装[spark-1.0.2 hadoop2.3.0 cdh5.1.0]
摘要: 前提你得安装有Hadoop 我的版本hadoop2.3-cdh5.1.01、下载maven包2、配置M2_HOME环境变量,配置maven 的bin目录到path路径3、export MAVEN_OPTS="-Xmx2g -XX:MaxPermSize=512M -XX:ReservedCodeCa...
阅读全文
posted @ 2014-08-27 17:07 在路上.......
阅读(1489)
评论(0)
推荐(0)
2014年8月24日
spark上 spark-shell和java -jar访问hdfs路径问题
摘要: 部署spark集群使用spark包spark-1.0.2-bin-hadoop2.tgz在spark-shell和java -jar访问hadoop hdfs上的文件写法是有区别的在spark-shell直接使用/user/ning/1.txt 之类的路径,不用加hdfs://host:port 的...
阅读全文
posted @ 2014-08-24 07:26 在路上.......
阅读(1484)
评论(0)
推荐(0)
spark运行java-jar:Exception in thread "main" java.io.IOException: No FileSystem for scheme: hdfs
摘要: 今天碰到的一个 spark问题,困扰好久才解决首先我的spark集群部署使用的部署包是官方提供的spark-1.0.2-bin-hadoop2.tgz部署在hadoop集群上。在运行java jar包的时候使用命令java -jar chinahadoop-1.0-SNAPSHOT.jar chin...
阅读全文
posted @ 2014-08-24 07:20 在路上.......
阅读(7578)
评论(1)
推荐(1)
2014年7月25日
jquery mutilselect 插件添加中英文自动补全
摘要: jquery mutilselect默认只能根据设置的option来进行自动提示$.each(availableTags, function(key, value) { $('#channels') .append($("") ....
阅读全文
posted @ 2014-07-25 16:59 在路上.......
阅读(489)
评论(0)
推荐(0)
2014年6月27日
mongodb学习笔记系列一
摘要: 一、简介和安装 ./bin/mongod --dbpath /path/to/database --logpath /path/to/log --fork --port 27017 mongodb非常的占磁盘空间, 刚启动后要占3-4G左右,--smallfiles二、基本命令 1...
阅读全文
posted @ 2014-06-27 13:35 在路上.......
阅读(292)
评论(0)
推荐(1)
2014年6月18日
Apache Pig中文教程集合
摘要: Apache Pig中文教程集合: http://www.codelast.com/?p=4550#more-4550
阅读全文
posted @ 2014-06-18 15:53 在路上.......
阅读(165)
评论(0)
推荐(0)
2014年5月19日
hadoop2.x的安装
摘要: 可以自己从官网编译打包也可以直接下载官网的.gz包。自己编译打包的过程如下:1、查看是否安装cmake、svn、openssl、ncurses,没有的直接安装上yum list|grep cmakeyum list |grep ncursesyum install -y ncurses.i386 n...
阅读全文
posted @ 2014-05-19 15:26 在路上.......
阅读(184)
评论(0)
推荐(0)
上一页
1
2
公告