随笔分类 -  spark

Dream Spark ------spark on yarn ，yarn的配置
摘要：spark yarn的配置，主要是对yarn的日志的处理，其他参数请参考hadoop官网参数 地址：http://hadoop.apache.org/docs/r2.6.5/hadoop-yarn/hadoop-yarn-common/yarn-default.xml 阅读全文
posted @ 2017-01-05 17:36 拼命@三郎 阅读(157) 评论(0) 推荐(0)
Dream------hive on spark
摘要：hive on spark spark1.4.1 hive 1.2.1 hbase 1.1.2 在hive上使用spark的引擎 阅读全文
posted @ 2015-12-25 10:01 拼命@三郎 阅读(332) 评论(0) 推荐(0)
Dream------spark--spark集群的环境搭建
摘要：Dream------spark--spark的环境搭建 阅读全文
posted @ 2015-08-18 19:22 拼命@三郎 阅读(415) 评论(0) 推荐(0)