hadoop - 随笔分类 - shysky123

puppet

摘要：1、puppet简介 puppet是一个为实现数据中心自动化管理而设计的配置管理软件，能够管理IT基础设施的整个生命周期：供应（provisioning）配置（configuration）、联动（orchestration）及报告（reporting）。puppet基于C/S架构，类似于zabbi 阅读全文

posted @ 2017-09-06 14:39 shysky123 阅读(441) 评论(0) 推荐(0)

docker

摘要：教程 http://dockone.io/article/101 http://www.runoob.com/docker/docker-hello-world.html 1、什么是docker？ Docker 是一个开源的应用容器引擎，基于 Go 语言并遵从Apache2.0协议开源。 Dock 阅读全文

posted @ 2017-08-24 09:54 shysky123 阅读(164) 评论(0) 推荐(0)

tez是什么？

摘要：【Apache Tez是什么？】 http://dongxicheng.org/mapreduce-nextgen/apache-tez/ 浅谈Apache Tez中的优化技术 http://dongxicheng.org/mapreduce-nextgen/apache-tez-optimizat 阅读全文

posted @ 2017-07-19 14:56 shysky123 阅读(771) 评论(0) 推荐(0)

Hive:用Java代码通过JDBC连接Hiveserver

摘要：参考https://www.iteblog.com/archives/846.html 1、hive依赖hadoop，将hdfs当作文件存储介质，那是否意味着hive需要知道namenode的地址？实际上在hive的hive-env.sh 中配置了 HADOOP_HOME=/home/instal 阅读全文

posted @ 2017-06-09 15:07 shysky123 阅读(26939) 评论(0) 推荐(1)

JAVA HDFS API Client 连接HA

摘要：如果Hadoop开启HA，那么用Java Client连接Hive的时候，需要指定一些额外的参数阅读全文

posted @ 2017-06-09 14:16 shysky123 阅读(739) 评论(0) 推荐(0)

随笔分类 - hadoop