2019 年 1月 5 日随笔档案 - 老董

supervisor管理hive metastore和hive server2进程

摘要： 1. hive_metastore.ini 2. start-metastore.sh 3.. hive_server2.ini 4. start-hiveserver2.sh 阅读全文

posted @ 2019-01-05 21:54 老董阅读(1144) 评论(0) 推荐(0)

摘要： Doris默认端口 Yarn 默认端口：如图，端口冲突，在混合部署的情况下，会出现2个问题： 1. Yarn ResourceManager启动不起来解决办法：修改yarn.resourcemanager.scheduler.address的端口，具体做法为：添加或修改（如果已经配置了yarn 阅读全文

posted @ 2019-01-05 16:41 老董阅读(1998) 评论(0) 推荐(1)

Hadoop 2.x常用端口及查看方法

摘要： Hadoop集群的各部分一般都会使用到多个端口，有些是daemon之间进行交互之用，有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多，完全记不住哪个端口对应哪个应用，特收集记录如此，以便查询。这里包含我们使用到的组件：HDFS, YARN, HBase, Hive, ZooK 阅读全文

posted @ 2019-01-05 16:23 老董阅读(1503) 评论(0) 推荐(0)

Hiveserver2高可用实现

摘要：在生产环境中使用Hive，强烈建议使用HiveServer2来提供服务，好处有: 在应用端不用部署Hadoop和Hive客户端；相比hive-cli方式，HiveServer2不用直接将HDFS和Metastore暴漏给用户；有安全认证机制，并且支持自定义权限校验；有HA机制，解决应用端的并发阅读全文

posted @ 2019-01-05 12:04 老董阅读(1721) 评论(0) 推荐(0)

lenmom

公告