摘要: 查看zk的连接的进程 netstat -tnp|grep 2181|wc -l 阅读全文
posted @ 2023-07-27 18:11 平平淡淡以明志 阅读(63) 评论(0) 推荐(0)
摘要: 操作场景 此功能适用于Hive组件。 按如下操作步骤设置参数后,在未安装HBase的环境执行Hive on Spark任务时,可避免任务卡顿。 说明:Hive on Spark任务执行Hive on Spark任务。如果没有安装HBase,默认在执行Spark任务时,会尝试去连接Zookeeper访 阅读全文
posted @ 2023-07-11 16:43 平平淡淡以明志 阅读(80) 评论(0) 推荐(0)
摘要: hiveserver2中的报错如下 Caused by: org.apache.hadoop.hive.ql.metadata.HiveException: MetaException(message:Got exception: org.apache.hadoop.ipc.RemoteExcept 阅读全文
posted @ 2023-07-11 11:07 平平淡淡以明志 阅读(351) 评论(0) 推荐(0)
摘要: 在alluxio-env中。增添 ALLUXIO_MASTER_ATTACH_OPTS="-agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=60001"ALLUXIO_WORKER_ATTACH_OPTS="-agentlib 阅读全文
posted @ 2023-05-29 20:16 平平淡淡以明志 阅读(42) 评论(0) 推荐(0)
摘要: Apache Kyuubi调研https://blog.csdn.net/weixin_45723348/article/details/119216767网易Spark Kyuubi核心架构设计与源码实现剖析 推荐 原创https://blog.51cto.com/xpleaf/2780248 阅读全文
posted @ 2023-05-28 15:59 平平淡淡以明志 阅读(74) 评论(0) 推荐(0)
摘要: kerberos封装认证https://cyq89051127.github.io/2018/07/20/HADOOP%E5%92%8CZOOKEEPER%E7%9A%84kerberos%E8%AE%A4%E8%AF%81/Kafka kerberos认证 动态认证与静态认证https://blo 阅读全文
posted @ 2023-05-28 15:59 平平淡淡以明志 阅读(35) 评论(0) 推荐(0)
摘要: presto资料: https://developer.aliyun.com/article/780518https://github.com/sqlcore/presto-teachPresto官网:https://prestodb.io/Presto下载安装包:https://prestodb. 阅读全文
posted @ 2023-05-28 15:59 平平淡淡以明志 阅读(48) 评论(0) 推荐(0)
摘要: hudi好文档-hudi-resources https://github.com/leesf/hudi-resources【Hudi】数据湖(三):Hudi概念术语https://blog.csdn.net/u013522009/article/details/125243952【Hudi】数据湖 阅读全文
posted @ 2023-05-28 15:58 平平淡淡以明志 阅读(70) 评论(0) 推荐(0)
摘要: 句柄数太多问题查看用户线程数命令:ps h -Led -o user | sort | uniq -c | sort -nr使用jstack查看线程https://blog.csdn.net/qq_26264237/article/details/116263159可以通过命令查看当前HS2里面的线 阅读全文
posted @ 2023-05-28 15:58 平平淡淡以明志 阅读(250) 评论(0) 推荐(0)
摘要: Alluxio 社区版 v2.5官方文档https://www.bookstack.cn/read/alluxio-ce-v2.5-zh/7af9eaaa04664cce.md 阅读全文
posted @ 2023-05-28 15:57 平平淡淡以明志 阅读(26) 评论(0) 推荐(0)