摘要：情况描述：kafka logs下的日志文件显示无法识别host的错误 并且kafka启动一下立马就被关闭了 解决： 首先netstat -nltp 看看自己的zookeeper是否如下 如果是这样，就vim /etc/hosts 将localhost改成你的服务器的ip 完美 阅读全文

摘要：hdfs-site.xml调优： 1.dfs.namenode.handler.count=20 * log2(Cluster Size) 比如集群规模为 8 台时，此参数设置为 60 NameNode 有一个工作线程池，用来处理不同 DataNode 的并发心跳以及客户端并发 的元数据操作。对于大 阅读全文

摘要：一.项目经验： 1.hdfs设置多目录 why：当hdfs存储空间紧张，需要对datanode节点进行磁盘扩展 what：（1）在 hdfs-site.xml 文件中配置多目录，注意新挂载磁盘的访问权限问题 <property> <name>dfs.datanode.data.dir</name> 阅读全文

摘要：前言：网上很多博客都没说到点子上，当时遇到这个问题也困扰了我好久，决定专门写篇博客帮大家脱离苦海。 不加载自定义配置文件无外乎2大情况： 1.使用其他环境的配置文件而没有使用hive/conf下的hive-site.xml配置文件（解决方案：删除非hive/conf下的配置文件） 2.使用了hive 阅读全文