随笔分类 -  flink

flink高可用nfs配置注意点
摘要：1.共享存储安装教程参见:Linux 环境下 NFS 服务安装及配置使用_哎_小羊的博客-CSDN博客_linux nfs 配置 2.配置好nfs后可能存在flink提交任务时无法在共享目录创建目录或文件等权限问题，主要原因是用户id映射问题 参考连接：1.鸟哥的 Linux 私房菜 -- NFS 阅读全文
posted @ 2021-07-16 10:40 一直爬行的蜗牛牛 阅读(762) 评论(0) 推荐(0)
flink启动脚本及配置的注意事项
摘要：1.执行start-cluster.sh脚本时要特别注意: a.当是zookeeper高可用集群时，在任何一个flink节点执行该脚本时，jobmanager会根据masters文件中的配置依次在masters文件配置节点上启动 b.当非zookeeper高可用集群时，在任何一个flink节点执行该 阅读全文
posted @ 2020-12-17 16:16 一直爬行的蜗牛牛 阅读(1895) 评论(0) 推荐(0)
flink1.10 taskmanager内存分配
摘要：taskmanager.memory.process.size: 4096m -Xmx1748185876（1667M,flink web界面显示的java heap size） -Xms1748185876 -XX:MaxDirectMemorySize=510698460(487M) -XX:M 阅读全文
posted @ 2020-03-12 16:55 一直爬行的蜗牛牛 阅读(4734) 评论(0) 推荐(0)