之于 - 博客园

2022年1月5日

Flink源码阅读 - K8s上部署session模式的集群(入口配置)

摘要：启动主类 KubernetesSessionCli KubernetesSessionCli#mian 主类入口 // org.apache.flink.kubernetes.cli.KubernetesSessionCli#main public static void main(String[] 阅读全文

posted @ 2022-01-05 10:15 之于阅读(898) 评论(0) 推荐(0) 编辑

2022年1月4日

Flink源码阅读 - 日进斗经

摘要： 2022-01-04 配置加载 org.apache.flink.kubernetes.entrypoint.KubernetesSessionClusterEntrypoint#main //K8sSession模式启动入口 org.apache.flink.runtime.util.Enviro 阅读全文

posted @ 2022-01-04 10:17 之于阅读(234) 评论(0) 推荐(0) 编辑

2021年12月31日

Flink 部署

摘要： Docker部署session模式 sudo docker pull flink:1.13.5-scala_2.12-java8 FLINK_PROPERTIES="jobmanager.rpc.address: jobmanager" sudo docker network create flin 阅读全文

posted @ 2021-12-31 10:04 之于阅读(58) 评论(0) 推荐(0) 编辑

2021年12月10日

Flink源码阅读 - K8s上部署session模式的集群(内部细节)

摘要： Flink源码分支: releas-1.13 deploySessionCluster 部署入口 // org.apache.flink.kubernetes.KubernetesClusterDescriptor#deploySessionCluster @Override public Clus 阅读全文

posted @ 2021-12-10 09:46 之于阅读(840) 评论(0) 推荐(0) 编辑

2021年12月8日

Lombok @Builder与JDBC查询导致的构造器缺失问题

摘要：问题现象 2021-21-08 10:48:37[http-nio-8080-exec-1] ERROR c.n.l.d.c.e.GlobalExceptionHandler - nested exception is org.apache.ibatis.executor.ExecutorExcep 阅读全文

posted @ 2021-12-08 17:28 之于阅读(288) 评论(0) 推荐(0) 编辑

2021年11月29日

Flink 1.13 Code Reading

摘要： Flink 启动 Mark list [工具]: 可以业务借鉴的 [Java]: Java基本知识, 自行了解 FileSystem init 基本类 Configuration [工具]管理所有的配置信息 Optional<T> getOptional(ConfigOption<T> option 阅读全文

posted @ 2021-11-29 10:11 之于阅读(87) 评论(0) 推荐(0) 编辑

2021年4月18日

Flink 任务提交

摘要： Flink Job Cluster Cluster Lifecycle: JobManager 随 Job启动结束, TaskManagers 根据任务资源惰性配. Resource Isolation: JobManager的致命错误只影响当前 Job. Other considerations: 阅读全文

posted @ 2021-04-18 19:28 之于阅读(205) 评论(0) 推荐(0) 编辑

2021年4月1日

Flink与Spark的比较

摘要：阅读全文

posted @ 2021-04-01 11:04 之于阅读(64) 评论(0) 推荐(0) 编辑

2021年3月30日

Mysql非常用操作

摘要：查索引信息 SELECT * FROM mysql.`innodb_index_stats` a WHERE a.`database_name` = '数据库名'; SELECT * FROM mysql.`innodb_index_stats` a WHERE a.`database_name` 阅读全文

posted @ 2021-03-30 15:08 之于阅读(41) 评论(0) 推荐(0) 编辑

2021年1月4日

flink - Watermark 更新策略验证

摘要： Watermark 更新策略验证前置环境服务器监听 7777 端口并把并把控制台输入发送到socket流配置 env.setParallelism(1); //并发数为1, waterMark共用于keyBy后的每个窗口 env.setStreamTimeCharacteristic(TimeC 阅读全文

posted @ 2021-01-04 23:53 之于阅读(260) 评论(0) 推荐(1) 编辑

之于