随笔分类 -  FLINK

摘要:fetchsize = Integer.MIN_VALUE 作用 如果不设置上述值,默认读取jdbc数据时,会默认获取所有的行到resultset中,数据量大会导致oom和占用大量内存 reWriteBatchedInserts=true 作用 java开发者使用PG jdbc驱动时,可以指定reW 阅读全文
posted @ 2023-01-04 09:36 life_start 阅读(249) 评论(0) 推荐(0)
摘要:Catalog 提供了元数据信息,例如数据库、表、分区、视图以及数据库或其他外部系统中存储的函数和信息。 数据处理最关键的方面之一是管理元数据。 元数据可以是临时的,例如临时表、或者通过 TableEnvironment 注册的 UDF。 元数据也可以是持久化的,例如 Hive Metastore 阅读全文
posted @ 2022-09-21 16:00 life_start 阅读(242) 评论(0) 推荐(0)
摘要:Connector扩展说明 实现一个新的connector用户需要做的事情在上图中Planning部分,其中根据source还是sink来决定实现DynamicTableSourceFactory还是DynamicTableSinkFactory,也可以同时实现这两个接口。 以下针对JdbcDyna 阅读全文
posted @ 2022-09-15 17:17 life_start 阅读(1450) 评论(0) 推荐(1)