随笔分类 - FLINK
摘要:fetchsize = Integer.MIN_VALUE 作用 如果不设置上述值,默认读取jdbc数据时,会默认获取所有的行到resultset中,数据量大会导致oom和占用大量内存 reWriteBatchedInserts=true 作用 java开发者使用PG jdbc驱动时,可以指定reW
阅读全文
摘要:Catalog 提供了元数据信息,例如数据库、表、分区、视图以及数据库或其他外部系统中存储的函数和信息。 数据处理最关键的方面之一是管理元数据。 元数据可以是临时的,例如临时表、或者通过 TableEnvironment 注册的 UDF。 元数据也可以是持久化的,例如 Hive Metastore
阅读全文
摘要:Connector扩展说明 实现一个新的connector用户需要做的事情在上图中Planning部分,其中根据source还是sink来决定实现DynamicTableSourceFactory还是DynamicTableSinkFactory,也可以同时实现这两个接口。 以下针对JdbcDyna
阅读全文