2021年3月31日
【spark】sparkJDBC自定义方言(以vertica为例)
摘要： 背景 sparkJDBC在写入时提供了overwrite模式。当写入数据之前，会将之前的表drop掉，然后根据DataFrame类型推断生成Create语句新建一张表。 在某些小众的数据库，spark内部没有提供对应的方言。这是spark会使用一个NoopCommon的默认方言，这时候很容易推断错误 阅读全文
posted @ 2021-03-31 09:36 周周周文阳 阅读(948) 评论(0) 推荐(1)