会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
愿无违
博客园
首页
新随笔
联系
订阅
管理
2019年11月7日
flink ETL数据处理
摘要: Flink ETL 实现数据清洗 一:需求(针对算法产生的日志数据进行清洗拆分) 1. 算法产生的日志数据是嵌套json格式,需要拆分 2.针对算法中的国家字段进行大区转换 3.最后把不同类型的日志数据分别进行储存 二:整体架构 这里演示处理从rabbitmq来的数据 进行数据处理 然后发送到rab
阅读全文
posted @ 2019-11-07 21:37 愿无违
阅读(4760)
评论(0)
推荐(0)
公告