摘要:
随着大数据行业的发展,大数据生态圈中相关的技术也在一直迭代进步,目前大数据生态圈中的核心技术总结下来如图所示 1、数据采集技术框架 (参见:flume 前世今生 / 开源数据采集组件比较: scribe、chukwa、kafka、flume) 数据采集也被称为数据同步。随着互联网、移动互联网、物联网 阅读全文
posted @ 2022-08-13 15:51 天戈朱 阅读(264) 评论(0) 推荐(1) 编辑
摘要:
随着大数据行业的发展,大数据生态圈中相关的技术也在一直迭代进步,目前大数据生态圈中的核心技术总结下来如图所示 1、数据采集技术框架 (参见:flume 前世今生 / 开源数据采集组件比较: scribe、chukwa、kafka、flume) 数据采集也被称为数据同步。随着互联网、移动互联网、物联网 阅读全文
posted @ 2022-08-13 15:51 天戈朱 阅读(264) 评论(0) 推荐(1) 编辑
摘要:
前言:Apache Flink 作为新一代的实时计算框架已经被应用到各个行业与领域,其岂存在着应用的痛点比如 FlinkSQL 在线IDE、作业提交不友好、作业无监控报警等。很大程度上说,FlinkSQL 加快了 Flink 的应用推广,而开源项目 Dinky 改善了 Flink 的部分痛点问题来优 阅读全文
posted @ 2022-08-13 15:51 天戈朱 阅读(852) 评论(0) 推荐(0) 编辑 |
||