摘要: Flink+Kafka实时计算快速开始 一、概述 本示例场景(SQLServer->Kafka-Connect)实时流表与维度表(MySQL) JOIN得到数据实时写入到MySQL中的场景。 另外本示例是通过Kafka-connect 实现CDC, 实际上,Flink最新版本已直接支持CDC(截止到 阅读全文
posted @ 2021-11-27 13:55 一片相思林 阅读(1540) 评论(0) 推荐(0) 编辑
摘要: GitLab CI + Docker 实现持续集成 一、概述 使用Gitlab-Runner docker模式 官网相关参考: https://docs.gitlab.com/runner/install/docker.html https://docs.gitlab.com/runner/conf 阅读全文
posted @ 2021-11-07 20:11 一片相思林 阅读(156) 评论(0) 推荐(0) 编辑
摘要: Apache Doris 动态分区使用示例 一、Doris分区概述 在某些使用场景下,用户会将表按照天进行分区划分,每天定时执行例行任务,这时需要使用方手动管理分区,否则可能由于使用方没有创建分区导致数据导入失败,这给使用方带来了额外的维护成本。 通过动态分区功能,用户可以在建表时设定动态分区的规则 阅读全文
posted @ 2021-11-07 19:04 一片相思林 阅读(582) 评论(0) 推荐(0) 编辑
摘要: Apache Doris通过supervisor进行进程管理(挂了自启) 阅读全文
posted @ 2021-11-07 18:42 一片相思林 阅读(824) 评论(0) 推荐(1) 编辑
摘要: Apache Doris 编译安装记录 阅读全文
posted @ 2021-10-23 13:22 一片相思林 阅读(822) 评论(0) 推荐(0) 编辑
摘要: 基于Prometheus+Grafana搭建可视化监控服务 (三) Grafana可视化 阅读全文
posted @ 2021-08-15 19:04 一片相思林 阅读(1128) 评论(0) 推荐(0) 编辑
摘要: 基于Prometheus+Grafana搭建可视化监控服务 (二) AlertManager告警 阅读全文
posted @ 2021-08-15 17:04 一片相思林 阅读(623) 评论(0) 推荐(0) 编辑
摘要: 基于Prometheus+Grafana搭建可视化监控服务 (一) Prometheus监控 阅读全文
posted @ 2021-08-15 11:40 一片相思林 阅读(712) 评论(0) 推荐(0) 编辑
摘要: MongoDB-ChangeStream使用笔记 一、概述 MongoDB的ChangeStreams允许应用程序实时访问数据的变化。应用程序可以使用Change Streams订阅集合上的所有数据的更改,并立即对它们作出响应。利用Change Streams这一功能可以构建实时数据同步的应用。 C 阅读全文
posted @ 2020-12-12 15:10 一片相思林 阅读(2137) 评论(1) 推荐(0) 编辑
摘要: Mongo-BI(bi-connector)配置使用笔记 一、概述 MongoDB 官方提供的 BI Connector ,可以用来通过SQL(MySQL协议)方式直接访问MongoDB。 仅可以查询数据(基本上聚合函数、多表关联查询等都可支持),但不能通过此方式编辑或删除mongodb数据。 bi 阅读全文
posted @ 2020-12-12 14:08 一片相思林 阅读(2549) 评论(0) 推荐(0) 编辑