数据流组件

1.Spark

  1. 微信读书:<<基于Hadoop与Spark的大数据开发实战>>(阅读截止点: 5.Spark MLlib)
    1.1 DAG(有向无环图)

2.了解规则引擎

3.clickhouse

3.1 关于ClickHouse的表引擎和SQL操作:https://blog.csdn.net/m0_69097184/article/details/133150826 [转载]
ClickHouse 入门:数据查询流程解析:https://blog.csdn.net/weixin_41905660/article/details/115213619 [转载]
3.2 对于微服务集群,组成元素是机器,每个机器部署一个服务,多台机器组成一个集群。
对于sql/nosql集群,组成元素是sharding分片(分片0、分片1),分片之间存储的数据是不一样的,单个分片认为是一个单机实例(mysql实例,clickhouse实例)由主+从机器构成(都部署对应sql服务)。整个集群构成一个完整的sql/nosql库实例集群,供调用方统一使用。

posted @ 2023-09-27 12:29  sunday__pei  阅读(17)  评论(0)    收藏  举报