摘要: 一、MySQL 在数据同步中用的比较多的是MySQL的binlog 1.bin-log简介 它记录了所有的DDL和DML(除了数据查询语句,select与show不记录)语句,以事件形式记录,还包含语句所执行的消耗的时间 2.开启bin-log //重启生效 更多详细介绍,参考:https://ww 阅读全文
posted @ 2018-07-25 16:43 ---江北 阅读(3427) 评论(0) 推荐(0) 编辑
摘要: 一、整体架构 从下至上依次分为数据采集层、数据计算层、数据服务层、数据应用层 数据采集层:以DataX为代表的数据同步工具和同步中心 数据计算层:以MaxComputer为代表的离线数据存储和计算平台 数据服务层:以RDS为代表的数据库服务(接口或者视图形式的数据服务) 数据应用层:包含流量分析平台 阅读全文
posted @ 2018-07-25 10:40 ---江北 阅读(5740) 评论(0) 推荐(2) 编辑
TOP