07 2021 档案
摘要:大数据项目实战 电商埋点日志分析(第s三部分,DWD层)
阅读全文
摘要:安装部署HIVE1)安装Hive并且使用mysql作为后台数据库,来支持多客户端。2)安装,性能优于MR的,tez引擎。 构建ODS层 表 ods_start_log 1)创建ods 表 ods_start_log。 2)加载数据。 构建ODS层 表 ods_event_log 1)创建ods 表
阅读全文
摘要:https://www.bilibili.com/video/BV1L4411K7hW?p=31&spm_id_from=pageDriver 架构: 数据流生产Flume读取日志文件做简单ETL后写入到kafka,然后消费Flume从kafka中将数据读出写入到hdfs。项目中还应用了zookee
阅读全文

浙公网安备 33010602011771号