数仓的数据存储在hdfs中,业务数据和可视化数据存储在mysql中,日志数据存储在file中。爬虫得到数据一般存储在mongodb中

数仓的数据存储在hdfs中,业务数据和可视化数据存储在mysql中,日志数据存储在file中。

 

flume和kafka用于把日志数据file导入到hdfs中,sqoop用于把业务数据mysql的数据导入到hdfs中

posted @ 2020-03-09 11:01  TryMyBest!  阅读(476)  评论(0)    收藏  举报