随笔分类 -  大数据解决方案

摘要：1、环境： 1.1、cassandra 集群： 用于日志数据存储 1.2、spark集群： 用户后期的实时计算及批处理 1.3、codis 集群： 用于缓存一些基本数据如IP归属地，IP经纬度等，当日志上来，对日志进行补全 1.4、postgres数据库： 1、用于存储维度表 2、存储统计结果 1. 阅读全文