摘要： 阅读全文

摘要：1. table转map //事件权重 val eventWeightQuery = "select eventId,eventCode,eventName,weight from dwd.dwd_event_weight_dim"; val eventWeightMap = spark.sql(e 阅读全文

摘要：透视函数其实就是我们excel中常用的数据透视表相似，先来看个例子。 以下是准备的数据源，数据是电商系统中用户的行为数据(浏览，收藏，加购，成交，评分等)，score为统计次数。 对应的字段分别为 租户id，用户id，商品编码Id，行为事件代码，当日统计次数，统计日期。 现在我们要转换成目标的数据是 阅读全文

摘要：周末闲下来，画了幅目前主流的数据仓库的分层结构。 阅读全文

摘要：Typesafe的Config库，纯Java写成、零外部依赖、代码精简、功能灵活、API友好。 支持Java properties、JSON、JSON超集格式HOCON以及环境变量。 它也是Akka的配置管理库。 概述 纯java实现，无任何依赖 充分的测试 支持: Java properties, 阅读全文