06 2018 档案

摘要:未完待续! 阅读全文
posted @ 2018-06-29 06:46 Dlimeng 阅读(12) 评论(0) 推荐(0)
摘要:未完待续! 阅读全文
posted @ 2018-06-29 06:46 Dlimeng 阅读(7) 评论(0) 推荐(0)
摘要:维度表技术常见:增加列,维度子集,角色扮演维度,层次维度,退化维度,杂项维度,维度合并,分段维度等基本维度表技术。 一.增加列 事实表和维度表上增加列。 Hive上增加列,慎用alter table。原因老版本的hive对ORC格式表的模式修改,尤其是增加列的支持存在很多问题。 JIRA上说2.0. 阅读全文
posted @ 2018-06-19 03:46 Dlimeng 阅读(27) 评论(0) 推荐(0)
摘要:维度表技术常见:增加列,维度子集,角色扮演维度,层次维度,退化维度,杂项维度,维度合并,分段维度等基本维度表技术。 一.增加列 事实表和维度表上增加列。 Hive上增加列,慎用alter table。原因老版本的hive对ORC格式表的模式修改,尤其是增加列的支持存在很多问题。 JIRA上说2.0. 阅读全文
posted @ 2018-06-19 03:46 Dlimeng 阅读(7) 评论(0) 推荐(0)
摘要:/** * 递归:在方法体重调用本身这个方法 **/public class DiGui { public static void main(String[] args) { DiGui.test(0); } public static void test(int value){ if(value< 阅读全文
posted @ 2018-06-18 03:47 Dlimeng 阅读(7) 评论(0) 推荐(0)
摘要:/** * 冒泡 * 两两比较相邻记录,如果反序则交换,直到没有反序的记录为止 */public class bubble { public static void bubblesort(int[] sort){ int tmp=0; for (int i = 0; i < sort.length- 阅读全文
posted @ 2018-06-18 03:29 Dlimeng 阅读(6) 评论(0) 推荐(0)
摘要:导入hbase01 本文引入spark hbase插入和批量插入。 批量插入:用BulkLoad方法,具体介绍查看导入hbase01 /** * Hbase 保存数据 * **/ object TestHbaseDemo { val logger = LoggerFactory.getLogger( 阅读全文
posted @ 2018-06-11 18:03 Dlimeng 阅读(7) 评论(0) 推荐(0)
摘要:一.简介 推荐系统本质上是销售系统的一部分。 为了解决信息过载和用户无明确需求的问题,找到用户感兴趣物品,才有了个性化推荐。 二.组成 推荐系统广泛存在于各类网站中,一般由三部分组成:基础数据、推荐算法系统、前台展示。基础数据包括很多维度,包括用户的访问、浏览、下单、收藏,用户的历史订单信息,评价信 阅读全文
posted @ 2018-06-11 16:02 Dlimeng 阅读(8) 评论(0) 推荐(0)
摘要:一.简介 推荐系统本质上是销售系统的一部分。 为了解决信息过载和用户无明确需求的问题,找到用户感兴趣物品,才有了个性化推荐。 二.组成 推荐系统广泛存在于各类网站中,一般由三部分组成:基础数据、推荐算法系统、前台展示。基础数据包括很多维度,包括用户的访问、浏览、下单、收藏,用户的历史订单信息,评价信 阅读全文
posted @ 2018-06-11 16:02 Dlimeng 阅读(22) 评论(0) 推荐(0)
摘要:spark读取kafka数据流提供了两种方式createDstream和createDirectStream。 两者区别如下: 1、KafkaUtils.createDstream 构造函数为KafkaUtils.createDstream(ssc, [zk], [consumer group id 阅读全文
posted @ 2018-06-09 15:40 Dlimeng 阅读(48) 评论(0) 推荐(0)
摘要:那夜,我看见您划破天空,掉落在我再也找不着的泥土之地。就在那一闪之间,我眼前浮现那一幕幕生活之景...... 童年,我多次装病不上学,贪图安逸,常常假装呕吐,吸引您的目光,关切我的状况。一次可以然多次以后,难道您没有发现我的动机吗?但您对我并没有过多责怪,难道您并没有生气吗?那是因为您选择理解我。您 阅读全文
posted @ 2018-06-03 00:48 Dlimeng 阅读(6) 评论(0) 推荐(0)
摘要:那夜,我看见您划破天空,掉落在我再也找不着的泥土之地。就在那一闪之间,我眼前浮现那一幕幕生活之景...... 童年,我多次装病不上学,贪图安逸,常常假装呕吐,吸引您的目光,关切我的状况。一次可以然多次以后,难道您没有发现我的动机吗?但您对我并没有过多责怪,难道您并没有生气吗?那是因为您选择理解我。您 阅读全文
posted @ 2018-06-03 00:48 Dlimeng 阅读(7) 评论(0) 推荐(0)
摘要:一.简介 it行业中,许多数据分析框架的诞生,它们帮助我们理解创业和创业在不同阶段所经历的变化,并助力创业公司获取客户和创造营收。每一套框架对创业的生命周期都有着不同的视角,分别提出一系列值得关注的数据指标和领域。 二.“海盗指标”(需要关注指标,用户/客户/访客须经历的五个环节)1.获取用户 相关 阅读全文
posted @ 2018-06-02 14:19 Dlimeng 阅读(17) 评论(0) 推荐(0)