会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
进无止境
生命的闪耀,不坚持到底怎能看到!
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
18
19
20
21
22
23
24
25
26
···
47
下一页
2018年12月27日
Spark排序与去重遇见的问题
摘要: 答案: Spark的distinct是通过聚集去重的,可以简单理解为group by去重; 代码1:是先去重之后再排序取limit20是正确的, 代码2:是先排序之后再到各个节点进行去重之后再limit20,此时去重之后是无序的!!!! 有时候测试时候是单个节点计算体现不出来问题2存在的问题,因此单
阅读全文
posted @ 2018-12-27 15:13 bf378
阅读(802)
评论(0)
推荐(0)
2018年12月24日
hive 压缩 差不多出来数据 各种压缩 数据格式
摘要: 待学习 DeprecatedLzoTextInputFormat
阅读全文
posted @ 2018-12-24 15:55 bf378
阅读(185)
评论(0)
推荐(0)
算法-2018-12-24-打卡
摘要: 算法导论之动态规划 算法导论之动态规划
阅读全文
posted @ 2018-12-24 13:12 bf378
阅读(119)
评论(0)
推荐(0)
2018年12月21日
Scala主构造器参数是否升级为成员与是否有get/set
摘要: 1:主构造器前面添加val/var 关键字则升级为类成员,否则只是构造器中的一个参数而已。 2:private 修饰get/set方法权限,private var/val 成员变量,则有get/set方法但是都是私有的方法。
阅读全文
posted @ 2018-12-21 19:50 bf378
阅读(301)
评论(0)
推荐(0)
2018年12月20日
有时间研究一下Maven打包插件细节
摘要: Maven工作分为多个阶段,具体阶段参考:https://maven.apache.org/guides/introduction/introduction-to-the-lifecycle.html ; Maven 采用了一组可靠的插件来提供它的所有功能。在 Maven 中,插件拥有目标,在幕后,
阅读全文
posted @ 2018-12-20 18:38 bf378
阅读(823)
评论(0)
推荐(0)
2018年12月14日
Hive窗口函数
摘要: 参考地址:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+WindowingAndAnalytics 环境准备: 数据: 1、LEAD函数 LEAD (scalar_expression [,offset] [,defa
阅读全文
posted @ 2018-12-14 13:31 bf378
阅读(2087)
评论(0)
推荐(0)
2018年12月13日
Hive ORC 简单笔记
该文被密码保护。
阅读全文
posted @ 2018-12-13 18:12 bf378
阅读(1)
评论(0)
推荐(0)
2018年12月12日
自然周与自然月的Hive统计SQL
摘要: 按照周或者月统计活跃数: 周: 月: 主要是日期函数的使用!!!!! https://www.cnblogs.com/MOBIN/p/5618747.html https://www.tutorialspoint.com/hive/hive_built_in_functions.htm https:
阅读全文
posted @ 2018-12-12 15:04 bf378
阅读(8242)
评论(0)
推荐(0)
Spring boot中的配置方式之Configuration Classes
该文被密码保护。
阅读全文
posted @ 2018-12-12 11:39 bf378
阅读(0)
评论(0)
推荐(0)
2018年12月11日
Spring中的profiles的使用
该文被密码保护。
阅读全文
posted @ 2018-12-11 20:24 bf378
阅读(1)
评论(0)
推荐(0)
上一页
1
···
18
19
20
21
22
23
24
25
26
···
47
下一页
公告