会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
yuerspring
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
8
9
10
11
12
13
14
15
16
···
34
下一页
2017年3月20日
SQL transformation
摘要: SQL transformationhow can we convert single row to multiple row (example)SAP_SALES_ORD_NUM COVERAGE_TERM1122 3 I need result as SAP_S...
阅读全文
posted @ 2017-03-20 13:27 yuerspring
阅读(156)
评论(0)
推荐(0)
2017年3月15日
Spark Scala DataFram join 操作
摘要: package com.xh.moviesimport org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}import org.apache.spark.sql.{Row,...
阅读全文
posted @ 2017-03-15 20:48 yuerspring
阅读(1651)
评论(0)
推荐(0)
2017年3月14日
发动机,变速箱,车速关系哲学
摘要: 最近段子不少,尤其是华为 35 岁的言论,所以就想写写员工 ,企业 的论证关系 在一个公司待久了,如果个人能力不断提高,但是公司平台一直稳定,或是 公司平台一直迭代更新 但是员工能力跟不上 都会造成车速减速在这里我们论证一下这三者的关系 , 发动机毫无疑问就是我们的员...
阅读全文
posted @ 2017-03-14 21:36 yuerspring
阅读(198)
评论(0)
推荐(0)
Spark Scala 二次排序
摘要: package com.second.sortbysparkimport org.apache.spark.{SparkConf, SparkContext}/** * Created by xxxxx on 3/14/2017. */object Seconda...
阅读全文
posted @ 2017-03-14 21:21 yuerspring
阅读(440)
评论(0)
推荐(0)
2017年3月12日
Spark RDD 实现电影点评用户行为分析 (Scala)
摘要: package com.xh.moviesimport org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}import scala.collection.mutableim...
阅读全文
posted @ 2017-03-12 23:49 yuerspring
阅读(389)
评论(0)
推荐(0)
2017年3月9日
IntelliJ IDEA 导入 spark 源码 步骤
摘要: 1.下载源码2.导入3.导入设置4.结束
阅读全文
posted @ 2017-03-09 21:13 yuerspring
阅读(150)
评论(0)
推荐(0)
2017年3月7日
Hive性能调优 内容来自网络
摘要: Hive的一般学习者和培训者在谈性能优化的时候一般都会从语法和参数这些雕虫小技的角度谈优化,而不会革命性的优化Hive的性能,产生这种现象的原因有:1,历史原因和思维定势:大家学习SQL的时候一般都是就单机DB,这个时候你的性能优化技巧确实主要是SQL语法和参数调优;...
阅读全文
posted @ 2017-03-07 21:34 yuerspring
阅读(142)
评论(0)
推荐(0)
scala 统计Datastage log 中每个job 的执行时间 以及一个batch job 中total 时间
摘要: package com.x.himport java.io.Fileimport scala.io.Source/** * Created by xxxxx on 3/7/2017. * read logs and anlysis the interval tim...
阅读全文
posted @ 2017-03-07 21:25 yuerspring
阅读(280)
评论(0)
推荐(0)
2017年2月25日
java jdbc 操作 hive 建表 load 数据
摘要: // 需要引入 hadoop & hive jar import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.Stateme...
阅读全文
posted @ 2017-02-25 19:19 yuerspring
阅读(3700)
评论(0)
推荐(0)
Hive Partition 操作
摘要: create external table demo (userid int ,name string ,address string)comment 'demo'partitioned by (txdate string ,txhour string)row for...
阅读全文
posted @ 2017-02-25 19:16 yuerspring
阅读(178)
评论(0)
推荐(0)
上一页
1
···
8
9
10
11
12
13
14
15
16
···
34
下一页
公告