会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
yuerspring
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
7
···
34
下一页
2018年11月8日
曾在贵州茅台上赚过30倍的私募大佬 如今又语出惊人 好文章共勉
摘要: 尽管近期重磅利好不断出台,但市场信心整体依然不足,A股在上周经历过短暂的兴奋后,本周再次犹豫不决。 中欧瑞博董事长吴伟志却认为,“这恰是底部的特征,如果管理层一喊话,指数就大涨,两融规模就上去了,投资人信心就很足,我的信心反而要打折扣。当前无疑是我经历的第四次行情底...
阅读全文
posted @ 2018-11-08 09:00 yuerspring
阅读(181)
评论(0)
推荐(0)
2018年11月2日
The most important parameters of spark env when you using spark run data things
摘要: The most important parameters of spark env when you using spark run data thingsIn my memory I always confused by these parameters ,s...
阅读全文
posted @ 2018-11-02 16:40 yuerspring
阅读(165)
评论(0)
推荐(0)
2018年10月31日
懵逼,同事前几天问我一个udf 问题 ,还是 Python 格式的
摘要: 以前所有的Hive 函数都是 Java 或是 Scala 语言写的 ,Python 没有弄个 ,看到Python 格式的 code 懵逼了 ,非常懵逼 今天在看 Python 正则表达式偶遇 Python udf 的一个 case ,不过 Python 484...
阅读全文
posted @ 2018-10-31 18:06 yuerspring
阅读(327)
评论(0)
推荐(0)
2018年10月22日
Hive error log :FAILED: Execution Error, return code 137 from org.apache.hadoop.hive.ql.exec.mr.Mapr
摘要: From below log is not easy to find the root reason ,any body know that ,thx2018-10-22 03:45:41 INFO 2018-10-22 03:45:41,651 Stage-2(jo...
阅读全文
posted @ 2018-10-22 09:05 yuerspring
阅读(1410)
评论(0)
推荐(0)
2018年10月18日
Hive 关联主键数据倾斜的一种处理方法
摘要: 记得之前用过一种办法,concat(a.col,'-',ceil(rand()*100)%20)),将记录数特别多的关联字段取模20,得到新字段a.col2;另外维护一张有20条记录的小表,小表的数据从0到19,用b表的关联字段关联这张小表得到新的字段b.col2,然...
阅读全文
posted @ 2018-10-18 17:53 yuerspring
阅读(482)
评论(0)
推荐(0)
2018年10月16日
一个优秀投资人必备的12条素养(深度总结!)
摘要: 素养1站的高,看的远投资如下棋,看不到三步,谈不上高手,真正的大师往往能看到七八步之后。最优秀的投资人能预判五年以后的行业形势,并提前布局,软银的孙正义,投资日本雅虎、阿里巴巴等就是其远见卓识的具体表现。优秀的投资人能够看到三年以后的行业形势,比如股权分置改革前购买法...
阅读全文
posted @ 2018-10-16 20:01 yuerspring
阅读(672)
评论(0)
推荐(0)
hive null 值倾斜数据处理方法
摘要: on case when a.user_id is null then concat(‘jd-hive’,rand() ) else a.user_id end = b.user_id;如果两个表join 时 关联键 有众多null 值 ,null值数据会被分发到...
阅读全文
posted @ 2018-10-16 16:05 yuerspring
阅读(534)
评论(0)
推荐(1)
2018年9月26日
Hive 行列转换
摘要: 在京东众多业务中,促销业务充满了复杂性和挑战性,因为业务的灵活性,很多数据都存储成xml和json格式数据,这就要求下游数据分析师们需要对其做解析后方可使用 。在众多操作中 ,有一种是需要对数据做行列转换操作。数据结构:create external table jd...
阅读全文
posted @ 2018-09-26 20:16 yuerspring
阅读(257)
评论(0)
推荐(0)
2018年9月3日
TensorFlow 使用预训练好的卷积神经网络和循环神经网络(lstm)模型处理图片转文字(im2txt)
摘要: TensorFlow 使用预训练好的卷积神经网络和循环神经网络(lstm)模型处理图片转文字(im2txt)这是AI大智慧系列文章中的一篇关于图片转文字的一篇博文,介绍了如果使用已经训练好的模型。由于本模型的训练非常耗时间,GPU下可能需要 2weeks ,如果是浦东...
阅读全文
posted @ 2018-09-03 12:41 yuerspring
阅读(469)
评论(0)
推荐(0)
2018年8月24日
45度做人,90度做事,180度为人,360度处事
摘要: 俗话说,三思而后行,这句话是在警戒我们遇事不要忙着做决定,要先细细思量,这思量中就包含着做事的度,所谓做人做事要有度,失度必失 45度做人人生在世,做人要谦卑。只有谦卑的人才能走更远的路,俯下身子,正视前方,踏踏实实、一步一个脚印地往前走。既不要因为一时的成功而自大,...
阅读全文
posted @ 2018-08-24 17:45 yuerspring
阅读(208)
评论(0)
推荐(0)
上一页
1
2
3
4
5
6
7
···
34
下一页
公告