09 2019 档案

spark 中sample放回时第二个参数意思
摘要：几率 阅读全文
posted @ 2019-09-28 21:10 啊啊啊啊鹏 阅读(667) 评论(0) 推荐(0)
spark端口号
摘要：50070：HDFSwebUI的端口号 8485:journalnode默认的端口号 9000：非高可用访问数rpc端口 8020：高可用访问数据rpc 8088：yarn的webUI的端口号 8080：master的webUI，Tomcat的端口号 7077：spark基于standalone的提 阅读全文
posted @ 2019-09-27 18:29 啊啊啊啊鹏 阅读(2241) 评论(0) 推荐(1)
关于scala中@throws(classOf[Exception])的作用
摘要：加在方法上，用于提示调用该方法时产生的异常，调用该方法时该解决异常或抛出（注解） 阅读全文
posted @ 2019-09-25 08:54 啊啊啊啊鹏 阅读(1052) 评论(0) 推荐(0)
关于scala闭包
摘要：def f1(a:Int)={ def f2(b:Int)={ a + b } f2 _ } // 在调用时，f1函数执行完毕后，局部变量a应该随着栈空间释放掉 val f = f1(1) val f2 = f(6) //执行完f1()才会返回f2(),但是当f2()执行时f1()执行完了，但是a由 阅读全文
posted @ 2019-09-24 10:30 啊啊啊啊鹏 阅读(140) 评论(0) 推荐(0)
hashMap扩容机制
摘要：https://blog.csdn.net/u014532901/article/details/78936283 阅读全文
posted @ 2019-09-23 10:05 啊啊啊啊鹏 阅读(151) 评论(0) 推荐(0)
关于StringBuilder扩容问题
摘要：http://fengfu.io/2018/01/02/StringBuilder%E4%BD%A0%E5%BA%94%E8%AF%A5%E7%9F%A5%E9%81%93%E7%9A%84%E5%87%A0%E4%BB%B6%E4%BA%8B%E6%83%85/ 阅读全文
posted @ 2019-09-23 08:33 啊啊啊啊鹏 阅读(395) 评论(0) 推荐(0)
关于Scala递归返回参数的问题
摘要：Scala的递归返回参数要自己写，因为他看最后一行代码可能陷进死循环里，退出条件不在一行，所以返回类型要自己确定 阅读全文
posted @ 2019-09-18 21:26 啊啊啊啊鹏 阅读(258) 评论(0) 推荐(0)
关于hive开窗函数的问题
摘要：如果over() 则开窗的聚合函数统计的所有行 如果over(partition by xx order by xx) 时，开窗的聚合函数统计的是相同partition by 后的字段按照order by 后的字段排序后区内行首到当前行，及相当于默认over(partition by xx orde 阅读全文
posted @ 2019-09-16 16:52 啊啊啊啊鹏 阅读(516) 评论(0) 推荐(0)

1 2