彬在俊

摘要：转自：http://dblab.xmu.edu.cn/blog/spark/ 一、声名值和变量 1. val变量 1.1 隐式声明变量 scala> val myStr = "Hello World!"myStr: String = Hell... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(218) 评论(0) 推荐(0)

摘要：总结《SparkStreaming实时流式大数据处理实战》一、初始spark 1. 初始sparkstreaming 1.1 大数据处理模式 1. 一种是原生流处理(Native)的方式，即所有输入记录会一条接一条地被处理，storm 和 fli... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(617) 评论(0) 推荐(0)

摘要：转自：https://blog.csdn.net/weixin_37766087/article/details/100940409 说明这篇文章是来自Hadoop Hive UDAF Tutorial - Extending Hive with A... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(186) 评论(0) 推荐(0)

摘要： 1. usage of api document as @since 1.8+ IDEA出现错误： Usage of API documented as @since 1.8+ less… This inspection finds ... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(438) 评论(0) 推荐(0)

摘要： UDF几个相关概念： UDF: one-to-one row mapping : upper substr【进来一行出去一行】 UDAF: Aggregation Many-to-one row mapping 比如sum/mi... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(94) 评论(0) 推荐(0)

摘要：转载于：https://my.oschina.net/u/4631230/blog/4533371 (a表和b表通过user_id关联) 1.1 a表数据 ... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(326) 评论(0) 推荐(0)

摘要：转载于：https://blog.csdn.net/weixin_42670653/article/details/100042953 问题：在docker容器内无法删除文件 dockerfile里或者在容器内执行完rm -rf之后... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(632) 评论(0) 推荐(0)

摘要：文章目录深入服务端1. 时间轮 2. 控制器3. 关闭kafka4.分区leader的选举5. 参数解密深入服务端 1. 时... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(59) 评论(0) 推荐(0)

摘要：项目需求项目需要读取application.yml中自定义的配置文件。跨工程也是可以读取到application.yml文件... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(669) 评论(0) 推荐(0)

摘要：问题一：在做spring boot项目时用postman进行json调用测试时出现以上错误：这表达的意思是说上下文的类型格式不对... 阅读全文

posted @ 2022-11-10 19:26 彬在俊阅读(638) 评论(0) 推荐(0)