摘要: # 发士大夫 # 大数据开发-解决Windows下,开发环境常遇的几个问题 # 1.背景 大数据开发的测试环境,很多人不以为然,其实重复的打包,上传,测试虽然每次时间大概也就几分钟,但是积累起了往往会花费很多的时间,但是一个完整的测试环境在生产环境下往往难形成闭环,抛开堡垒机权限不说,hadoop, 阅读全文
posted @ 2023-09-03 19:04 Hoult丶吴邪 阅读(8) 评论(0) 推荐(0) 编辑
摘要: # 大数据开发-从Scala到Akka并发编程 # 大数据开发-从Scala到Akka并发编程 [4-1 Scala作业.pdf](file/4-1 Scala作业_UVqqJLwoIp.pdf) # 1.递归实现瓶盖,瓶子换酒瓶的算法 ## 1.1 需求描述 每瓶啤酒2元,3个空酒瓶或者5个瓶盖可 阅读全文
posted @ 2023-09-03 18:57 Hoult丶吴邪 阅读(5) 评论(0) 推荐(0) 编辑
摘要: # 大数据实战-Hive-技巧实战_2LgaeiFwLs7mCTwG5T3c9M # 大数据实战-Hive-技巧实战 # 1.union 和 union all - 前者可以去重 ```sql select sex,address from test where dt='20210218' unio 阅读全文
posted @ 2023-09-03 18:31 Hoult丶吴邪 阅读(11) 评论(0) 推荐(0) 编辑
摘要: # 使用Nginx做页面采集, Kafka收集到对应Topic_6XwWe5qWHGM2PojVPUSejM # 使用Nginx做页面采集, Kafka收集到对应Topic # 0.架构简介 模拟线上的实时流,比如用户的操作日志,采集到数据后,进行处理,暂时只考虑数据的采集,使用`Html+Jque 阅读全文
posted @ 2023-09-03 18:29 Hoult丶吴邪 阅读(3) 评论(0) 推荐(0) 编辑