随笔分类 -  大数据

上一页 1 2 3 4 下一页
kafka通过API读取对应topic数据
该文被密码保护。
posted @ 2019-11-21 10:12 啊啊啊啊鹏 阅读(1) 评论(0) 推荐(0)
spark大表join大表 SMB JOIN方式优化
该文被密码保护。
posted @ 2019-11-19 16:18 啊啊啊啊鹏 阅读(3) 评论(0) 推荐(0)
关于spark大表join大表的优化 一 网上方法加随机前缀
该文被密码保护。
posted @ 2019-11-19 15:49 啊啊啊啊鹏 阅读(1) 评论(0) 推荐(0)
关于spark小表join大表的优化
该文被密码保护。
posted @ 2019-11-19 15:36 啊啊啊啊鹏 阅读(2) 评论(0) 推荐(0)
DataFrameAPI实现查询 sql方法调不出来
该文被密码保护。
posted @ 2019-11-18 21:20 啊啊啊啊鹏 阅读(1) 评论(0) 推荐(0)
hive命令行 显示字段名配置
摘要：在hive查询中我们发现hive的查询输出不显示列名，怎么解决呢？ 解决办法：进入hive cli后： set hive.cli.print.header=true; hive> select * from ratings limit 5; OK ratings.userid ratings.mov 阅读全文
posted @ 2019-11-18 10:19 啊啊啊啊鹏 阅读(1328) 评论(0) 推荐(0)
Linux 查看当前目录下的文件大小
摘要：查看当前目录下各个文件及目录占用空间大小 du -sh * 阅读全文
posted @ 2019-11-17 13:46 啊啊啊啊鹏 阅读(4332) 评论(0) 推荐(0)
apache 端口号与 CDH端口号对比
摘要：apache hdfs端口号：9000 CDH hdfs端口号：8020 阅读全文
posted @ 2019-11-15 09:40 啊啊啊啊鹏 阅读(431) 评论(0) 推荐(0)
dbeaver驱动问题解决方案
摘要：本文链接：https://blog.csdn.net/zhikanjiani/article/details/100920775 第一章：Dbeaver连接MySQL 1、关于下载安装以及Dbeaver连接MySQL、请看楼主的这篇博客： MySQL实操（一） https://blog.csdn.n 阅读全文
posted @ 2019-11-14 17:22 啊啊啊啊鹏 阅读(33458) 评论(0) 推荐(0)
容量调度器与公平调度器区别
摘要：容量调度器是并行执行的 公平调度器是并发执行的 并行是一段时间内同时执行，具体到时刻只有一个执行，即多个线程同一时刻只有一个执行 并发是同一时刻同时发生执行，即多个线程同一时刻执行 阅读全文
posted @ 2019-11-13 11:32 啊啊啊啊鹏 阅读(1881) 评论(0) 推荐(0)
升序的时间产生水印
只有注册用户登录后才能阅读该文。
posted @ 2019-11-11 12:11 啊啊啊啊鹏 阅读(0) 评论(0) 推荐(0)
宽依赖与窄依赖各自是否可并行执行
只有注册用户登录后才能阅读该文。
posted @ 2019-11-10 14:33 啊啊啊啊鹏 阅读(1) 评论(0) 推荐(0)
窗口全量聚合算子apply和process有什么区别么？？分别什么时候用？
只有注册用户登录后才能阅读该文。
posted @ 2019-11-09 22:06 啊啊啊啊鹏 阅读(1) 评论(0) 推荐(0)
kafka ack
只有注册用户登录后才能阅读该文。
posted @ 2019-11-06 19:38 啊啊啊啊鹏 阅读(3) 评论(0) 推荐(0)
flink的事务型写入
只有注册用户登录后才能阅读该文。
posted @ 2019-11-06 16:36 啊啊啊啊鹏 阅读(2) 评论(0) 推荐(0)
es 如何保证一致性？
只有注册用户登录后才能阅读该文。
posted @ 2019-11-06 15:47 啊啊啊啊鹏 阅读(4) 评论(0) 推荐(0)
Spark的cache（持久化），和checkpoint与flink的保证数据一致性的检查点有什么不同么？
只有注册用户登录后才能阅读该文。
posted @ 2019-11-06 12:08 啊啊啊啊鹏 阅读(5) 评论(0) 推荐(0)
flink的window与windowAll
只有注册用户登录后才能阅读该文。
posted @ 2019-11-05 20:55 啊啊啊啊鹏 阅读(2) 评论(0) 推荐(0)
flink的keyBy()聚合算子
只有注册用户登录后才能阅读该文。
posted @ 2019-11-04 22:13 啊啊啊啊鹏 阅读(3) 评论(0) 推荐(0)
flink的Kafka数据源代码样例
摘要：1 val properties = new Properties() 2 properties.setProperty("bootstrap.servers", "localhost:9092") 3 properties.setProperty("group.id", "consumer-gro 阅读全文
posted @ 2019-11-04 20:21 啊啊啊啊鹏 阅读(521) 评论(0) 推荐(0)

上一页 1 2 3 4 下一页
1 2