我的随笔

Spark读取HDFS小文件优化

远去的列车 2022-03-27 15:17 阅读:799 评论:0 推荐:0

Spark如何读取gbk等非utf-8编码的文件

远去的列车 2021-12-31 10:20 阅读:431 评论:0 推荐:0

利用SparkLauncher在代码中调用Spark作业

远去的列车 2021-12-30 20:11 阅读:1267 评论:0 推荐:0

linux机器上实现占用固定cpu使用率，并将程序绑定到固定cpu上

远去的列车 2021-02-24 21:18 阅读:523 评论:0 推荐:0

多个HDFS集群的fs.defaultFS配置一样，造成应用一直连接同一个集群的问题分析

远去的列车 2020-12-17 11:33 阅读:4197 评论:0 推荐:0

使用Spark的newAPIHadoopRDD接口访问有kerberos认证的hbase

远去的列车 2020-12-04 19:35 阅读:1641 评论:3 推荐:0

CDH集群spark-shell执行过程分析

远去的列车 2020-11-17 22:05 阅读:1049 评论:0 推荐:0

记一次 HBase Master is initializing 问题处理

远去的列车 2020-11-16 21:11 阅读:6608 评论:0 推荐:0

cloudera集群开启kerberos认证后，删除zk中的/hbase目录

远去的列车 2020-11-13 18:44 阅读:990 评论:0 推荐:0

Flink读写Redis（三）-读取redis数据

远去的列车 2020-11-04 20:51 阅读:12972 评论:1 推荐:1