秋华 - 博客园

2020年9月20日

java.lang.IllegalStateException(Connection to remote Spark driver was lost)

摘要： hive-site.xml配置错误，提示文件sparkeventlog不存在，每次涉及HDFS路径参数的时候，添加core-site.xml中 fs.defaultFS 对应的 {hostname}:port 信息。例如，之前关于sparkeventlog的配置参数是这样子的：/user/hive/ 阅读全文

posted @ 2020-09-20 19:00 秋华阅读(2667) 评论(0) 推荐(0)

java.security.cert.CertificateNotYetValidException: NotBefore

摘要：问题原因：证书不在有效期，linux系统时间不对。解决办法：将linux系统时间修改成当前时间阅读全文

posted @ 2020-09-20 16:25 秋华阅读(3560) 评论(0) 推荐(0)

Hadoop问题：org.apache.hadoop.ipc.RpcException: RPC response exceeds maximum data length 错误

摘要： Exception in thread "main" java.io.IOException: Failed on local exception: org.apache.hadoop.ipc.RpcException: RPC response exceeds maximum data lengt 阅读全文

posted @ 2020-09-20 14:20 秋华阅读(12410) 评论(0) 推荐(0)

2020年9月17日

FLINK实例（5）: CONNECTORS（4）Flink管理Kafka的消费偏移量

该文被密码保护。阅读全文

posted @ 2020-09-17 20:30 秋华阅读(784) 评论(0) 推荐(0)

FLINK实例（4）: CONNECTORS（3）MySQL读写

该文被密码保护。阅读全文

posted @ 2020-09-17 18:26 秋华阅读(3072) 评论(0) 推荐(0)

2020年9月16日

FLINK实例（3）: CONNECTORS（2）自定义source

该文被密码保护。阅读全文

posted @ 2020-09-16 22:56 秋华阅读(675) 评论(0) 推荐(0)

FLINK实例（1）: flink开发环境准备

该文被密码保护。阅读全文

posted @ 2020-09-16 18:57 秋华阅读(595) 评论(0) 推荐(0)

2020年9月15日

Flink基础（十八）：FLINK面试题（0）

该文被密码保护。阅读全文

posted @ 2020-09-15 21:07 秋华阅读(2050) 评论(0) 推荐(1)

2020年9月12日

实时电商数仓（十）之数据采集（九）数据库数据采集（四）Maxwell入门与安装

该文被密码保护。阅读全文

posted @ 2020-09-12 21:44 秋华阅读(774) 评论(0) 推荐(0)

实时电商数仓（九）之数据采集（八）数据库数据采集（三）canal安装

摘要： 1 mysql的准备 1.1 导入模拟业务数据库 1.2 赋权限在mysql中执行 GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%' IDENTIFIED BY 'canal' ; 1.3 修改/et 阅读全文

posted @ 2020-09-12 21:29 秋华阅读(335) 评论(0) 推荐(0)

秋华

公告