上一页 1 2 3 4 5 6 7 8 ··· 27 下一页
摘要: Flink 的源码内有这么一个AsyncIOExample程序,非常好用,可以用来无限跑流。用英文说就是long running或者runs forever。同时可以用来测试checkpoints,metricReporter。但很不幸,官方可能忘记加到maven ant插件的构建过程中。 阅读全文
posted @ 2023-10-26 20:35 一杯半盏 阅读(307) 评论(0) 推荐(0)
摘要: 问题 Flink 提交作业,直接报错: java.lang.NoSuchMethodError: org.apache.hadoop.tracing.TraceUtils.wrapHadoopConf(Ljava/lang/String;Lorg/apache/hadoop/conf/Configu 阅读全文
posted @ 2023-09-18 17:56 一杯半盏 阅读(1022) 评论(0) 推荐(0)
摘要: 排查HDFS_DELEGATION_TOKEN过期问题,以及问题汇总。排查分为三种情况,Spark框架自身的问题,Hadoop全家桶的问题,开发者通过Hive,HDFS,HBASE访问HDFS的问题。 阅读全文
posted @ 2023-09-12 12:13 一杯半盏 阅读(671) 评论(0) 推荐(0)
摘要: # Java程序设计-个人月报-2023-08月 ## 背景 在本月,给负责的项目做了一次文件存储的迁移工作。 历史原因,开发阶段由于图简便,使用了本地文件存储。 后面经过容器化上云,导致应用出现上传文件分发的多节点的问题。 本项工作的经验,受益于Java基础Path的一些API,颇有收获。 > 复 阅读全文
posted @ 2023-08-25 11:48 一杯半盏 阅读(137) 评论(0) 推荐(0)
摘要: Openstack4j如何切换Nova Compute服务的版本,使用OSClientSession.headers() (and OSClientSession.getHeaders()) 阅读全文
posted @ 2023-07-04 11:25 一杯半盏 阅读(200) 评论(0) 推荐(0)
摘要: 使得项目易于构建部署,适应不同场景下的复杂工程的组织、发行、交付、落地中的问题。多场景部署,优化部署流程,减少不必要的构建和文件复制传输。 阅读全文
posted @ 2023-06-12 16:37 一杯半盏 阅读(8757) 评论(5) 推荐(2)
摘要: 本文介绍了Flink 1.16的 HistoryServer 集成Yarn进行日志查看的方案,详细分析了Jobmanager和TaskManager的日志链接转换的方法。仅供参考。 阅读全文
posted @ 2023-05-31 12:01 一杯半盏 阅读(700) 评论(0) 推荐(0)
摘要: Flink On Yarn 的Classpath的传递过程分析。ClassNotFoundException: org.apache.hadoop.mapred.MRVersion 阅读全文
posted @ 2023-05-29 15:48 一杯半盏 阅读(786) 评论(0) 推荐(0)
摘要: Openstack4j Multi-thread Token Sharing 阅读全文
posted @ 2023-05-16 15:41 一杯半盏 阅读(76) 评论(0) 推荐(0)
摘要: 环境 Tomcat 8.x 报错 Invalid character found in the HTTP protocol [HTTP/1.1 Connection:] 分析 查看localhost_access_log.txt发现: HEAD / 400 都是HEAD 请求,且返回都是400,毕竟 阅读全文
posted @ 2023-04-10 18:49 一杯半盏 阅读(922) 评论(0) 推荐(0)
上一页 1 2 3 4 5 6 7 8 ··· 27 下一页