随笔分类 -  flink

flink时区问题，修改配置文件flink-conf.yaml
摘要：flink时区问题，修改配置文件flink-conf.yaml： env.java.opts.jobmanager: -Duser.timezone=Etc/GMTenv.java.opts.taskmanager: -Duser.timezone=Etc/GMT 阅读全文
posted @ 2020-01-08 14:58 后山前堂客 阅读(3218) 评论(0) 推荐(0)
flink运行报错 org.apache.flink.client.program.ProgramInvocationException: Could not retrieve the execution result
摘要：基于上一步的代码和POM，flink1.8.0， scala 2.11.12 本地运行代码一直可以（pom中flink相关依赖的scope修改为compile） 打成jar包提交到本地local模式集群上运行一直报错，如下： org.apache.flink.client.program.Progr 阅读全文
posted @ 2019-11-25 08:38 后山前堂客 阅读(9260) 评论(0) 推荐(0)
flink 提交到本地local集群上运行的pom 和 代码
摘要：POM文件 <!-- Licensed to the Apache Software Foundation (ASF) under one or more contributor license agreements. See the NOTICE file distributed with thi 阅读全文
posted @ 2019-11-24 19:31 后山前堂客 阅读(917) 评论(0) 推荐(0)
macbook 安装scala2.11.12 + flink 1.8.0
摘要：1 scala 2.11.12下载 brew search scala scala scala@2.11 scala@2.12 ✔ scalaenv scalapack scalariform scalastyle brew install scala@2.11 ==> Caveats scala@ 阅读全文
posted @ 2019-11-24 16:06 后山前堂客 阅读(1367) 评论(0) 推荐(0)
flink 运行scala 报错， 问题定位在mvn scala plugin上，还没解决
摘要：$:java -version java version "1.8.0_231" Java(TM) SE Runtime Environment (build 1.8.0_231-b11) Java HotSpot(TM) 64-Bit Server VM (build 25.231-b11, mi 阅读全文
posted @ 2019-11-24 09:10 后山前堂客 阅读(621) 评论(0) 推荐(0)
flink包提交到服务器（本地mac）运行
摘要：将pom文件中的 flink相关依赖（flink-java，flink-client，flink-stream）的scope修改为 provided 然后 mvn clean package，打出来的包 12K，如下（scope为compile时的包46M） 然后通过如下指令，在自己的mac上运行f 阅读全文
posted @ 2019-11-22 00:50 后山前堂客 阅读(675) 评论(0) 推荐(0)
flink第一个demo
摘要：在没有安装flink的情况下，试运行 wordcount 代码。代码如下： package bigdata.batch; import org.apache.flink.api.common.functions.FlatMapFunction; import org.apache.flink.api 阅读全文
posted @ 2019-11-21 23:30 后山前堂客 阅读(1378) 评论(0) 推荐(0)