摘要：
与单作业模式类似，直接执行flink run-application命令 $ bin/flink run-application -t yarn-application -c com.huft.flk117.demo.StreamSocketCnt job_jar/original-fk117-1. 阅读全文
posted @ 2024-05-11 18:04
自在现实
阅读(107)
评论(0)
推荐(0)
摘要：
在YARN环境中，由于有了外部平台做资源调度，所以我们也可以直接向YARN提交一个单独的作业，从而启动一个Flink集群 $ bin/flink run -d -t yarn-per-job -c com.huft.flk117.demo.StreamSocketCnt job_jar/origin 阅读全文
posted @ 2024-05-11 16:41
自在现实
阅读(37)
评论(0)
推荐(0)
摘要：
YARN的会话模式与独立集群略有不同，需要首先申请一个YARN会话（YARN Session）来启动Flink集群。 1.后台启动yarn会话模式flink集群 bin/yarn-session.sh -d -nm test 2.查看返回地址和yarn id yarn会自动分配集群随机一台主机和端口 阅读全文
posted @ 2024-05-11 15:26
自在现实
阅读(53)
评论(0)
推荐(0)
摘要：
1.环境变量配置hadoop信息 2.启动HDFS和YARN 阅读全文
posted @ 2024-05-11 15:02
自在现实
阅读(11)
评论(0)
推荐(0)
摘要：
应用模式下不会提前创建集群，所以不能调用start-cluster.sh脚本。我们可以使用同样在bin目录下的standalone-job.sh来创建一个JobManager。 1.上传jar包到lib 2.启动jm bin/standalone-job.sh start --job-classna 阅读全文
posted @ 2024-05-11 14:54
自在现实
阅读(28)
评论(0)
推荐(0)
摘要：
1.打包后web界面提交，指定全路径类名 2.命令行方式 上传jar包，然后运行 bin/flink run -m hdf1:8081 -c com.huft.flk117.demo.StreamSocketCnt job_jar/original-fk117-1.0-SNAPSHOT.jar 阅读全文
posted @ 2024-05-11 14:37
自在现实
阅读(28)
评论(0)
推荐(0)
摘要：
虚拟机安装centos后，配置静态ip cd /etc/sysconfig/network-scripts sudo vim ifcfg-enp0s8 编辑配置文件 OXY_METHOD=none BROWSER_ONLY=no B00TPROTO=dhcp DEFROUTE=yes IPV4_FA 阅读全文
posted @ 2024-05-11 13:59
自在现实
阅读(26)
评论(0)
推荐(0)
浙公网安备 33010602011771号