sunny123456

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

2024年3月27日

摘要: 大数据开发之CDH使用搭建大数据平台 1、CDH介绍 它是Cloudera公司提供的一种大数据平台解决方案。CDH的全称是Cloudera’s Distribution including Apache Hadoop,它是一个开放源代码的大数据平台,基于Apache Hadoop和其他相关的开源技术 阅读全文
posted @ 2024-03-27 19:48 sunny123456 阅读(490) 评论(0) 推荐(0)

摘要: Flink-运行时架构介绍 文章目录 Flink 运行时架构系统架构整体架构作业管理器(JobManager)任务管理器(TaskManager) 作业提交流程高层级抽象视角独立模式(Standalone)YARN 集群 数据流图(Dataflow Graph)并行度(Parallelism)算子链 阅读全文
posted @ 2024-03-27 19:42 sunny123456 阅读(128) 评论(0) 推荐(0)

摘要: flink dtach 提交模式 在Flink中,dtach是一个用于启动Flink作业的工具,它允许用户在后台运行Flink作业,并且在用户登出会话后,作业将继续运行。 Flink支持两种提交作业的方式:通过CLI(命令行接口)和通过编程接口。 通过CLI提交作业: 在命令行中,你可以使用flin 阅读全文
posted @ 2024-03-27 19:41 sunny123456 阅读(180) 评论(0) 推荐(0)