sunny123456

摘要： 搜索Maven相关依赖jar包（特别推荐）https://mvnrepository.com/ 根据maven查询jar包的步骤如下： 打开Maven仓库中央库的网站https://mvnrepository.com/在搜索框中输入你需要查询的jar包的名称，例如：hutool-all点击搜索按钮， 阅读全文

摘要： Java里如何查找第三方包/依赖的api文档 众所周知，要查找第三方包的api介绍说明，在golang里，直接去这个网站搜索即可：https://pkg.go.dev/​pkg.go.dev/ 在Python里则是去PyPi：PyPI · The Python Package Index （详细方法 阅读全文

摘要： Apache Flink 简介 前言 计算引擎 大数据计算引擎分为离线计算和实时计算，离线计算就是我们通常说的批计算，代表是Hadoop MapReduce、Hive等大数据技术。实时计算也被称作流计算，代表是Storm、Spark Streaming、Flink等大数据技术。 计算引擎也在不断更新 阅读全文

摘要： 大数据开发之CDH使用搭建大数据平台 1、CDH介绍 它是Cloudera公司提供的一种大数据平台解决方案。CDH的全称是Cloudera’s Distribution including Apache Hadoop，它是一个开放源代码的大数据平台，基于Apache Hadoop和其他相关的开源技术 阅读全文

摘要： Flink-运行时架构介绍 文章目录 Flink 运行时架构系统架构整体架构作业管理器（JobManager）任务管理器（TaskManager） 作业提交流程高层级抽象视角独立模式（Standalone）YARN 集群 数据流图（Dataflow Graph）并行度（Parallelism）算子链 阅读全文

摘要： flink dtach 提交模式 在Flink中，dtach是一个用于启动Flink作业的工具，它允许用户在后台运行Flink作业，并且在用户登出会话后，作业将继续运行。 Flink支持两种提交作业的方式：通过CLI（命令行接口）和通过编程接口。 通过CLI提交作业： 在命令行中，你可以使用flin 阅读全文

摘要： 在Flink 1.11中，assignTimestampsAndWatermarks方法已经被新的方法assignTimestamps和assignWatermarks所替代。这是为了更好地将时间戳和水位线的定义分离开来 以下是使用新API的示例代码： import org.apache.flink 阅读全文

摘要： Flink: Function And Rich Function ， 对比 Function ，Rich functions还提供了这些方法：open、close、getRuntimeContext 和 setRuntimeContext 序言 了解了Flink提供的算子,那我们就可以自定义算子了 阅读全文

摘要： Flink 流数据处理 基于Flink1.12.0版本 MapFunction 只适用于一对一的转换，而 FlatMapFunction中可以一对多，或者多对一 序言 基于官网教程整理的一个教程。基于Flink1.12.0版本。 目前该版本的Flink支持的source与sink如下所示 参考资料： 阅读全文

摘要： Flink API的四层抽象级别是什么？能用实际项目案例讲解一下吗？ 首先，Flink API的四层抽象级别是指：最底层抽象：ProcessFunction API、核心API：DataStream API、Table API、SQL。这四个抽象级别可以比作烹饪中的不同方式，从简单的速食制作到复杂的 阅读全文