摘要： 1、 Excel输入，Microsoft Excel输入步骤的作用是从Microsoft Excel中读取数据，如下图所示： 1）Excel输入步骤从文件D:\data\测试数据.xlsx读取数据。 2）将数据通过写日志步骤打印出来。 2、Excel输入步骤-文件配置 步骤名称：自定义 表格类型（引 阅读全文

摘要： 1、Funnel （漏斗），Funnel是 NiFi 组件，用于将多个连接中的数据合并到一个连接中。 使用场景：nifi中的Funnel组件用于合并多个数据流并将它们传递到下游处理器。它可以将来自不同来源的数据流合并到一个数据流中，方便后续处理器对数据进行处理。Funnel组件通常用于将不同分支的数 阅读全文

摘要： 1、端口（Port），包含输入端口（Input Port）和输出端口（Out Port ） 使用一个或多个处理组构建的数据流需要一种方式将处理组连接到其他数据流组件。 处理组和处理组之间可以通过使用端口来进行连接。这里的端口和kettle中的步骤【复制记录到结果】、【从结果获取记录】是类似的功能。 阅读全文

摘要： 1、目前nifi系列已经更新了10多篇教程了，跟着教程走的同学应该已经对nifi有了初步的解，但是我相信同学们应该有一个疑问：nifi设计好的数据流列表在哪里？如何同时运行多个数据流？如启停单个数据流？ 带着这些疑问，今天的主角nifi Process Group正式登场，先给大家看个图。 2、Pr 阅读全文

摘要： 1、上一节课我们学习了处理器PushKafka，通过该处理器往kafka中间件写数据，今天我们一起学习处理器ConsumeKafka，此处理器从kafka读取数据进行后续处理，如下图所示： 本次示例比较简单：处理器ConsumeKafka 根据topic读取kafka中的数据，然后将数据传递给Log 阅读全文

摘要： 1、kettle的kafka生产者叫kafka producer，nifi中的相应处理器为PublishKafka，如下图所示： 可以很清楚的看到PublishKafka处理器支持多个版本的kafka，选择时要根据自己的kafka 版本选择相匹配的PublishKafka处理器，由于本人使用的是ka 阅读全文

摘要： 1、MQTT介绍 MQTT (Message Queuing Telemetry Transport) 是一种轻量级的消息传输协议，设计用于连接低带宽、高延迟或不可靠网络的设备。 MQTT 是基于发布/订阅模式（Publish/Subscribe）的协议，其中设备可以发布消息到一个主题（Topic） 阅读全文

摘要： 1、上一节课我们学习了MQTT producer 生产者步骤，MQTT consumer消费者步骤。该步骤可以从支持MRQTT协议的中间件获取数据，该步骤和kafka consumer 一样可以处理实时数据交互，如下图所示： 2、双击步骤打开MQTT consumer 配置窗口，如下图所示： Ste 阅读全文

摘要： 1、处理器QueryDatabaseTableRecord和处理器QueryDatabaseTable比较相似，该组件生成一个 SQL 查询，或者使用用户提供的语句，并执行它以获取所有在指定的最大值列中值大于先前所见最大值的行。QueryDatabaseTable的查询结果将被转换为 Avro ，而 阅读全文

摘要： 1、处理器QueryDatabaseTable，该组件生成一个 SQL 查询，或者使用用户提供的语句，并执行它以获取所有在指定的最大值列中值大于先前所见最大值的行。查询结果将被转换为 Avro 格式，如下图所示： 本示例通过QueryDatabaseTable处理器连接数据库查询表数据，然后连接到L 阅读全文