随笔分类 -  kafka

streaming直连kafka消费
摘要：pom文件: kafka2.2.1和cdh6.3.0+spark2.4.0+版本 <dependencies> <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.10</artifactId> <version> 阅读全文
posted @ 2021-10-12 09:44 帅东我不帅 阅读(48) 评论(0) 推荐(0)
kafak之间的转发
摘要：近期要实现一个业务,将一个环境kafka中的数据转发到另一个环境kafka中~ 话不多说,干活！！emmm···· 华丽丽的代码风格线 import com.alibaba.fastjson.JSON;import com.alibaba.fastjson.JSONObject;import org 阅读全文
posted @ 2020-10-14 19:49 帅东我不帅 阅读(263) 评论(0) 推荐(0)
kafka面试题
摘要：定义 Kafka 是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用与大数据实时处理领域。 消息队列 Kafka 本质上是一个 MQ（Message Queue），使用消息队列的好处？（面试会问） 解耦：允许我们独立的扩展或修改队列两边的处理过程。 可恢复性：即使一个 阅读全文
posted @ 2020-06-15 14:49 帅东我不帅 阅读(227) 评论(0) 推荐(0)