摘要: 开发者可以通过Processor接口来实现自己的自定义处理逻辑。接口提供了Process和Punctuate方法。 其中:Process方法用于处理接受到的消息 Punctuate方法指定时间间隔周期性的执行,用于处理周期数据:例如某些状态值计算生成 新的流。 Processor接口还提供了init 阅读全文
posted @ 2018-11-20 14:48 还好,没肉馅 阅读(1560) 评论(0) 推荐(0) 编辑
摘要: Kafka Stream 的整体架构图如下。 目前KafkaStream的数据源智能是如上图所示的Kafka,但是处理结果并不一定是如上图所示的输出到Kafka,实际上KStream和Ktable的实例化都需要输入源节点,也就是源Topic。 KStream<String, String> stre 阅读全文
posted @ 2018-11-20 14:40 还好,没肉馅 阅读(875) 评论(0) 推荐(0) 编辑
摘要: 集群环境: CenterOS 1台 Kafka:0.10.2.1版本。 今天在测试环境下,我们的Kafka集群工作不正常,具体现象为,使用confulentkafka向kafka集群生产消息失败,且并没有任何异常。 检查server配置、broker日志、程序异常日志等等都没有发现,网上搜索资料,并 阅读全文
posted @ 2018-11-20 14:21 还好,没肉馅 阅读(6145) 评论(0) 推荐(0) 编辑