10 2021 档案

摘要:1、python中KafkaConsumer类 1、KafkaConsume类 class kafka.KafkaConsumer(*topics, **configs) 使用Kafka集群的记录。 消费者将透明地处理Kafka集群中服务器的故障,并在topic分区创建或在broker之间迁移时进行 阅读全文
posted @ 2021-10-09 23:55 麦恒 阅读(361) 评论(0) 推荐(0)
摘要:参考文档:https://kafka-python.readthedocs.io/en/master/index.html 1、python中KafkaProducer类 1、KafkaProducer类 class kafka.KafkaProducer(**configs) 将记录发布到Kafk 阅读全文
posted @ 2021-10-08 01:14 麦恒 阅读(217) 评论(0) 推荐(0)
摘要:1、安装kafka(单机模式) 1、部署环境 软件版本 JDK:jdk-8u291-linux-x64.tar.gz ZooKeeper:apache-zookeeper-3.5.9-bin.tar.gz kafka:kafka_2.13-2.8.0.tgz 系统环境 10.1.1.11:CentO 阅读全文
posted @ 2021-10-05 09:00 麦恒 阅读(73) 评论(0) 推荐(0)
摘要:1、kafka简介 Kafka起初是由Linkedin公司采用Scala语言开发的一个多分区、多副本且基于ZooKeeper协调的分布式消息系统,现己被捐献给Apache基金会。 目前Kafka是一个分布式流式处理平台,它以高吞吐、可持久化、可水平扩展、支持流数据处理等多种特性而被广泛使用。 越来越 阅读全文
posted @ 2021-10-03 16:00 麦恒 阅读(86) 评论(0) 推荐(0)