随笔分类 - kafka
kafka 相关资料
摘要:from:https://my.oschina.net/jastme/blog/600573 flume+kafka+zookeeper 日志收集平台的搭建 收藏 jastme 发表于 10个月前 阅读 830 收藏 11 点赞 1 评论 0 from:https://my.oschina.net/
阅读全文
摘要:【采集层】Kafka 与 Flume 如何选择 收藏 悟性 发表于 2年前 阅读 23167 收藏 16 点赞 4 评论 1 【采集层】Kafka 与 Flume 如何选择 收藏 悟性 发表于 2年前 阅读 23167 收藏 16 点赞 4 评论 1 收藏 收藏 悟性 发表于 2年前 阅读 2316
阅读全文
摘要:from:http://www.cnblogs.com/oubo/archive/2012/05/25/2517751.html Flume日志收集 一、Flume介绍 一、Flume介绍 一、Flume介绍 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方
阅读全文
摘要:怎么彻底删除kafka的topic,然后重建? 网上都说用kafka-run-class.shkafka.admin.DeleteTopicCommand 命令删除topic,但是并没有成功,用kafka-topics.sh命令查看依然可以查看到topic,应该怎样才能彻底删除topic? 2016
阅读全文
摘要:from:http://blog.csdn.net/colorant/article/details/12081909 快速理解Kafka分布式消息队列框架 快速理解Kafka分布式消息队列框架 标签: kafkamessage queue消息队列 2013-09-27 10:05 32961人阅读
阅读全文
摘要:文章来源:http://www.cnblogs.com/huxi2b/p/4583249.html 在Kafak中国社区的qq群中,这个问题被提及的比例是相当高的,这也是Kafka用户最常碰到的问题之一。本文结合Kafka源码试图对该问题相关的因素进行探讨。希望对大家有所帮助。 怎么确定分区数? “
阅读全文
摘要:转载自:http://www.cnblogs.com/huxi2b/p/4583249.html 供参考 本文分析的Kafka代码为kafka-0.8.2.1。另外,由于Kafka目前提供了两套Producer代码,一套是Scala版的旧版本;一套是Java版的新版本。虽然Kafka社区极力推荐大家
阅读全文
摘要:生成kafka java客户端时,参考的资料!!!文章来源:http://blog.csdn.net/zhshulin/article/details/37921705 目前做的项目使用的是MAVEN来管理jar包,这也是我第一次接触maven,感觉非常好,再也不用一个一个去添加和下载jar包了,直
阅读全文
摘要:安装eclipse 及配置maven时,参考的资料!!! from:http://blog.csdn.net/qjyong/article/details/9098213 安装eclipse 及配置maven时,参考的资料!!! from:http://blog.csdn.net/qjyong/ar
阅读全文
摘要:之前安装zookeeper的时候,就配置过linux下的java环境,即安装过linux JDK,配置过JAVA_HOME 和PATH 变量,,, 现在要运行一个java客户端,来消费kafka服务器上队列中的数据,或者说队列中,<key,value>中的message 实体,,, 同时需要运行ma
阅读全文
摘要:今天看kafka,有一个参数选项中有: 'S' seq=strtoull(optarg,NULL,10); do_seq=1; 之后查找了下 strtoull 函数的功能,了解如下: from:http://zengwu3915.blog.163.com/blog/static/2783489720
阅读全文
摘要:来源:https://www.zybuluo.com/jewes/note/63925 @jewes 2015-01-17 20:36 字数 1967 阅读 1093 Kafka Producer相关代码分析 kafka Kafka Producer将用户的消息发送到Kafka集群(准确讲是发送到B
阅读全文
摘要:from:http://blog.csdn.net/hengyunabc/article/details/19006911 zookeeper运维 尽管zookeeper在编程上有很多的阱陷,API也非常的难用,但zookeeper服务本身可以说是很牢靠的了,所以在网上貌似关于运维的文章比较少。 但
阅读全文
摘要:转自 :@ni掌柜nileader@gmail.com 地址 数据文件管理 默认情况下,ZK的数据文件和事务日志是保存在同一个目录中,建议是将事务日志存储到单独的磁盘上。 1 数据目录 ZK的数据目录包含两类文件: A、myid – 这个文件只包含一个数字,和serverid对应。 B、snapsh
阅读全文
摘要:昨天安装zookeeper时需要java环境,也就是安装jdk 安装完jdk1.7后,配置好环境变量, vim ~/.bashrc ll $JAVA_HOME/bin 输不出结果,报错 JAVA_HOME: Undefined variable. 输入java -version 发现有安装的1.6版
阅读全文
摘要:from:http://www.cnblogs.com/xhcqwl/p/3905412.html kafka C客户端librdkafka producer源码分析 简介 kafka网站上提供了C语言的客户端librdkafka,地址在这。 librdkafka是使用C语言根据apache kaf
阅读全文
摘要:http://hi.baidu.com/linuxlife/blog/item/0d3e302ae2384d3a5343c1b1.html Linux下的动态库以.so为后缀,我也是初次在Linux下使用动态库,写一点入门步骤,以便以后能方便使用。 第一步:编写Linux程序库 文件1.动态库接口文
阅读全文
摘要:kafka环境搭建及librdkafka测试 (2016-04-05 10:18:25) kafka环境搭建及librdkafka测试 一、kafka环境搭建(转自http://kafka.apache.org/documentation.html#gettingStarted) Step 1: D
阅读全文
摘要:解压kafka 打开后是一堆.jar结尾的文件,那么后缀.jar的是什么文件? JAR 文件就是 Java Archive File,顾名思意,它的应用是与 Java 息息相关的,是 Java 的一种文档格式。 解压kafka 打开后是一堆.jar结尾的文件,那么后缀.jar的是什么文件? JAR
阅读全文
摘要:> tar -xzf kafka_2.9.2-0.8.1.1.tgz > cd kafka_2.9.2-0.8.1.1 复制代码 > tar -xzf kafka_2.9.2-0.8.1.1.tgz > cd kafka_2.9.2-0.8.1.1 > bin/zookeeper-server-st
阅读全文

浙公网安备 33010602011771号