当前标签：Kafka

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（三十）：使用flatMapGroupsWithState替换agg

cctext 2018-10-24 18:34 阅读:1880 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（二十九）：推送avro格式数据到topic，并使用spark structured streaming接收topic解析avro数据

cctext 2018-10-23 10:03 阅读:984 评论:1 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（二十八）：kafka0.10.1 内置性能测试API用法示例

cctext 2018-10-11 16:29 阅读:486 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（二十七）：kafka manager安装

cctext 2018-09-11 10:59 阅读:1036 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（二十六）Structured Streaming：WARN clients.NetworkClient: Error while fetching metadata with correlation id 1 : {my-topic=LEADER_NOT_AVAILABLE}

cctext 2018-08-29 18:35 阅读:9768 评论:0 推荐:1

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（二十五）Structured Streaming：同一个topic中包含一组数据的多个部分，按照key它们拼接为一条记录（以及遇到的问题）。

cctext 2018-08-28 23:48 阅读:1140 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（二十四）Structured Streaming：Encoder

cctext 2018-08-28 23:23 阅读:780 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（二十三）Structured Streaming遇到问题：Set(TopicName-0) are gone. Some data may have been missed

cctext 2018-08-24 11:42 阅读:1054 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十六）Structured Streaming中ForeachSink的用法

cctext 2018-07-13 22:18 阅读:1160 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十五）Spark编写UDF、UDAF、Agg函数

cctext 2018-07-11 14:35 阅读:831 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十四）定义一个avro schema使用comsumer发送avro字符流，producer接受avro字符流并解析

cctext 2018-07-09 23:59 阅读:1787 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十三）kafka+spark streaming打包好的程序提交时提示虚拟内存不足（Container is running beyond virtual memory limits. Current usage: 119.5 MB of 1 GB physical memory used; 2.2 GB of 2.1 G）

cctext 2018-07-08 21:26 阅读:1582 评论:2 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十二）VMW安装四台CentOS，并实现本机与它们能交互，虚拟机内部实现可以上网。

cctext 2018-07-08 16:54 阅读:466 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十一）定制一个arvo格式文件发送到kafka的topic，通过Structured Streaming读取kafka的数据

cctext 2018-07-03 23:32 阅读:1624 评论:0 推荐:1

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十）安装hadoop2.9.0搭建HA

cctext 2018-07-01 17:19 阅读:1759 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（九）安装kafka_2.11-1.1.0

cctext 2018-06-30 22:22 阅读:4563 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（八）安装zookeeper-3.4.12

cctext 2018-06-30 20:51 阅读:1370 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（七）针对hadoop2.9.0启动DataManager失败问题

cctext 2018-06-30 16:31 阅读:981 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（六）针对spark2.2.1以yarn方式启动spark-shell抛出异常：ERROR cluster.YarnSchedulerBackend$YarnSchedulerEndpoint: Sending RequestExecutors(0,0,Map(),Set()) to AM was unsuccessful

cctext 2018-06-30 16:07 阅读:5318 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（五）针对hadoop2.9.0启动之后发现slave上正常启动了DataNode,DataManager，但是过了几秒后发现DataNode被关闭

cctext 2018-06-30 16:01 阅读:1132 评论:0 推荐:0