我的随笔

flink-----实时项目---day05-------1. ProcessFunction 2. apply对窗口进行全量聚合 3使用aggregate方法实现增量聚合 4.使用ProcessFunction结合定时器实现排序

一y样 2020-06-27 12:33 阅读:1305 评论:0 推荐:0

flink-----实时项目---day04-------1. 案例:统计点击、参与某个活动的人数和次数 2. 活动指标多维度统计（自定义redisSink）

一y样 2020-06-25 23:44 阅读:1294 评论:1 推荐:1

flink---实时项目----day03---1.练习讲解（全局参数，数据以parquet格式写入hdfs中） 2 异步查询 3 BroadcastState

一y样 2020-06-23 23:26 阅读:1097 评论:0 推荐:0

flink---实时项目--day02-----1. 解析参数工具类 2. Flink工具类封装 3. 日志采集架构图 4. 测流输出 5. 将kafka中数据写入HDFS 6 KafkaProducer的使用 7 练习

一y样 2020-06-21 11:45 阅读:1171 评论:0 推荐:0

flink---实时项目--day01--1. openrestry的安装 2. 使用nginx+lua将日志数据写入指定文件中 3. 使用flume将本地磁盘中的日志数据采集到的kafka中去

一y样 2020-06-20 23:39 阅读:855 评论:0 推荐:0

flink04 -----1 kafkaSource 2. kafkaSource的偏移量的存储位置 3 将kafka中的数据写入redis中去 4 将kafka中的数据写入mysql中去

一y样 2020-06-19 22:14 阅读:616 评论:0 推荐:0

flink03-----1.Task的划分 2.共享资源槽 3.flink的容错

一y样 2020-06-17 22:33 阅读:2103 评论:0 推荐:0

flink02------1.自定义source 2. StreamingSink 3 Time 4窗口 5 watermark

一y样 2020-06-16 22:45 阅读:380 评论:0 推荐:0

flink01--------1.flink简介 2.flink安装 3. flink提交任务的2种方式 4. 4flink的快速入门 5.source 6 常用算子（keyBy，max/min，maxBy/minBy，connect，union，split+select）

一y样 2020-06-15 23:26 阅读:638 评论:0 推荐:2

org.apache.hadoop.hive.ql.metadata.HiveException: Internal Error: cannot generate all output rows for a Partition解决

一y样 2020-05-18 17:05 阅读:1498 评论:0 推荐:0