sunny123456

摘要： 练习 ： Flink 读取 data.txt（json格式文件）文件并进行解析，写入到mysql中 bean //实体类 mysql的一条记录 package bean; import lombok.AllArgsConstructor; import lombok.Data; import lom 阅读全文

摘要： 【Kafka学习-3】Kafka命令 Kafka的命令都是基于bin目录下的脚本来使用的。 Topic命令 Topic的命令脚本是kafka-topics.sh，常见命令参数说明： --bootstrap-server <String: server toconnet to> 连接的Kafka Br 阅读全文

摘要： Scala Json 转化 scala中使用json，比java中使用json复杂一些。尝试了json-smart；fast json； gson；json4s以及scala自带的json。 总结如下： 1. 普通json string 转化 object, 使用JSON.pareseFull 。 阅读全文

摘要： Java 中FastJson的使用【吃透FastJson】 如果不了解JSON格式，建议先看下：JSON数据格式【学习记录】 JSON序列化、反序列化JavaBean的框架有很多，最常见的Jackson、阿里巴巴开源的FastJson、谷歌的GSON、apache提供的json-lib等，下面我们主 阅读全文

摘要： java项目-jar包上线流程 第一步：打包打包完会生成target文件夹第二步：上线我的jar包是上传到/usr/local/app位置然后cd到该位置执行java -jar springboot8_04_ssmp-0.0.1-SNAPSHOT.jar 注意：启动成功后，后台要对81端口放行，不然 阅读全文

摘要： DataStream API（一） Flink 有非常灵活的分层 API 设计，其中的核心层就是 DataStream/DataSet API。由于新版 本已经实现了流批一体， DataSet API 将被弃用，官方推荐统一使用 DataStream API 处理流数 据和批数据。由于内容较多，我们 阅读全文

摘要： flink中的setStreamTimeCharacteristic TimeCharacteristic env.setStreamTimeCharacteristic(TimeCharacteristic.EventTime) 此处可以取以下三类值： Event Time 事件时间，事件(Eve 阅读全文

摘要： DBeaver 连接 GBase 数据库 DBeaver 连接 GBase 数据库 说明 这是我重新走一次流程记录的，所以图片中会有添加好的驱动包。我用的是适配 MySQL 和 PostgreSQL 的那个 jar 包，不过操作都是一样的，虽说 jar 包不一样，但 DBeaver 可以帮你找到驱动 阅读全文

摘要： DataStream（二） 目录 5.3.2 聚合算子（Aggregation） 5.3.3 用户自定义函数（UDF） 3. 扁平映射（flatMap） flatMap 操作又称为扁平映射，主要是将数据流中的整体（一般是集合类型）拆分成一个 一个的个体使用。消费一个元素，可以产生 0 到多个元素。f 阅读全文

摘要： 【Flink从入门到精通 05】Source&Sink Flink用于处理有状态的流式计算，需要对Source端的数据进行加工处理，然后写入到Sink端，下图展示了在Flink中数据所经历的过程，今天就根据这张图分别给大家分享下。 01 Environment Flink所有的程序都从这一步开始，只 阅读全文