摘要: 1.查询 1.GET /index-name/_search/ { "query": { "bool": { "filter": [ { "range": { "dt": { "gte": "20191112", "lte": "20191112", "format": "yyyyMMdd", "t 阅读全文
posted @ 2021-04-07 15:56 奇葩兔子 阅读(97) 评论(0) 推荐(0)
摘要: 数据备份分类: hbase数据备份分为离线备份和在线备份两大类。 1.离线备份:离线备份对于在线业务不友好(不友好体现在,备份时需要关闭数据库或者禁用表,不能对外提供读写服务,在线业务对数据库的依赖性强,你关闭了或者禁用了,业务执行所需要的数据就取不到了或者写不进去了),所以在0.94之后的版本就弃 阅读全文
posted @ 2021-04-06 17:20 奇葩兔子 阅读(428) 评论(0) 推荐(0)
摘要: Trigger作用在WindowStream上,也就是说,trigger是跟随在window()算子之后的。Trigger决定了窗口中的数据何时可以被window function处理, 每一个窗口分配器都有一个默认的触发器,如果默认的触发器不能满足需要,你可以通过调用WindowedStream. 阅读全文
posted @ 2021-04-01 20:16 奇葩兔子 阅读(1828) 评论(0) 推荐(0)
摘要: 一、具体操作 要做到 Exactly-once,我们需要开启 Flink 的检查点功能: env.enableCheckpointing(60_000); env.setStateBackend((StateBackend) new FsStateBackend("/tmp/flink/checkp 阅读全文
posted @ 2021-04-01 20:07 奇葩兔子 阅读(958) 评论(0) 推荐(0)
摘要: 1.pom.xml <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-connector-elasticsearch6_2.11</artifactId> <version>${flink.version}</ver 阅读全文
posted @ 2021-04-01 19:58 奇葩兔子 阅读(770) 评论(0) 推荐(0)
摘要: 一、写入mysql 1.pom.xml <!--写入mysql--> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-jdbc_2.11</artifactId> <version>1.11.0</version> 阅读全文
posted @ 2021-04-01 19:43 奇葩兔子 阅读(1368) 评论(0) 推荐(0)