07 2019 档案
配置ssh免密,仍需要密码
摘要:配置ssh免密码登录后,仍提示输入密码 解决方法: 首先我们就要去查看系统的日志文件 tail /var/log/secure -n 20 Authentication refused: bad ownership or modes for directory /root tail /var/log
阅读全文
Flink MysqlSink 简单样例
摘要:在大数据领域中,有很多nosql 的数据库,典型的 hbase,可以实现大数据量下的快速查询,但是关系型数据的地位还是没办法替代。比如上个项目中,计算完的结果数据,还是会输出到关系型数据库当中。Flink 中没有提供关系型数据的connector,看到有小伙伴在问,怎么实现,就写个简单的demo。
阅读全文
Flink FileSink 自定义输出路径——StreamingFileSink、BucketingSink 和 StreamingFileSink简单比较
摘要:接上篇:Flink FileSink 自定义输出路径——BucketingSink 上篇使用BucketingSink 实现了自定义输出路径,现在来看看 StreamingFileSink( 据说是StreamingFileSink 是社区优化后添加的connector,推荐使用) Streamin
阅读全文
Flink FileSink 自定义输出路径——BucketingSink
摘要:今天看到有小伙伴在问,就想着自己实现一下。 问题: Flink FileSink根据输入数据指定输出位置,比如讲对应日期的数据输出到对应目录 目前flink 对与输出到文件有两种实现(write 算子不算,只能指定目录):Rolling File Sink 和 Streaming File Sink
阅读全文
【翻译】Flink Joining
摘要:本文来自官网翻译: Joining Window Join(窗口join) Tumbling Window Join(翻滚窗口join) Sliding Window Join(滑动窗口join) Session Window Join(会话窗口join) Interval Join(时间间隔joi
阅读全文
浙公网安备 33010602011771号