百里登风

导航

上一页 1 2 3 4 5 6 7 ··· 36 下一页

2022年10月19日

Dinky的使用——orc2mysql

摘要: 需求:将orc格式的数据文件同步数据到mysql数据库 由于orc格式的文件不能直接通过文本编辑器打开,也不是说简单的通过记事本写入一些数据,把扩展名改成orc就可以了 为了生成标准的orc格式文件,我们通过hive创建orc表,然后到hdfs上面把相应的保存文件下载下来,这样我们就可以明确我们表的 阅读全文

posted @ 2022-10-19 10:16 百里登峰 阅读(390) 评论(0) 推荐(0)

2022年10月18日

Dinky的使用——csv2mysql

摘要: 要求:通过dinky把csv的文本文件里面的数据同步到mysql数据库里面 一、添加依赖包 在dinky的pulgins和flink的lib目标下添加csv的依赖包,添加完后重启dink和flink 下载地址可参考:https://www.bookstack.cn/read/ApacheFlink- 阅读全文

posted @ 2022-10-18 19:21 百里登峰 阅读(214) 评论(0) 推荐(0)

Dinky的使用——kafka2mysql

摘要: 需求:通过在kafka的topic里面传入json串,再把数据同步到mysql中,这个也可以作为半结构化数据同步的案例 一、添加依赖包 将依赖包放到dinky的pulgins目录和flink的lib目录下,并重启dinky和flink 依赖包下载地址参考:https://www.bookstack. 阅读全文

posted @ 2022-10-18 18:32 百里登峰 阅读(1089) 评论(0) 推荐(0)

Dinky的使用——hbase2mysql

摘要: 要求:通过dinky把hbase的表数据导到mysql中,这种通常是用来模拟半结构化数据同步的场景 因为hbase是基于列存储的,不需要每个列都是有值的,通过列簇管理列,当然想了解hbase的表结构可以参考:https://www.cnblogs.com/braveym/p/7708332.html 阅读全文

posted @ 2022-10-18 17:52 百里登峰 阅读(1014) 评论(0) 推荐(0)

Dinky使用——mysql2clickhouse

摘要: 要求:通过Dinky把mysql的数据导到clickhouse数据库 对于dinky的安装部署,以及dinky集成clickhouse数据库需要那些jar包可以参考:https://www.cnblogs.com/braveym/p/16455534.html 这里我需要提醒,需要我们提前把mysq 阅读全文

posted @ 2022-10-18 16:41 百里登峰 阅读(630) 评论(0) 推荐(1)

2022年8月14日

加一

摘要: 给定一个由 整数 组成的 非空 数组所表示的非负整数,在该数的基础上加一。最高位数字存放在数组的首位, 数组中每个元素只存储单个数字。你可以假设除了整数 0 之外,这个整数不会以零开头。 示例 1:输入:digits = [1,2,3]输出:[1,2,4]解释:输入数组表示数字 123。示例 2:输 阅读全文

posted @ 2022-08-14 14:47 百里登峰 阅读(118) 评论(0) 推荐(0)

多数元素

摘要: 给定一个大小为 n 的数组 nums ,返回其中的多数元素。多数元素是指在数组中出现次数 大于 ⌊ n/2 ⌋ 的元素。你可以假设数组是非空的,并且给定的数组总是存在多数元素。示例 1:输入:nums = [3,2,3]输出:3示例 2:输入:nums = [2,2,1,1,1,2,2]输出:2 参 阅读全文

posted @ 2022-08-14 12:11 百里登峰 阅读(50) 评论(0) 推荐(1)

2022年8月13日

极大极小游戏

摘要: 给你一个下标从 0 开始的整数数组 nums ,其长度是 2 的幂。对 nums 执行下述算法: 设 n 等于 nums 的长度,如果 n == 1 ,终止 算法过程。否则,创建 一个新的整数数组 newNums ,新数组长度为 n / 2 ,下标从 0 开始。 对于满足 0 <= i < n / 阅读全文

posted @ 2022-08-13 14:58 百里登峰 阅读(39) 评论(0) 推荐(0)

2022年8月5日

7、Canal实现MySQL到ES实时同步-2

摘要: 1、安装Elasticsearch https://www.elastic.co/guide/en/elastic-stack-get-started/7.4/get-started-elastic-stack.html 下载并解压缩 cd ~/app; curl -L -O https://art 阅读全文

posted @ 2022-08-05 14:50 百里登峰 阅读(560) 评论(1) 推荐(0)

2022年7月7日

Dinky 0.6.5安装部署

摘要: 一、编译 拉取源码 https://github.com/DataLinkDC/dlink/tree/dev 我建议拉取0.6.5版本分支的 可以在linux下编译 也可以通过idea环境下编译,从我编译的经验来,还是建议大家在idea环境下编译,如果有依赖包真的不能下载,可以通过购买vpn ide 阅读全文

posted @ 2022-07-07 18:26 百里登峰 阅读(2804) 评论(0) 推荐(0)

上一页 1 2 3 4 5 6 7 ··· 36 下一页