摘要：
一、目录 第一章：大数据与数据仓库概论 第二章：项目需求描述 第三章：项目部署的环境准备 第四章：用户行为数据采集 第五章：业务数据采集模块 第六章：数据仓库搭建模块 第七章：数据可视化模块 第八章：即席查询模块 第九章：元数据管理模块 二、知识框架体系 阅读全文
posted @ 2022-09-18 22:43
哥们要飞
阅读(46)
评论(0)
推荐(0)
摘要：
〇、参考资料 一、配置及安装内容 （一）配置 【today】低配笔记本（装centos）：4+500G 个人电脑（装三个节点的虚拟机集群环境）：8+628G （二）所装软件 Linux系统（可选centos、Ubuntu、deepin） 宝塔面板 花生壳（做内网穿透开放22端口） Docker（安装 阅读全文
posted @ 2022-09-17 21:55
哥们要飞
阅读(170)
评论(0)
推荐(0)
摘要：
〇、参考资料 一、Crontab使用 1、查看状态 service crond status 2、新建crontab任务 crontab -e 输入字符串 * * * * * cd /home/bigdata && ./demo1_execute_and_input_parapmeter.sh db 阅读全文
posted @ 2022-09-17 15:07
哥们要飞
阅读(346)
评论(0)
推荐(0)
摘要：
一、背景 执行语句时遗漏了where条件，导致删除整张表 二、解决方案 1、使用pg_resetxlog(10之后是pg_resetwal)来重置事务ID来访问被修改的数据。 http://wjhsh.net/kuang17-p-10615164.html 2、数据库热备份 https://www. 阅读全文
posted @ 2022-09-15 09:46
哥们要飞
阅读(115)
评论(0)
推荐(0)
摘要：
一、（MySQL）通过函数/存储过程 1、链接 https://www.jb51.net/article/207999.htm https://blog.csdn.net/FloraCHY/article/details/117792903 2、代码 -- 进入数据库 use test; -- 显示 阅读全文
posted @ 2022-09-14 20:17
哥们要飞
阅读(454)
评论(0)
推荐(0)
摘要：
1、十六进制转二进制 select HEXTORAW('7264B1CD0582734D8E27E0FBDA15B2A5') from dual; 2、二进制转十六进制 select AUUID_0,RAWTOHEX(AUUID_0) from "TEST"."ABANK"; 阅读全文
posted @ 2022-09-09 15:57
哥们要飞
阅读(125)
评论(0)
推荐(0)
摘要：
1、将二进制编码为十六进制 select encode("AUUID_0",'hex'),"AUUID_0" from wxf_test."ABANK"; 2、将十六进制解码为二进制 select DECODE('8560377a6d2bf34ab1f2784adc78f500','hex') 阅读全文
posted @ 2022-09-09 15:49
哥们要飞
阅读(960)
评论(0)
推荐(0)
摘要：
一、现在问题 同时插入多条时间戳相同的记录 INSERT INTO "ABANK" VALUES ('1', 'CH', '00211', 'UBS Switzerland AG', 'UBSWCHZH31A', ' ', TO_DATE('2015-06-13 00:00:00', 'SYYYY- 阅读全文
posted @ 2022-09-09 15:06
哥们要飞
阅读(45)
评论(0)
推荐(0)
摘要：
〇、参考资料 一、现象 1、Oracle源表数据 2、PG同步后的表数据 3、现象 时间不一致，差了8个小时 4、查看对应的connector信息 （1）source { "connector.class": "io.confluent.connect.jdbc.JdbcSourceConnecto 阅读全文
posted @ 2022-09-09 11:13
哥们要飞
阅读(214)
评论(0)
推荐(0)
摘要：
〇、所需资料 1、JDBC connect的plugins下载地址（confluent） 一、Oracle建表 1、表规划 表名：Test_TimeFormat_Order、Test_Stress_Order 字段：INCREMENT_UID/Order_ID/quantity/cost/CREAT 阅读全文
posted @ 2022-09-08 21:06
哥们要飞
阅读(940)
评论(1)
推荐(0)
浙公网安备 33010602011771号