文章分类 -  Kudu

Apache Kudu
kudu表建表必须要主键 & 向同一张表的相同字段执行多条 insert into 语句可以合并
摘要：kudu表建表必须要主键 向同一张表的相同字段执行多条 insert into 语句可以合并 建立测试表： drop table if exists fin_dw_dev.test_cflv_20220921; create table if not exists fin_dw_dev.test_c 阅读全文
posted @ 2022-09-21 19:55 赤兔胭脂小吕布 阅读(307) 评论(0) 推荐(0)
Kudu在使用过程中的各种限制
摘要：Kudu在使用过程中的各种限制 参考文章：Kudu在使用过程中的各种限制 主键 表创建后，主键不能修改。必须删除重建表指定新的主键。 主键列必须在非主键列之前 主键列的值不能使用UPDATE函数修改。如果要修改主键的值只能删除该行重新插入。 DOUBLE、FLOAT或BOOL类型的列不能作为主键，此 阅读全文
posted @ 2022-08-25 17:39 赤兔胭脂小吕布 阅读(556) 评论(0) 推荐(0)
kudu分区（HASH、RANGE、HASH&RANGE）
摘要：kudu分区（HASH、RANGE、HASH&RANGE） 1、分区表支持hash分区和range分区，根据主键列上的分区模式将table划分为 tablets 。每个 tablet 由至少一台 tablet server提供。理想情况下，一张table分成多个tablets分布在不同的tablet 阅读全文
posted @ 2022-08-24 20:09 赤兔胭脂小吕布 阅读(677) 评论(0) 推荐(0)
kudu表分区查看、添加、删除
摘要：kudu表分区查看、添加、删除 --分区查看、添加、删除 show range partitions XXX.XXX_t ALTER TABLE XXX.XXX_t ADD RANGE PARTITION 20191001000000 <= VALUES < 20191101000000; alte 阅读全文
posted @ 2022-08-23 17:48 赤兔胭脂小吕布 阅读(308) 评论(0) 推荐(0)
使用 impala 删除 kudu 表中数据、MySQL根据主键去重、为什么在impala中删除hive表中数据用delete from会报错，而用truncate table可以
摘要：使用 impala 删除 kudu 表中数据 这个问题发生在我对债券发行总表进行抽数的时候，在抽数之前需要将该表中数据清空 为什么只能使用delete from，不能用truncate table？ Kudu之SQL操作(KUDU&Impala基本操作) MySQL根据主键去重 为什么在impala 阅读全文
posted @ 2022-07-20 19:11 赤兔胭脂小吕布 阅读(2089) 评论(1) 推荐(0)
Kudu之SQL操作(KUDU&Impala基本操作)
摘要：Kudu之SQL操作(KUDU&Impala基本操作) 参考文章：KUDU&Impala基本操作 使用impala对kudu进行DML操作 kudu insert data api kudu官网impala操作kudu表 说明 通过Java client等其他方式在kudu中创建了某个表,要想对该表 阅读全文
posted @ 2022-07-20 18:36 赤兔胭脂小吕布 阅读(1605) 评论(0) 推荐(0)
kudu表的Tips（小知识点）、复制表（备份表中数据）时指定存储格式、主键变动时数据量变多变少的问题
摘要：kudu表的Tips（小知识点） 1、kudu表会根据主键去重 2、kudu表不支持insert overwrite只能用insert into 3、kudu表可以upsert into 复制表（备份表中数据）时指定存储格式 --例如：可以复制分区表 -- 将app_api_ent_bond_cas 阅读全文
posted @ 2022-07-20 17:07 赤兔胭脂小吕布 阅读(311) 评论(0) 推荐(0)
创建kudu表_Impala+Kudu基础操作手册
摘要：创建kudu表_Impala+Kudu基础操作手册 SQL操作 通过impala对kudu进行sql操作 数据库操作 --描述表 DESCRIBE tabel_name; --查看分区情况 SHOW PARTITIONS table_name; --查看当前使用数据库 SELECT current_ 阅读全文
posted @ 2022-07-07 19:07 赤兔胭脂小吕布 阅读(2201) 评论(0) 推荐(0)
kudu 建表（使用impala操作kudu之创建kudu表）、azkaban 执行工作流和工作流下的节点（并发执行）、azkaban 查看job执行结果和详细运行日志、SQL cast() 函数
摘要：kudu 建表（使用impala操作kudu之创建kudu表） 依次启动HDFS、mysql、hive、kudu、impala 登录impala的shell控制端： Impala-shell 1：使用该impala-shell命令启动Impala Shell 。默认情况下，impala-shell 阅读全文
posted @ 2022-07-07 13:05 赤兔胭脂小吕布 阅读(2656) 评论(0) 推荐(0)
python、Apache Kudu、Apache impala 官方文档
摘要：python https://docs.python.org/3/ Apache Kudu https://kudu.apache.org/docs/ Apache impala https://impala.apache.org/impala-docs.html 阅读全文
posted @ 2022-06-07 15:46 赤兔胭脂小吕布 阅读(119) 评论(0) 推荐(0)