02 2023 档案

摘要:1:在SQuirrel里如果创建table的时候,不指定namespace,则表是创建在default 空间的,在UI上无法看到,但是在phoenix sqlline 命令行可以看到,如下表LOT7 2:phoenix sql里,如果用引号将表名或列族名或列名括起来,则创建的表保持原来的大小写状态, 阅读全文
posted @ 2023-02-25 16:30 黎明踏浪号 阅读(112) 评论(0) 推荐(0)
摘要:在应用程序中,经常在Lambda 中调用redshift data api 去查询 redshift serverless 的数据,以下描述具体实现过程: 1:给Lambda 创建一个执行Lambda的IAM Role,并具有访问redshift serverless 权限,同时需要指定获取临时凭证 阅读全文
posted @ 2023-02-14 22:27 黎明踏浪号 阅读(182) 评论(0) 推荐(0)
摘要:在AWS环境,一般会使用S3作为数据湖,在S3上存储组织中的结构化,半结构化及非结构化的数据,这里使用了一个网上比较典型的AWS 数据湖仓的架构 Glue Catalog数据目录的建立 Glue可以使用Crawler 爬网程序读取一些特定格式的文件列头元数据,比如Avro,CSV,Apache Pa 阅读全文
posted @ 2023-02-14 18:28 黎明踏浪号 阅读(770) 评论(0) 推荐(0)