随笔分类 -  dremio

1 2 3 4 5 ··· 22 下一页

dremio
dremio 26.0.5 社区版源码以及包提供下载了
摘要:就在昨天dremio 26.0.5 社区版源码以及包都提供了下载地 说明 实际上应该是很早就提供了,就是昨天才发布的,有空了可以研究下新的功能 参考资料 https://download.dremio.com/community-server/ https://docs.dremio.com/cur 阅读全文

posted @ 2025-09-27 19:15 荣锋亮 阅读(10) 评论(0) 推荐(0)

dremio 26.0.5社区版发布
摘要:实际上26.0.5版本已经很早就发布了,没太注意,这次实际上官方只是提供了docker 镜像,对于下载地址的暂时没提供,同时ce 源码暂时也没问题,具体解决了那些问题,只能结合release note 看(但是当前只有企业版信息的) 说明 目前实际上有好几个26.0的问题,等有空了测试下26.0.5 阅读全文

posted @ 2025-09-25 07:10 荣锋亮 阅读(16) 评论(0) 推荐(0)

dremio 自定义静态资源的处理
摘要:有些时候我们希望自定义一些dremio的页面,默认dremio 对于静态资源有一些约定 参考定义 DremioServer fallbackServletHolder if (config.serveUI) { final String basePath = "rest/dremio_static/ 阅读全文

posted @ 2025-09-16 08:00 荣锋亮 阅读(10) 评论(0) 推荐(0)

dremio 26 版本一些问题
摘要:在体验了新版本dremio 之后,还是有一些问题的,以下时候一个问题整理 问题 rest catalog 被放到企业版了,刚开始没注意,然后结果源码看发现的确是移除了,但是代码实际上部分还在,就是一些实现调整为了抽象类了,机制上可以自己扩展 (当然使用nessie 也是一个可选的rest catal 阅读全文

posted @ 2025-05-02 18:03 荣锋亮 阅读(45) 评论(0) 推荐(0)

dremio 26 oss 版本github 源码更新
摘要:就在这几天dremio 26 oss 版本github 源码更新了,同时目前测试构建是可以通过的,暂时没有问题 参考资料 https://github.com/dremio/dremio-mcp https://github.com/dremio/dremio-oss 阅读全文

posted @ 2025-05-02 10:47 荣锋亮 阅读(27) 评论(0) 推荐(0)

dremio 26 版本发布
摘要:实际上dremio 26 已经大概发布了有半个月了,就在今天提供了ce版本的软件包以及docker镜像,但是目前源码暂时未提供 一些相对比较重要的新特性(ce 版) arrow flight sql 支持预编译sql 了 (注意flight-sql-jdbc-driver 需要17 以及以上,目前测 阅读全文

posted @ 2025-04-30 16:48 荣锋亮 阅读(101) 评论(0) 推荐(0)

修复flight-sql-js-client 支持连接dremio
摘要:flight-sql-js-client 是基于grpc+ arrow flight 的原生arrow flight sql client,上次我也说过连接dremio 是有问题的,通过实际上的分析(结合wireshark 以及jave remote debug) 发现实际的请求是可以处理成功的,而 阅读全文

posted @ 2025-04-01 08:00 荣锋亮 阅读(26) 评论(0) 推荐(0)

flight-sql-js-client 又一个flight-sql-js client
摘要:flight-sql-js-client 是基于node+ grpc 编写的一个flight-sql-js client,实际上还有一个flight-sql-client-node 基于napi-rs 开发的 说明 目前测试集成dremio的flight sql 没有成功,后边分析下原因,目前基于a 阅读全文

posted @ 2025-03-29 08:00 荣锋亮 阅读(16) 评论(0) 推荐(0)

Daft delta lake dremio 集成一些问题
摘要:一些问题 com.dremio.common.exceptions.UserException: Failed to read metadata for delta dataset /warehouse/myappdemo. Deltalake format version 3 is not sup 阅读全文

posted @ 2025-02-13 08:00 荣锋亮 阅读(23) 评论(0) 推荐(0)

Daft nessie rest catalog + dremio 集成代码简单说明
摘要:以前简单说明过集成玩法,以下通过代码示例简单说明下集成 nessie + dremio 部署 基于docker-compose 部署 docker-compose 一些参考可以参考我以前关于dremio 以及nessie 的一些介绍 version: "3" services: zk: image: 阅读全文

posted @ 2025-02-11 08:00 荣锋亮 阅读(38) 评论(0) 推荐(0)

Daft nessie rest catalog + dremio 集成
摘要:Daft 内部使用了pyiceberg 进行iceberg 的表操作,对于具体的catalog 都是pyiceberg 内部的能力,实际上我们可以直接集成nessie, 目前pyiceberg 对于rest catalog 支持的比较好,同时nessie 也支持rest catalog 了,以下是一 阅读全文

posted @ 2025-02-10 08:00 荣锋亮 阅读(40) 评论(0) 推荐(0)

dremio 25.2 软件包以及github 源码更新了
摘要:昨天我说了dremio 发布了25.2 提供了新的catalog 支持,之后过了一段时间dremio同时也提供了软件包以及github 源码的更新 说明 25.1 版本构建关于dremio-js 的 私服问题在这次代码中也看到解决了,新功能代码可以看看 参考资料 https://github.com 阅读全文

posted @ 2024-10-26 08:13 荣锋亮 阅读(61) 评论(0) 推荐(0)

dremio 25.2 发布
摘要:就在昨天dremio 发布了25.2 版本,此版本对于catalog 的支持添加了两个新的(Polaris Catalog 以及Unity Catalog) 说明 其他主要是关于历史bug 的fix 对于新catalog ce 版本实际上只Polaris Catalog ,默认没开启,需要通过plu 阅读全文

posted @ 2024-10-25 23:47 荣锋亮 阅读(45) 评论(0) 推荐(0)

dremio 25.1 版本开始支持sql 预编译处理了
摘要:dremio 从25.1 版本开始,支持sql 预编译了,可以更好的提升系统的安全性 参考使用 传统jdbc 模式 Connection conn = DriverManager.getConnection("jdbc:dremio:direct=localhost:31010;schema=sys 阅读全文

posted @ 2024-10-04 14:24 荣锋亮 阅读(44) 评论(0) 推荐(0)

dremio25.1.1 发布
摘要:就在昨天dremio 发布了25.1.1 主要是一些bug 的fix,尤其是在25.1 版本对于script 保存的问题 说明 完整的变动信息可以参考官方文档,目前oss 代码以及下载包,docker 镜像已经都上传了,可以体验下 参考资料 https://docs.dremio.com/curre 阅读全文

posted @ 2024-10-03 12:56 荣锋亮 阅读(26) 评论(0) 推荐(0)

dremio 25.1 github 代码变动
摘要:dremio 25.1 已经发布了好几个礼拜了,以前说过github 社区版25.1 版本的没有提交最新的,最近看了下github 已经提交新的了 而且这次应该是比较完整的 构建上的一些问题 jdk 依赖 这个保持不变,同时看官方一些信息对于maven 构建已经调整了,有了不错的支持 ui 组件 目 阅读全文

posted @ 2024-09-28 11:30 荣锋亮 阅读(56) 评论(0) 推荐(0)

dremio 25.1 发布
摘要:就在今天dremio 发布了25.1 版本(社区版)同时提供了docker镜像以及下载地址 说明 目前官方还缺少release note 说明,目前来说github 代码尽管提交了,但是不是新的(只更新了maven package version),从简单测试上,的确有一些bug 修复,但是目前官方 阅读全文

posted @ 2024-09-05 18:45 荣锋亮 阅读(34) 评论(0) 推荐(0)

snowflake polaris iceberg rest catalog 代码发布到github 了
摘要:就在7月低snowflake 的 polaris 代码以及发布到github 了,以下是一些资料可以参考 说明 从介绍上polaris 实际上包含了不少nessie 的能力,后续如果与dremio 的集成,还是值得期待的,在今年dremio 的发布会上,说是会包含一个基于rest catalog 的 阅读全文

posted @ 2024-08-13 00:32 荣锋亮 阅读(67) 评论(0) 推荐(0)

dbt dremio 自定义的几个macro 简单说明
摘要:关于自定义schema 以前简单说明过,实际上dbt 支持了好几个预留的macro,可以方便进行自定义,比如schema,database,aliases,target dbt dremio adapter 的几个自定义macro 实际上就是上边说的,schemas,aliases,database 阅读全文

posted @ 2024-07-22 08:00 荣锋亮 阅读(45) 评论(0) 推荐(0)

dbt dremio nessie create table branch 问题解决简单说明
摘要:以前是简单说明过解决方法,以下通过实际代码,说明下解决 dbt dremio 集成nessie 内部处理简单说明 注意目前说明的场景是基于nessie 作为数据库配置的,而不是dbt 标准的space 玩法 整体处理 如下图,实际上和业务模型的定义有关系,包含了view,以及table,当然还有属于 阅读全文

posted @ 2024-07-21 01:21 荣锋亮 阅读(35) 评论(0) 推荐(0)

1 2 3 4 5 ··· 22 下一页

导航