数栈DTinsight

摘要： 数栈作为袋鼠云打造的一站式数据开发与治理平台，从2016年发布第⼀个版本开始，就始终坚持着以技术为核⼼、安全为底线、提效为⽬标、中台为战略的思想，坚定不移地⾛国产化信创路线，不断推进产品功能迭代、技术创新、服务细化和性能升级。 伴随业务的⻜速发展，数栈设计团队也启动了针对数栈产品的体验升级计划，从开 阅读全文

摘要： Taier 介绍 Taier 是袋鼠云开源项目之一，是一个分布式可视化的DAG任务调度系统。 旨在降低ETL开发成本、提高大数据平台稳定性，大数据开发人员可以在 Taier 直接进行业务逻辑的开发，而不用关心任务错综复杂的依赖关系与底层的大数据平台的架构实现，将工作的重心更多地聚焦在业务之中。 项目 阅读全文

摘要： Calcite在大数据系统中有着广泛的运用, 比如Apache Flink, Apache Drill等都大量使用了Calcite，理解Calcite的原理可以说已经成为理解大数据系统中SQL访问层实现原理的必备条件之一。 但是不少人在学习Calcite的过程中都发现关于Calcite的实践案例其实 阅读全文

摘要： 监控系统俗称「第三只眼」，几乎是我们每天都会打交道的系统，它也一直是IT系统中的核心组成部分，负责问题的发现以及辅助性的定位。 ChengYing作为一站式全自动化全生命周期大数据平台运维管家，自然也提供大数据产品的监控服务。这篇文章，将为大家系统性地介绍ChengYing监控的设计和使用，带大家进 阅读全文

摘要： 金融业天然就是一个经营数据的行业，一直对数字技术保持高度重视，是数字化转型最早和数字技术应用最广的行业之一。在金融和技术融合过程中，数据治理是关键。当前金融数据治理已由过去局部数据管理，发展到统筹数据整合、智能应用、数据驱动决策和数据开放融合，这对金融数据治理提出了更高的要求，也带来新的挑战。 本期 阅读全文

摘要： 年底啦～2022年即将走到尾声，不过袋鼠云对产品品质的坚持始终如一，这段时间我们对产品本身以及客户反馈的一些问题进行了持续的更新和优化，例如新增任务告警，进行了Connector相关功能优化，以及支持跨时间分区圈群等。 以下为袋鼠云产品功能更新报告第三期内容，更多探索，请继续查阅。 离线开发平台 1 阅读全文

摘要： 熟悉Taier的小伙伴们应该都知道，在11月7日发布的Taier1.3新版本中，我们融合了「DataSourceX 模块」。这是十分重要的一个变化，移除Taier外部插件依赖，新增数据源插件相关特性，支持后续Taier对接更多的RDBMS类型的SQL任务。 本篇文章，就带大家详细了解一下DataSo 阅读全文

摘要： 「如果港口是国民经济的晴雨表，那么智慧港口就是窥探港口未来发展的窗口。」 12月16日，2022智慧港口大会在浙江嘉兴举行，会议以“加快数字化转型 赋能高质量发展”为主题，由中国港口协会、中国交通通信信息中心、浙江省海港集团联合主办，来自行业主管部门及港航管理部门、各大港口集团、科研院校、解决方案供 阅读全文

摘要： “数据湖”、“湖仓一体”及“流批一体”等概念，是近年来大数据领域热度最高的词汇，在各大互联网公司掀起了一波波的热潮，各家公司纷纷推出了自己的技术方案，其中作为全链路数字化技术与服务提供商的袋鼠云，在探索数据湖架构的早期，就调研并选用了Iceberg作为基础框架，在落地过程中深度使用了Iceberg并 阅读全文

摘要： Kerberos，在古希腊神话故事中，指的是一只三头犬守护在地狱之门外，禁止任何人类闯入地狱之中。 那么在现实中，Kerberos指的是什么呢？ 一、Kerberos介绍 01 Kerberos是什么 根据百度词条释义，Kerberos是一种计算机网络授权协议，用来在非安全网络中，对个人通信以安全的 阅读全文