数栈DTinsight

摘要： 在之前的实时湖仓系列文章中，我们已经介绍了实时湖仓对于当前企业数字化转型的重要性，实时湖仓的功能架构设计，以及实时计算和数据湖结合的应用场景。 在本篇文章中，将介绍袋鼠云数栈在构建实时湖仓系统上的探索与落地实践，及未来规划。 数栈为什么选择实时湖仓 数栈作为一个数据开发平台，在未引入实时湖仓之前提供 阅读全文

摘要： 根据北京研精毕智信息咨询发布的调查报告，2018-2021年，全球数据存储量由30ZB上升至55ZB左右，年平均增长率约为27.8%。到2022年，数据总存储量进一步增加至65ZB以上，较2021年同期新增了约10ZB，同比增长18.2%。各市场主体对数据的重视程度不断提升，数据应用逐步由批量处理向 阅读全文

摘要： YARN（Yet Another Resource Negotiator）是 Hadoop 生态系统中的资源调度器，主要用于资源管理和作业调度。YARN 自身具备队列管理功能，通过对 YARN 资源队列进行配置和管理，实现集群资源的分配，以满足不同应用和用户的需求。YARN 的引入为集群在利用率、资 阅读全文

摘要： 如今，大规模、高时效、智能化数据处理已是“刚需”，企业需要更强大的数据平台，来应对数据查询、数据处理、数据挖掘、数据展示以及多种计算模型并行的挑战，湖仓一体方案应运而生。 《实时湖仓实践五讲》是袋鼠云打造的系列直播活动，将围绕实时湖仓的建设趋势和通用问题，邀请奋战于企业数字化一线的核心产品&技术专家 阅读全文

摘要： 在上篇文章中，我们向大家解释了为什么实时湖仓是当前企业数字化转型过程中的解决之道，介绍了实时计算和数据湖结合的应用场景。（“数据驱动”时代，企业为什么需要实时湖仓？） 在这篇文章中，我们将详细介绍在数栈实时开发平台内，实时湖仓的功能架构设计和具体实操案例。 功能架构介绍 实时湖仓并不是一个独立的产品 阅读全文

摘要： 开发部门在做指标加工的全流程中，是否经常出现如下问题： · 业务部门看指标数据的时候，看到两个名称相似的指标，不清楚两个指标的差异性，来咨询开发部门指标计算口径，开发部门配合业务部门翻找代码，找出指标口径差异性，影响工作效率 · 业务部门看指标数据的时候，总会出现不同页面的同一指标统计的结果不一致的 阅读全文

摘要： 如今，大规模、高时效、智能化数据处理已是“刚需”，企业需要更强大的数据平台，来应对数据查询、数据处理、数据挖掘、数据展示以及多种计算模型并行的挑战，湖仓一体方案应运而生。 《实时湖仓实践五讲》是袋鼠云打造的系列直播活动，将围绕实时湖仓的建设趋势和通用问题，邀请奋战于企业数字化一线的核心产品&技术专家 阅读全文

摘要： 质量是产品的生命线，代码检查是软件开发过程中至关重要的一环，它可以帮助我们发现并纠正潜在的错误，提高软件质量，降低维护成本。 在袋鼠云产品中也存在这个问题，由于离线数据开发人员 SQL 水平不一，导致代码书写混乱、SQL 代码运行问题较多。本文将介绍在离线产品中如何利用 SQL 检查规则规范化 SQ 阅读全文

摘要： 最近，某白酒品牌频频吸引大众眼球，白酒与咖啡、巧克力等联名衍生品一经推出便掀起热潮。某商品由于太过火爆，甚至一度售罄下架。 不得不说，我国拥有超大规模内需市场，消费潜力巨大。 当前，创新消费场景加上数字化融合转型，成为酒企品牌开疆扩土、逆势增长的重要途径。 如今越来越多的酒企开始拥抱数字化，建立涵盖 阅读全文

摘要： 欢迎来到袋鼠云07期产品功能更新报告！在瞬息万变的市场环境中，袋鼠云始终将客户需求和反馈置于优化工作的核心位置，本期也针对性地推出了一系列实用性强的功能优化，以满足客户日益增长的业务需求。 以下为袋鼠云产品功能更新报告07期内容，更多探索，请继续阅读。 离线开发平台 新增功能更新 1.数据源引入支持 阅读全文