数栈DTinsight

摘要： 一、什么是工作流？ 在阐述什么是工作流之前，先说一下工作流和普通任务的区别，在于依赖视图。 普通任务本身他只会有自己的dag图，依赖视图是无边界的，不可控的，而工作流则是把整个工作流都展示出来，是有边界的，可控的，这是工作流的优势。下面为大家介绍工作流的相关功能： 01 工作流—功能介绍 ● 虚拟节 阅读全文

摘要： 本篇是「标签画像系列」的第四篇，此前我们已经介绍过了标签画像体系建设方法论、标签体系设计与加工、标签加工与落库，这次我们来介绍一下「标签评分」。 标签评分是标签治理的一个重要措施，通过给标签打分，可清晰直观的从各个维度评估标签，掌握标签真实使用情况，进行标签持续优化，助力业务运营。同时，也能帮助数据 阅读全文

摘要： Hadoop是Apache基金会旗下最知名的基础架构开源项目之一。自2006年诞生以来，逐步发展成为海量数据存储、处理最为重要的基础组件，形成了非常丰富的技术生态。 作为国内顶尖的 Hadoop 开源生态技术峰会，第四届 China Apache Hadoop Meetup于 2022年9月24日在 阅读全文

摘要： 本期我们带大家回顾一下无倦同学的直播分享《ChunJun类加载器隔离》，ChunJun类加载器隔离的方案是我们近期探索的一个新方案，这个方案目前还不是非常成熟，希望能借由此次分享与大家一起探讨下这方案，如果大家有一些新的想法欢迎大家在github上给我提issue或者pr。 一、Java 类加载器解 阅读全文

摘要： 据中国信通院发布，2012年到2021年10年间，我国数字经济规模由12万亿元增长到45.5万亿元，在整个GDP中的比重由21.6%提升至39.8%。顺应时代发展新趋势，“数据”成为新的生产要素已是毋庸置疑的共识。 如果说数据中台的崛起代表着企业数字化转型从流程驱动走向数据驱动，从数字化走向智能化。 阅读全文

摘要： 今天我们来和大家聊一聊一个新话题，一个对于企业业务发展十分关键的东西——指标。 指标建设是衡量企业业务效果的主要依据，本文结合自身实践经验和大家分享指标的设计与加工过程，讲述其基础概念和设计加工方法，以及设计加工过程中的注意点，希望对感兴趣的同学有所帮助。 一、指标建设的必要性 1、什么是指标 指标 阅读全文

摘要： 7月28日，在袋鼠云2022产品发布会上，袋鼠云技术负责人思枢正式宣布旗下产品「大数据基础平台EasyMR」发布。 EasyMR是袋鼠云自研的大数据基础平台，提供Hadoop、Hive、Spark、Trino、HBase、Kafka等组件，完全兼容Apache开源生态；支持企业级安全管控，一键开启L 阅读全文

摘要： 一、直播介绍 前几期，我们为大家分享了ChunJun的数据还原、Hive事务表及传输模块的一些内容，本期我们为大家分享ChunJun类加载原理与实现。 本次直播我们将从Java 类加载器解决类冲突基本思想、Flink 类加载器隔离的方案、ChunJun如何实现类加载器隔离及问题排查等方面为大家进行介 阅读全文

摘要： 8月27日，ChunJun社区与OceanBase社区联合组织的开源线下Meetup成功举办，会上重磅发布了「OceanBase&ChunJun：构建一体化数据集成方案」。 这是OceanBase&ChunJun联合解决方案的首次发布，将针对分库分表的实时数据集成、跨集群/租户的数据集成、不同数据源 阅读全文

摘要： ChengYing是一站式全自动化全生命周期大数据平台运维管家，提供大数据产品的一站式部署、运维、监控服务，其可实现产品部署、产品升级、版本回滚、扩缩节点、日志诊断、集群监控、实时告警等功能，致力于最大化节省运维成本，降低线上故障率与运维难度，为客户提供安全稳定的产品部署与监控。 ChengYing 阅读全文