Apache DolphinScheduler 非常适用于实时数据处理场景，尤其是与 Apache Flink 的集成。DolphinScheduler 提供了丰富的功能，包括任务依赖管理、动态调度、实时监控和日志管理，能够有效简化 Flink 实时任务的管理和部署。通过 DolphinSchedu ...

‍ 写在开头 点赞 + 收藏 学会 一、DeepSeek私有化本地部署【Windows】 1、安装Ollama 2、配置环境变量 3、下载模型 4、使用示例 a、直接访问 b、chatbox网页访问 Chatbox AI官网：办公学习的AI好助手，全平台AI客户端，官方免费下载 ...

各位热爱DolphinScheduler的小伙伴们，新年新气象，今年1月份的社区月报如期而至，请查收！ 这里将更新DolphinScheduler项目和社区每月的重大进展，敬请关注。 DolphinScheduler月度Merge Stars 感谢以下小伙伴上个月为 Apache DolphinSc ...

转载自风_间 上一篇写了《DolphinScheduler接口实操（一）：利用接口实现高效批量工作流导入及脚本上线》，通过DolphinScheduler的一些接口来实现导入-上线工作流，那么DolphinScheduler的接口应该怎么找呢？在此简单总结一篇。 接下来以手动执行一次工作流为例。 寻 ...

导读 某地方性股份制商业银行主要提供个人金融、公司金融、国际金融等方面的业务，承担着大量的金融数据处理与分析任务。这些任务对于确保银行的运营效率、风险管理和客户服务至关重要。过去，该银行一直依赖自建的调度系统来管理和协调这些数据任务，确保数据的准确性和及时性。然而，随着业务的不断扩展和数据量的急剧增 ...

实现了批量生成DolphinScheduler的任务，当导入时发现只能逐个导入，因此通过接口实现会更方便。 DolphinScheduler接口文档 DolphinScheduler是有接口文档的，地址是 http://IP:12345/dolphinscheduler/swagger-ui/ind ...

谁都不会想到，美国即将对Tiktok发出的禁令会让故事发生这样的转向，小红书竟成最后“赢家”。 小红书首页的“国际范” 一夜之间，小红书的首页被大量英文帖子“攻占”。中国网友纷纷表示：“一觉醒来，我成外国人了？”。这些新用户自称“TikTok难民”，并迅速在小红书上开设账号，上传内容，分享生活点滴、 ...

问题现象 有时候，Apache DolphinScheduler项目管理页面会发生加载不出来的问题，浏览器查看为[http://ip:12345/dolphinscheduler/projects?pageSize=10&pageNo=1&searchVal=]请求超时。 解决思路 查看海豚运行日志 ...

概述 本篇主要介绍如何通过Dolphinscheduler海豚调度搭配Seatunnel完成异构数据源之间的数据同步功能，这个在大数据流批一体数仓建设的过程中是一个非常好的解决方案， 稳定高效，只要用上了你肯定爱不释手。 环境准备 dolphinscheduler集群 >= 3.1.5 dolphi ...

背景： 我们是一家国内的服装公司，在全国拥有几十家服装门店，从事18个服装品类的销售，市场覆盖国内上海、华北、华中、西南、东北、中南、西北七个区域，年销售额达数千万元。财年结束了，老板希望我们（数据分析师）能对公司的销售团队的数据进行分析，并得出结论作为下年度的制定作战的方向。 一、工具选取： （1 ...

01 问题复现 在DolphinScheduler中有如下一个Shell任务： current_timestamp() { date +"%Y-%m-%d %H:%M:%S" } TIMESTAMP=$(current_timestamp) echo $TIMESTAMP sleep 60 在Dol ...

在数字化转型的大潮中，企业面临着数据爆炸性增长的挑战。如何有效地整合和管理来自不同来源的数据，成为企业提升竞争力的关键。本文将详细介绍惠生工程（中国）基于Apache DolphinScheduler的多源数据集成实践解决方案，包括背景介绍、痛点分析、调度策略设计、关键技术方案以及运维管理经验总结等 ...

在国产软硬件生态建设的征程中，又迎来重要成果。北京白鲸开源科技有限公司与统信软件技术有限公司联合宣布，白鲸数据集成系统V2.6和数据调度系统V2.6分别在统信服务器操作系统V25上通过了严格的功能与兼容性测试，获得了统信软件的互认证明。 白鲸开源数据调度系统V2.6与统信服务器操作系统V25互认证明 ...

引言 在大数据时代，企业面临着数据集成和实时处理的挑战。Apache SeaTunnel 和 Apache Doris 的结合提供了一种解决方案，使得企业能够快速搭建批流一体的数据仓库，全面取代传统的 Lambda 架构。本文将详细介绍 Apache SeaTunnel 的特点，在数据集成领域的核心 ...

功能需求背景 由于信创（信息技术应用创新产业）改造要求，上个月已将从数据仓库推送下游官网系统的ORACLE数据库相关数据推送任务迁移到信创人大金仓临时数据库，整体任务完成切换上线并试运行稳定。 由于年底需要进行信创数据库的正式上线，目前需要将人大金仓临时数据库切换到生产环境的人大金仓正式数据库，两者 ...

Apache SeaTunnel的Embedding转换插件是一个强大的工具，它能够将文本数据转换为向量化表示，从而使得这些数据可以被用于各种机器学习和数据分析任务。这个插件支持多种模型提供商，并且可以轻松集成不同的API。在这篇文档中，我们将深入了解Embedding插件的配置选项，包括如何指定模 ...

Monaco Editor 是一个基于浏览器的代码编辑器，由 Microsoft 开发，是 Visual Studio Code 的核心编辑器组件。为用户提供了一个功能丰富、性能优异的代码编辑环境，常用于 web 应用。 下面本文将从 Monaco Editor 的使用方法、使用逻辑作为切入点，讲述 ...

作者 | 袁丙泽 编辑 | Debra Chen 在处理涉及每年周数问题时，如果处于不同的地区或文化中，总会遇见一些标准问题。比如基督教信徒喜欢把周日当做每周的第一天。而不同的编程语言，也会有自己的处理方案，有些是每年从第0周开始，有些是从第一周开始。对于数据分析者来说，标准不统一带来的歧义是非常致 ...

在生成式AI的浪潮中，数据的重要性日益凸显。大模型在实际业务场景的落地过程中，必须有海量数据的支撑：经过训练、推理和分析等一系列复杂的数据处理过程，才能最终产生业务价值。事实上，大模型本身就是数据处理后的产物，以数据驱动的决策与创新需要通过更智能的平台解决数据多模处理、实时分析等问题，这正是以阿里云... ...

“数智基建+数智应用”赋能分享02期实录，该分享课件已上传至官网 ➡️课件下载https://www.dtstack.com/resources/1085?src=dsyfwh 以下为本次分享的回顾： 在企业数字化转型的浪潮中，数据已然成为企业最宝贵的资产之一。面对数据量的激增，企业既迎来了前所未有 ...