This is an automated email from the ASF dual-hosted git repository.
github-bot pushed a commit to branch asf-site
in repository https://gitbox.apache.org/repos/asf/dolphinscheduler-website.git
The following commit(s) were added to refs/heads/asf-site by this push:
new 59e468e1ef Automated deployment:
6a72a0ba6d9ed34a873a347a424f031362eddde9
59e468e1ef is described below
commit 59e468e1efe6c73585b1bb86bbba05eb77d1ad54
Author: github-actions[bot] <github-actions[bot]@users.noreply.github.com>
AuthorDate: Tue Dec 12 02:28:18 2023 +0000
Automated deployment: 6a72a0ba6d9ed34a873a347a424f031362eddde9
---
data/blog/zh-cn.json | 16 ++++++++--------
.../Apache_DolphinScheduler_releases_version_3.2.0.json | 2 +-
...oom_(real_estate_agency)_multi-business_scenario.json | 2 +-
...igrating_from_Airflow_to_Apache_DolphinScheduler.json | 2 +-
...he_work_of_professional_data_warehouse_engineers.json | 2 +-
...finite_loop_of_Master_service_without_restarting.json | 2 +-
..._transformation_based_on_Apache_DolphinScheduler.json | 2 +-
...heduler_as_a_unified_scheduling_center_in_Lenovo.json | 2 +-
..._cloud_platform_based_on_Apache_DolphinScheduler.json | 2 +-
python/2.0.5/.buildinfo | 2 +-
python/2.0.6/.buildinfo | 2 +-
python/2.0.7/.buildinfo | 2 +-
python/3.0.0/.buildinfo | 2 +-
python/3.0.1/.buildinfo | 2 +-
python/3.1.0/.buildinfo | 2 +-
python/4.0.0/.buildinfo | 2 +-
python/4.0.1/.buildinfo | 2 +-
python/4.0.2/.buildinfo | 2 +-
python/4.0.3/.buildinfo | 2 +-
python/4.0.4/.buildinfo | 2 +-
python/main/.buildinfo | 2 +-
21 files changed, 28 insertions(+), 28 deletions(-)
diff --git a/data/blog/zh-cn.json b/data/blog/zh-cn.json
index f9a5af91b9..8dfd61692e 100644
--- a/data/blog/zh-cn.json
+++ b/data/blog/zh-cn.json
@@ -19,7 +19,7 @@
},
{
"name": "Apache_DolphinScheduler_releases_version_3.2.0",
- "content": "```yaml\ntitle: Apache DolphinScheduler
重磅发布3.2.0版本!\nkeywords: Apache DolphinScheduler, 版本发布, 技术动态\ndescription:
首度公开!Apache DolphinScheduler 3.2.0
全新功能与优化汇总。\n为您带来更加完善的功能体验与系统稳定性。\n\n\n\n今天,Apache
DolphinScheduler 3.2.0 版本在万众期待中终于发布了!在之前的预告中,包括[《重磅预告!Apache DolphinScheduler
3.2.0
新功能“剧透”》](http://mp.weixin.qq.com/s?__biz=MzA4NDYxNTc2NA==&mid=2247518178&idx=1&sn=59584d01ad5c4661ebe98a40d0a4c00c&chksm=9fe6b0d9a89139cff462faa14
[...]
+ "content": "---\ntitle: Apache DolphinScheduler 重磅发布3.2.0版本!\nkeywords:
Apache DolphinScheduler, 版本发布, 技术动态\ndescription: 首度公开!Apache DolphinScheduler
3.2.0 全新功能与优化汇总。\n为您带来更加完善的功能体验与系统稳定性。\n\n今天,Apache DolphinScheduler 3.2.0
版本在万众期待中终于发布了!在之前的预告中,包括《重磅预告!Apache DolphinScheduler 3.2.0 新功能“剧透”》、《3.2.0
版本预告!Apache DolphinScheduler API 增强相关功能》、《3.2.0 版本预告!远程日志解决 Worker
故障获取不到日志的问题》,以及《3.2.0 终极预告!云原生支持新增 Spark on k8S 支持》文章汇总已经大致覆盖了 3.2.0
版本的全新功能和优化。\n现在,来看看新版本的全新“样貌”吧!\nRelease Note: htt [...]
"title": "Apache DolphinScheduler 重磅发布3.2.0版本!",
"time": "2023-10-17"
},
@@ -55,7 +55,7 @@
},
{
"name":
"Application_and_practice_of_Apache_DolphinScheduler_offline_scheduling_in_Ziroom_(real_estate_agency)_multi-business_scenario",
- "content": "title: 数据分析师干了专业数仓工程师的活,自如是怎么做到的?\nkeywords: Apache
DolphinScheduler, 自如, 血缘分析\ndescription: 开始引入Apache
DolphinScheduler,并在此基础上进行了一系列的改造和优化,其中包括自动生成SQL血缘解析调度,支持Ambari管理Apache
DolphinScheduler,详细描绘Apache DolphinScheduler在自如中的应用以及演变过程\n\n\n用户案例 |
自如\n随着自如业务的快速发展,不断增长的调度任务和历史逾万的存量任务对平台稳定性提出了更高的要求。同时,众多非专业开发人员也需要一种更为“亲民”的调度平台使用体验。\n如何满足这些日渐凸显的需求对自如大数据平台的开发团队来说,无疑是巨大的挑战。团队经过深入的研究和对比,发现Apache
DolphinScheduler是一个能够满足自如当前所有核心需求的项目。\n至此,团队开始引入Apache DolphinSchedul
er,并在此基础上进行了一系列的改 [...]
+ "content": "\n用户案例 |
自如\n随着自如业务的快速发展,不断增长的调度任务和历史逾万的存量任务对平台稳定性提出了更高的要求。同时,众多非专业开发人员也需要一种更为“亲民”的调度平台使用体验。\n如何满足这些日渐凸显的需求对自如大数据平台的开发团队来说,无疑是巨大的挑战。团队经过深入的研究和对比,发现Apache
DolphinScheduler是一个能够满足自如当前所有核心需求的项目。\n至此,团队开始引入Apache
DolphinScheduler,并在此基础上进行了一系列的改造和优化,其中包括自动生成SQL血缘解析调度,支持Ambari管理Apache
DolphinScheduler,以及端到端调度组件的可用性监控等功能,从而更好地满足企业内需求。\n本文将详细描绘Apache
DolphinScheduler在自如中的应用以及演变过程。\n作者简介\n陈卓宇,自如大数据平台运维,负责自如离线数据�
�度,Apache StreamPark PPMC,Apache DolphinScheduler Contributor\n业务挑战\n\n [...]
"title": "Apache DolphinScheduler 离线调度在自如多业务场景下的应用与实践?",
"time": "2023-9-19"
},
@@ -73,7 +73,7 @@
},
{
"name":
"Big_Data_Scheduling_Best_Practices_Migrating_from_Airflow_to_Apache_DolphinScheduler",
- "content": "title: 大数据调度最佳实践 | 从Airflow迁移到Apache
DolphinScheduler\nkeywords: Apache DolphinScheduler, 迁移, Airflow\ndescription:
有部分用户原来是使用 Airflow 作为调度系统的,但是由于 Airflow
只能通过代码来定义工作流,并且没有对资源、项目的粒度划分,导致在部分需要较强权限控制的场景下不能很好的贴合客户需求,所以部分用户需要将调度系统从
Airflow 迁移到 Apache Dolphinscheduler。\n\n迁移背景\n有部分用户原来是使用 Airflow 作为调度系统的,但是由于
Airflow
只能通过代码来定义工作流,并且没有对资源、项目的粒度划分,导致在部分需要较强权限控制的场景下不能很好的贴合客户需求,所以部分用户需要将调度系统从
Airflow 迁移到 Apache Dolphinscheduler。\n\n秉承着解决用户实际需求的角度出发,Whaleops 研发了 Air2phin
迁移工具,协助用 [...]
+ "content": "迁移背景\n有部分用户原来是使用 Airflow 作为调度系统的,但是由于 Airflow
只能通过代码来定义工作流,并且没有对资源、项目的粒度划分,导致在部分需要较强权限控制的场景下不能很好的贴合客户需求,所以部分用户需要将调度系统从
Airflow 迁移到 Apache Dolphinscheduler。\n\n秉承着解决用户实际需求的角度出发,Whaleops 研发了 Air2phin
迁移工具,协助用户更好的迁移到 DolphinScheduler 中。由于 Airflow 是通过 python code
来定义工作流的,并且有部分元数据信息仅仅在 python code 中而不会持久化到数据库中,所以我们需要通过解析 python code
来完成分析和迁移的步骤\n为什么要迁移到 DolphinScheduler\nAirflow 和 DolphinScheduler
都是任务调度系统,都解决了任务编排的问题。两者各有优势,这个章节中我们仅介绍 DolphinScheduler 相对 Airflow 的优势,两者的对
比文章我们 [...]
"title": "大数据调度最佳实践 | 从Airflow迁移到Apache DolphinScheduler",
"time": "2023-10-25"
},
@@ -169,7 +169,7 @@
},
{
"name":
"How_can_real_estate_companies_let_data_analysts_do_the_work_of_professional_data_warehouse_engineers",
- "content": "title: 数据分析师干了专业数仓工程师的活,自如是怎么做到的?\nkeywords: Apache
DolphinScheduler, 自如, 数仓\ndescription: 本文是自如基于Apache
DolphinScheduler面向大数据构建基础平台的最佳实践\n\n\n数据分析师作为企业数据资产的缔造者之一,具有一定的维度与指标体系管理、血缘分析、ETL
调度平台等技能。能够灵活使用调度平台会为数据分析师带来很大的便利,然而对于编程技能水平参差不齐的数据分析师来说,一个操作简单,使用成本低的调度平台才能让他们如虎添翼,而不是增加额外的学习成本。\n与大多企业相比,自如大数据平台的独特之处在于,大量的数仓加工并非由专业的数仓工程师完成,而是由数据分析师所做。而自如的数据分析师之所以能够做到专业团队才能完成的复杂的数据处理、分析工作,与其调度系统迁移到
Apache Dolp
hinScheduler 分不开。\n在不久前的 Apache DolphinScheduler& Apache ShenYu(Incubatin
[...]
+ "content": "\n数据分析师作为企业数据资产的缔造者之一,具有一定的维度与指标体系管理、血缘分析、ETL
调度平台等技能。能够灵活使用调度平台会为数据分析师带来很大的便利,然而对于编程技能水平参差不齐的数据分析师来说,一个操作简单,使用成本低的调度平台才能让他们如虎添翼,而不是增加额外的学习成本。\n与大多企业相比,自如大数据平台的独特之处在于,大量的数仓加工并非由专业的数仓工程师完成,而是由数据分析师所做。而自如的数据分析师之所以能够做到专业团队才能完成的复杂的数据处理、分析工作,与其调度系统迁移到
Apache DolphinScheduler 分不开。\n在不久前的 Apache DolphinScheduler& Apache
ShenYu(Incubating) Meetup 上,自如大数据研发经理 刘涛,为我们分享了受数据分析师们欢迎的调度系统是什么样的。\n刘涛\n自如大�
�据研发经理,负责自如大数据基础平台构建,建设一站式大数据开发平台。\n\n01 自如大数据平台现状\n\n上图是自如大数据离线平台的简单图示,数据源包括
MyS [...]
"title": "数据分析师干了专业数仓工程师的活,自如是怎么做到的?",
"time": "2023-9-11"
},
@@ -181,13 +181,13 @@
},
{
"name":
"How_does_Apache_Dolphinscheduler_solve_the_infinite_loop_of_Master_service_without_restarting",
- "content": "title: Apache Dolphinscheduler如何不重启解决Master服务死循环\nkeywords:
Apache DolphinScheduler, 死循环, Master\ndescription:
相信不少使用过3.0的用户都遇到过Master服务中存在一些工作流一直不停的死循环的问题,本人到现在也没找到触发的原因,但是通过与同事的摸索,暂时找到了一个可以借助Arthas解决死循环的方法。\n\n个人建议\nApache
Dolphinscheduler作为一个开源的调度平台,目前已经更新到了3.X版本,4.0版本也已经呼之欲出。3.0版本作为尝鲜版本,新添加了许多的功能,同时也存在非常多的隐患,本人使用3.0版本作为生产调度也踩了很多坑,到现在依然存在很多难以解决的问题,所以建议小伙伴们尽量使用2.x版本,相对稳定一些。\n\n近期在跟社区的沟通中,**最新3.2.0版本,该问题已经得到解决!**感兴趣可以了解最新版本。\n\n\n下面主要记录的是
一个3.0比较难搞的问题,相信不少使用过3.0的用户都遇到过Mas [...]
+ "content": "个人建议\nApache
Dolphinscheduler作为一个开源的调度平台,目前已经更新到了3.X版本,4.0版本也已经呼之欲出。3.0版本作为尝鲜版本,新添加了许多的功能,同时也存在非常多的隐患,本人使用3.0版本作为生产调度也踩了很多坑,到现在依然存在很多难以解决的问题,所以建议小伙伴们尽量使用2.x版本,相对稳定一些。\n\n近期在跟社区的沟通中,**最新3.2.0版本,该问题已经得到解决!**感兴趣可以了解最新版本。\n\n\n下面主要记录的是一个3.0比较难搞的问题,相信不少使用过3.0的用户都遇到过Master服务中存在一些工作流一直不停的死循环的问题,本人到现在也没找到触发的原因,但是通过与同事的摸索,暂时找到了一个可以借助Arthas解决死循环的方法。\n死循环的影响\nCPU飙高:每个工作流的运行在Master中都是一个线程,当这个线程一直
没有结束时,是会占用CPU资源的,当服务中存在大量的线程死循环时,可想而知,服务器的资源压力有多大。\n磁盘打满:循环的线程内存在日志打印,当大量的线程无时无刻在打印日志时,日志
[...]
"title": "Apache Dolphinscheduler如何不重启解决Master服务死循环",
"time": "2023-10-31"
},
{
"name":
"How_does_the_national_dairy_giant_Yili_open_up_a_path_for_enterprise_digital_transformation_based_on_Apache_DolphinScheduler",
- "content": "title: 国民乳业巨头伊利如何基于 DolphinScheduler 开辟企业数字化转型“蹊径”?\nkeywords:
Apache DolphinScheduler, 伊利, 数字化转型\ndescription:
在数据驱动转型的过程中,会存在海量的数据集成任务,整体集成架构的合理性、调度的稳定性会严重影响数据流转的效率,也会制约数据的价值挖掘,伊利基于 Apache
DolphinScheduler
构建了统一的调度服务与数据集成体系,加速数据流转,助力企业数字化转型。\n\n\n精彩回顾\n近期,国民乳业巨头伊利集团在社区线上 Meetup
上带来了《伊利集团基于 DolphinScheduler
的探索与实践》。\n伊利集团数字化中心统筹推进全集团的数字化转型工作,姜涛及其团队在数字化中心负责大数据技术能力的建设以及相关的业务支持工作。在数据驱动转型的过程中,会存在海量的数据集成任务,整体集成架构的合理性、调度的�
��定性会严重影响数据流转的效率,也会制约数据的价值挖掘,伊利基于 Apache DolphinScheduler [...]
+ "content": "\n精彩回顾\n近期,国民乳业巨头伊利集团在社区线上 Meetup 上带来了《伊利集团基于 DolphinScheduler
的探索与实践》。\n伊利集团数字化中心统筹推进全集团的数字化转型工作,姜涛及其团队在数字化中心负责大数据技术能力的建设以及相关的业务支持工作。在数据驱动转型的过程中,会存在海量的数据集成任务,整体集成架构的合理性、调度的稳定性会严重影响数据流转的效率,也会制约数据的价值挖掘,伊利基于
Apache DolphinScheduler 构建了统一的调度服务与数据集成体系,加速数据流转,助力企业数字化转型。\n作者简介\n姜涛\n伊利集团
数字化中心
数据技术经理\n演讲大纲:\n背景与应用情况介绍\n实践&探索\n未来的规划\n关于开源的思考\n背景与应用情况介绍\n伊利介绍\n大家对伊利并不陌生,每年有13亿的国民消费者品尝过伊利�
�产品,平均每天有1亿包商品被消费者喝掉。伊利的业务起点可以追溯到一棵草的培育、一头牛的养殖、一杯奶的生产,最后经过复杂的供应链体系送到消费者手里,业务横跨一、二、三产业。\n应用背
[...]
"title": "国民乳业巨头伊利如何基于 DolphinScheduler 开辟企业数字化转型“蹊径”?",
"time": "2023-10-11"
},
@@ -217,7 +217,7 @@
},
{
"name":
"The_implementation_practice_of_Apache_DolphinScheduler_as_a_unified_scheduling_center_in_Lenovo",
- "content": "title: Apache DolphinScheduler 在联想作为统一调度中心的落地实践\nkeywords:
Apache DolphinScheduler, 联想, 最佳实践\ndescription: 在 ApacheCon Asia 2022
Meetup上,来自联想的数据架构师、Apache DolphinScheduler PMC & Committer 、Apache Local
Community 北京成员 李岗 老师分享了 Apache DolphinScheduler 在联想作为统一调度中心的落地实践。\n\n点亮 ⭐️ Star
· 照亮开源之路\nGitHub:https://github.com/apache/dolphinscheduler\n\n在 ApacheCon Asia
2022 Meetup上,来自联想的数据架构师、Apache DolphinScheduler PMC & Committer 、Apache
Local Community 北京成员 李岗 老师分享了 Apac [...]
+ "content": "点亮 ⭐️ Star ·
照亮开源之路\nGitHub:https://github.com/apache/dolphinscheduler\n\n在 ApacheCon Asia
2022 Meetup上,来自联想的数据架构师、Apache DolphinScheduler PMC & Committer 、Apache
Local Community 北京成员 李岗 老师分享了 Apache DolphinScheduler
在联想作为统一调度中心的落地实践。\n感谢本文整理者 关博
对社区的贡献,您的贡献是社区不断前进的动力!\n本次演讲主要包含以下四个部分:\n\n统一调度中心的需求背景介绍\n为什么会选择 Apache
DolphinScheduler 作为统一调度中心\nApache DolphinScheduler
在联想的落地实践中涉及的改造点\n后期规划(Roadmap)\n\n统一调度中心的需求背景介绍\n定时任务对每个开发人员来讲是一个常见的业务场景,我们通常都会遇到需要对数据进行备份、同步。一般的解决方式最
[...]
"title": "Apache DolphinScheduler 在联想作为统一调度中心的落地实践",
"time": "2023-10-16"
},
@@ -247,7 +247,7 @@
},
{
"name":
"Zhendao_Group_builds_an_intelligent_marketing_cloud_platform_based_on_Apache_DolphinScheduler",
- "content": "title: 珍岛集团基于 Apache DolphinScheduler 打造智能营销云平台\nkeywords:
Apache DolphinScheduler, 珍岛集团, 智能营销\ndescription:
随着业务的发展,以及数据集成平台和GMA,算法计算平台越来越多的业务需求,开源版本的DolphinScheduler已经不能完全满足需求,迫切地需要对其做一些定制化的开发。\n\n珍岛集团致力于打造全球领先的智能营销云平台,在国内率先推出的Marketingforce(营销力)平台,专注于人工智能、大数据、云计算在数字营销及企业数字化智能化领域的创新与实践,面向全球企业提供营销力软件及服务,以一站式智能营销生态助力企业进行数字化转型。\n\n之前,珍岛集团使用完全开源的Apache
DolphinScheduler任务调度框架,随着业务的发展,以及数据集成平台和GMA,算法计算平台越来越多的业务需求,开源版本的Apache
DolphinScheduler已经不�
��完全满足需求,迫切地需要对Apache DolphinSche [...]
+ "content":
"珍岛集团致力于打造全球领先的智能营销云平台,在国内率先推出的Marketingforce(营销力)平台,专注于人工智能、大数据、云计算在数字营销及企业数字化智能化领域的创新与实践,面向全球企业提供营销力软件及服务,以一站式智能营销生态助力企业进行数字化转型。\n\n之前,珍岛集团使用完全开源的Apache
DolphinScheduler任务调度框架,随着业务的发展,以及数据集成平台和GMA,算法计算平台越来越多的业务需求,开源版本的Apache
DolphinScheduler已经不能完全满足需求,迫切地需要对Apache
DolphinScheduler做一些定制化的开发。以下是珍岛集团团队最近一年在开源版本的基础上进行的优化和改进。\n业务需求\n技术方面\n1.期待简单易用,低代码的方式;\n2.Plug-in足够多,能够符合各业务模块需求;\n3.活跃的开源社区,优秀的人才;\n4.技术栈
能够和珍岛现有各业务模块高度吻合;\n5.后期新建业务模块时,不需要过多的二次开发。\n业务方面\n\n\n对调度系统的稳定性要求高;\n\n [...]
"title": " 珍岛集团基于 Apache DolphinScheduler 打造智能营销云平台",
"time": "2023-10-24"
},
diff --git
a/pages/blog/zh-cn/Apache_DolphinScheduler_releases_version_3.2.0.json
b/pages/blog/zh-cn/Apache_DolphinScheduler_releases_version_3.2.0.json
index d7d85212c5..accfbb35f5 100644
--- a/pages/blog/zh-cn/Apache_DolphinScheduler_releases_version_3.2.0.json
+++ b/pages/blog/zh-cn/Apache_DolphinScheduler_releases_version_3.2.0.json
@@ -1,5 +1,5 @@
{
- "__html": "<p>```yaml\ntitle: Apache DolphinScheduler
重磅发布3.2.0版本!\nkeywords: Apache DolphinScheduler, 版本发布, 技术动态\ndescription:
首度公开!Apache DolphinScheduler 3.2.0
全新功能与优化汇总。\n为您带来更加完善的功能体验与系统稳定性。</p>\n<pre><code>\n\n\n今天,Apache
DolphinScheduler 3.2.0 版本在万众期待中终于发布了!在之前的预告中,包括[《重磅预告!Apache DolphinScheduler
3.2.0
新功能“剧透”》](http://mp.weixin.qq.com/s?__biz=MzA4NDYxNTc2NA==&mid=2247518178&idx=1&sn=59584d01ad5c4661ebe98a40d0a4c00c&chksm=9fe6b0d9a8
[...]
+ "__html": "<h2>---\ntitle: Apache DolphinScheduler 重磅发布3.2.0版本!\nkeywords:
Apache DolphinScheduler, 版本发布, 技术动态\ndescription: 首度公开!Apache DolphinScheduler
3.2.0 全新功能与优化汇总。\n为您带来更加完善的功能体验与系统稳定性。</h2>\n<p><img
src=\"/img/2023-10-17/0.png\" alt=\"file\"></p>\n<p>今天,Apache DolphinScheduler
3.2.0 版本在万众期待中终于发布了!在之前的预告中,包括<a
href=\"http://mp.weixin.qq.com/s?__biz=MzA4NDYxNTc2NA==&mid=2247518178&idx=1&sn=59584d01ad5c4661ebe98a40d0a4c00c&chksm=9fe6b0d9a89139cff462faa14fa4c47d03ea
[...]
"time": "2023-10-17",
"author": "Niko Zeng",
"title": "Apache DolphinScheduler 重磅发布3.2.0版本!",
diff --git
a/pages/blog/zh-cn/Application_and_practice_of_Apache_DolphinScheduler_offline_scheduling_in_Ziroom_(real_estate_agency)_multi-business_scenario.json
b/pages/blog/zh-cn/Application_and_practice_of_Apache_DolphinScheduler_offline_scheduling_in_Ziroom_(real_estate_agency)_multi-business_scenario.json
index bed6f84fcc..079974eea9 100644
---
a/pages/blog/zh-cn/Application_and_practice_of_Apache_DolphinScheduler_offline_scheduling_in_Ziroom_(real_estate_agency)_multi-business_scenario.json
+++
b/pages/blog/zh-cn/Application_and_practice_of_Apache_DolphinScheduler_offline_scheduling_in_Ziroom_(real_estate_agency)_multi-business_scenario.json
@@ -1,5 +1,5 @@
{
- "__html": "<pre><code class=\"language-yaml\"><span
class=\"hljs-attr\">title:</span> <span
class=\"hljs-string\">数据分析师干了专业数仓工程师的活,自如是怎么做到的?</span>\n<span
class=\"hljs-attr\">keywords:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">DolphinScheduler,</span> <span
class=\"hljs-string\">自如,</span> <span class=\"hljs-string\">血缘分析</span>\n<span
class=\"hljs-attr\">description:</span> <span
class=\"hljs-string\">开始引入Apache</span> <span class=\"hljs-string\">Dol [...]
+ "__html": "<p><img src=\"/img/2023-9-19/1.png\" alt=\"file\"
title=\"file\"></p>\n<h2>用户案例 |
自如</h2>\n<p>随着自如业务的快速发展,不断增长的调度任务和历史逾万的存量任务对平台稳定性提出了更高的要求。同时,众多非专业开发人员也需要一种更为“亲民”的调度平台使用体验。</p>\n<p>如何满足这些日渐凸显的需求对自如大数据平台的开发团队来说,无疑是巨大的挑战。团队经过深入的研究和对比,发现Apache
DolphinScheduler是一个能够满足自如当前所有核心需求的项目。</p>\n<p>至此,团队开始引入Apache
DolphinScheduler,并在此基础上进行了一系列的改造和优化,其中包括自动生成SQL血缘解析调度,支持Ambari管理Apache
DolphinScheduler,以及端到端调度组件的可用性监控等功能,从而更好地满足企业内需求。</p>\n<p>本文将详细描绘Apache
DolphinScheduler在自如中的应用以及
演变过程。</ [...]
"time": "2023-9-19",
"author": "Niko Zeng",
"title": "Apache DolphinScheduler 离线调度在自如多业务场景下的应用与实践?",
diff --git
a/pages/blog/zh-cn/Big_Data_Scheduling_Best_Practices_Migrating_from_Airflow_to_Apache_DolphinScheduler.json
b/pages/blog/zh-cn/Big_Data_Scheduling_Best_Practices_Migrating_from_Airflow_to_Apache_DolphinScheduler.json
index f46cfe15a4..00d651da18 100644
---
a/pages/blog/zh-cn/Big_Data_Scheduling_Best_Practices_Migrating_from_Airflow_to_Apache_DolphinScheduler.json
+++
b/pages/blog/zh-cn/Big_Data_Scheduling_Best_Practices_Migrating_from_Airflow_to_Apache_DolphinScheduler.json
@@ -1,5 +1,5 @@
{
- "__html": "<pre><code class=\"language-yaml\"><span
class=\"hljs-attr\">title:</span> <span class=\"hljs-string\">大数据调度最佳实践</span>
<span class=\"hljs-string\">|</span> <span
class=\"hljs-string\">从Airflow迁移到Apache</span> <span
class=\"hljs-string\">DolphinScheduler</span>\n<span
class=\"hljs-attr\">keywords:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">DolphinScheduler,</span> <span
class=\"hljs-string\">迁移,</span> <span class=\"hljs-string\">Airflow</s [...]
+ "__html": "<h2>迁移背景</h2>\n<p>有部分用户原来是使用 Airflow 作为调度系统的,但是由于 Airflow
只能通过代码来定义工作流,并且没有对资源、项目的粒度划分,导致在部分需要较强权限控制的场景下不能很好的贴合客户需求,<strong>所以部分用户需要将调度系统从
Airflow 迁移到 Apache Dolphinscheduler。</strong></p>\n<p><img
src=\"/img/2023-10-25/1.png\"
alt=\"\"></p>\n<p>秉承着解决用户实际需求的角度出发,<strong>Whaleops 研发了 Air2phin
迁移工具</strong>,协助用户更好的迁移到 DolphinScheduler 中。由于 Airflow 是通过 python code
来定义工作流的,并且有部分元数据信息仅仅在 python code 中而不会持久化到数据库中,所以我们需要通过解析 python code
来完成分析和迁移的步骤</p>\n<h2>为什么要迁移到 DolphinScheduler [...]
"time": "2023-10-25",
"author": "Niko Zemg",
"title": "大数据调度最佳实践 | 从Airflow迁移到Apache DolphinScheduler",
diff --git
a/pages/blog/zh-cn/How_can_real_estate_companies_let_data_analysts_do_the_work_of_professional_data_warehouse_engineers.json
b/pages/blog/zh-cn/How_can_real_estate_companies_let_data_analysts_do_the_work_of_professional_data_warehouse_engineers.json
index b2f0ff22df..4d172de728 100644
---
a/pages/blog/zh-cn/How_can_real_estate_companies_let_data_analysts_do_the_work_of_professional_data_warehouse_engineers.json
+++
b/pages/blog/zh-cn/How_can_real_estate_companies_let_data_analysts_do_the_work_of_professional_data_warehouse_engineers.json
@@ -1,5 +1,5 @@
{
- "__html": "<pre><code class=\"language-yaml\"><span
class=\"hljs-attr\">title:</span> <span
class=\"hljs-string\">数据分析师干了专业数仓工程师的活,自如是怎么做到的?</span>\n<span
class=\"hljs-attr\">keywords:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">DolphinScheduler,</span> <span
class=\"hljs-string\">自如,</span> <span class=\"hljs-string\">数仓</span>\n<span
class=\"hljs-attr\">description:</span> <span
class=\"hljs-string\">本文是自如基于Apache</span> <span class=\"hljs-string\">Do [...]
+ "__html": "<p><img src=\"/img/2023-9-11/1.png\"
alt=\"\"></p>\n<p>数据分析师作为企业数据资产的缔造者之一,具有一定的维度与指标体系管理、血缘分析、ETL
调度平台等技能。能够灵活使用调度平台会为数据分析师带来很大的便利,然而对于编程技能水平参差不齐的数据分析师来说,一个操作简单,使用成本低的调度平台才能让他们如虎添翼,而不是增加额外的学习成本。</p>\n<p>与大多企业相比,自如大数据平台的独特之处在于,大量的数仓加工并非由专业的数仓工程师完成,而是由数据分析师所做。而自如的数据分析师之所以能够做到专业团队才能完成的复杂的数据处理、分析工作,与其调度系统迁移到
Apache DolphinScheduler 分不开。</p>\n<p>在不久前的 Apache DolphinScheduler& Apache
ShenYu(Incubating) Meetup 上,<strong>自如大数据研发经理 刘涛</strong>,为我们分享了
受数据分析师们欢迎的调度系统是什么样的。</p>\n<h3 [...]
"time": "2023-9-11",
"author": "Niko Zeng",
"title": "数据分析师干了专业数仓工程师的活,自如是怎么做到的?",
diff --git
a/pages/blog/zh-cn/How_does_Apache_Dolphinscheduler_solve_the_infinite_loop_of_Master_service_without_restarting.json
b/pages/blog/zh-cn/How_does_Apache_Dolphinscheduler_solve_the_infinite_loop_of_Master_service_without_restarting.json
index fb86f32d4e..e891654920 100644
---
a/pages/blog/zh-cn/How_does_Apache_Dolphinscheduler_solve_the_infinite_loop_of_Master_service_without_restarting.json
+++
b/pages/blog/zh-cn/How_does_Apache_Dolphinscheduler_solve_the_infinite_loop_of_Master_service_without_restarting.json
@@ -1,5 +1,5 @@
{
- "__html": "<pre><code class=\"language-yaml\"><span
class=\"hljs-attr\">title:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">Dolphinscheduler如何不重启解决Master服务死循环</span>\n<span
class=\"hljs-attr\">keywords:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">DolphinScheduler,</span> <span
class=\"hljs-string\">死循环,</span> <span
class=\"hljs-string\">Master</span>\n<span
class=\"hljs-attr\">description:</span> <span class=\"hljs-strin [...]
+ "__html": "<h1>个人建议</h1>\n<p>Apache
Dolphinscheduler作为一个开源的调度平台,目前已经更新到了3.X版本,4.0版本也已经呼之欲出。3.0版本作为尝鲜版本,新添加了许多的功能,同时也存在非常多的隐患,本人使用3.0版本作为生产调度也踩了很多坑,到现在依然存在很多难以解决的问题,所以建议小伙伴们尽量使用2.x版本,相对稳定一些。</p>\n<blockquote>\n<p>近期在跟社区的沟通中,**最新3.2.0版本,该问题已经得到解决!**感兴趣可以了解最新版本。</p>\n</blockquote>\n<p><img
src=\"/img/2023-10-31/6.png\"
alt=\"\"></p>\n<p>下面主要记录的是一个3.0比较难搞的问题,相信不少使用过3.0的用户都遇到过Master服务中存在一些工作流一直不停的死循环的问题,本人到现在也没找到触发的原因,但是通过与同事的摸索,暂时找到了一个可以借助Arthas解决死循环的方法。</p>\n<h2>死
循环的影响</h2>\n<p><strong>CP [...]
"time": "2023-10-31",
"author": "Niko Zemg",
"title": "Apache Dolphinscheduler如何不重启解决Master服务死循环",
diff --git
a/pages/blog/zh-cn/How_does_the_national_dairy_giant_Yili_open_up_a_path_for_enterprise_digital_transformation_based_on_Apache_DolphinScheduler.json
b/pages/blog/zh-cn/How_does_the_national_dairy_giant_Yili_open_up_a_path_for_enterprise_digital_transformation_based_on_Apache_DolphinScheduler.json
index 3c6e11a5aa..37fbec9a91 100644
---
a/pages/blog/zh-cn/How_does_the_national_dairy_giant_Yili_open_up_a_path_for_enterprise_digital_transformation_based_on_Apache_DolphinScheduler.json
+++
b/pages/blog/zh-cn/How_does_the_national_dairy_giant_Yili_open_up_a_path_for_enterprise_digital_transformation_based_on_Apache_DolphinScheduler.json
@@ -1,5 +1,5 @@
{
- "__html": "<pre><code class=\"language-yaml\"><span
class=\"hljs-attr\">title:</span> <span
class=\"hljs-string\">国民乳业巨头伊利如何基于</span> <span
class=\"hljs-string\">DolphinScheduler</span> <span
class=\"hljs-string\">开辟企业数字化转型“蹊径”?</span>\n<span
class=\"hljs-attr\">keywords:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">DolphinScheduler,</span> <span
class=\"hljs-string\">伊利,</span> <span
class=\"hljs-string\">数字化转型</span>\n<span class=\"hljs-attr\">descript [...]
+ "__html": "<p><img src=\"/img/2023-10-11/1.png\"
alt=\"\"></p>\n<h2>精彩回顾</h2>\n<p>近期,国民乳业巨头伊利集团在社区线上 Meetup 上带来了《伊利集团基于
DolphinScheduler
的探索与实践》。</p>\n<p>伊利集团数字化中心统筹推进全集团的数字化转型工作,姜涛及其团队在数字化中心负责大数据技术能力的建设以及相关的业务支持工作。在数据驱动转型的过程中,会存在海量的数据集成任务,整体集成架构的合理性、调度的稳定性会严重影响数据流转的效率,也会制约数据的价值挖掘,伊利基于
Apache DolphinScheduler
构建了统一的调度服务与数据集成体系,加速数据流转,助力企业数字化转型。</p>\n<h2>作者简介</h2>\n<p>姜涛</p>\n<p>伊利集团
数字化中心
数据技术经理</p>\n<p><strong>演讲大纲:</strong></p>\n<p>背景与应用情况介绍\n实践&探索\n未来的规划\n关于开源的思考</p
>\n<h2>背景与应用情 [...]
"time": "2023-10-11",
"author": "Niko Zeng",
"title": "国民乳业巨头伊利如何基于 DolphinScheduler 开辟企业数字化转型“蹊径”?",
diff --git
a/pages/blog/zh-cn/The_implementation_practice_of_Apache_DolphinScheduler_as_a_unified_scheduling_center_in_Lenovo.json
b/pages/blog/zh-cn/The_implementation_practice_of_Apache_DolphinScheduler_as_a_unified_scheduling_center_in_Lenovo.json
index 53859157dd..6859c85afd 100644
---
a/pages/blog/zh-cn/The_implementation_practice_of_Apache_DolphinScheduler_as_a_unified_scheduling_center_in_Lenovo.json
+++
b/pages/blog/zh-cn/The_implementation_practice_of_Apache_DolphinScheduler_as_a_unified_scheduling_center_in_Lenovo.json
@@ -1,5 +1,5 @@
{
- "__html": "<pre><code class=\"language-yaml\"><span
class=\"hljs-attr\">title:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">DolphinScheduler</span> <span
class=\"hljs-string\">在联想作为统一调度中心的落地实践</span>\n<span
class=\"hljs-attr\">keywords:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">DolphinScheduler,</span> <span
class=\"hljs-string\">联想,</span> <span class=\"hljs-string\">最佳实践</span>\n<span
class=\"hljs-attr\">description:< [...]
+ "__html": "<p>点亮 ⭐️ Star · 照亮开源之路</p>\n<p><strong>GitHub:</strong><a
href=\"https://github.com/apache/dolphinscheduler\">https://github.com/apache/dolphinscheduler</a></p>\n<p><img
src=\"/img/2023-10-16/1.png\"
alt=\"c029a062df808edb5e30f2c7dae5014a.png\"></p>\n<p>在 ApacheCon Asia 2022
Meetup上,来自联想的数据架构师、Apache DolphinScheduler PMC & Committer 、Apache Local
Community 北京成员 李岗 老师分享了 Apache DolphinScheduler
在联想作为统一调度中心的落地实践。</p>\n<p>感谢本文整理者 关博 对社区的贡献,您的贡献是社区不断前进的动力!</p>\n<p><strong>本次
[...]
"time": "2023-10-16",
"author": "Niko Zeng",
"title": "Apache DolphinScheduler 在联想作为统一调度中心的落地实践",
diff --git
a/pages/blog/zh-cn/Zhendao_Group_builds_an_intelligent_marketing_cloud_platform_based_on_Apache_DolphinScheduler.json
b/pages/blog/zh-cn/Zhendao_Group_builds_an_intelligent_marketing_cloud_platform_based_on_Apache_DolphinScheduler.json
index 736ab132e6..7ce422bed2 100644
---
a/pages/blog/zh-cn/Zhendao_Group_builds_an_intelligent_marketing_cloud_platform_based_on_Apache_DolphinScheduler.json
+++
b/pages/blog/zh-cn/Zhendao_Group_builds_an_intelligent_marketing_cloud_platform_based_on_Apache_DolphinScheduler.json
@@ -1,5 +1,5 @@
{
- "__html": "<pre><code class=\"language-yaml\"><span
class=\"hljs-attr\">title:</span> <span class=\"hljs-string\">珍岛集团基于</span>
<span class=\"hljs-string\">Apache</span> <span
class=\"hljs-string\">DolphinScheduler</span> <span
class=\"hljs-string\">打造智能营销云平台</span>\n<span
class=\"hljs-attr\">keywords:</span> <span class=\"hljs-string\">Apache</span>
<span class=\"hljs-string\">DolphinScheduler,</span> <span
class=\"hljs-string\">珍岛集团,</span> <span class=\"hljs-string\">智能营销</span>\n<s
[...]
+ "__html":
"<p>珍岛集团致力于打造全球领先的智能营销云平台,在国内率先推出的Marketingforce(营销力)平台,专注于人工智能、大数据、云计算在数字营销及企业数字化智能化领域的创新与实践,面向全球企业提供营销力软件及服务,以一站式智能营销生态助力企业进行数字化转型。</p>\n<p><img
src=\"/img/2023-10-24/1.png\" alt=\"file\"></p>\n<p>之前,珍岛集团使用完全开源的Apache
DolphinScheduler任务调度框架,随着业务的发展,以及数据集成平台和GMA,算法计算平台越来越多的业务需求,开源版本的Apache
DolphinScheduler已经不能完全满足需求,迫切地需要对Apache
DolphinScheduler做一些定制化的开发。以下是珍岛集团团队最近一年在开源版本的基础上进行的优化和改进。</p>\n<h2>业务需求</h2>\n<h3>技术方面</h3>\n<p>1.期待简单易用,低代码的方式;</p>\n<p>2.Plug-in足够多,�
��够符合各业务模块需求;</ [...]
"time": "2023-10-24",
"author": "Niko Zeng",
"title": " 珍岛集团基于 Apache DolphinScheduler 打造智能营销云平台",
diff --git a/python/2.0.5/.buildinfo b/python/2.0.5/.buildinfo
index 8693601492..ebd9fd20cb 100644
--- a/python/2.0.5/.buildinfo
+++ b/python/2.0.5/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: faf32ad7d7ccca752df8548b49dd98c8
+config: eb18201cfffa9e636a61ad9bd5e03d67
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/2.0.6/.buildinfo b/python/2.0.6/.buildinfo
index 31657667c8..fed9e52300 100644
--- a/python/2.0.6/.buildinfo
+++ b/python/2.0.6/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: 689b15279a9f5a69273fa0b57e9f37cb
+config: 1308f81c4a0b8ded4539da1b8b025a0a
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/2.0.7/.buildinfo b/python/2.0.7/.buildinfo
index 96e1ede08a..cbde3f3870 100644
--- a/python/2.0.7/.buildinfo
+++ b/python/2.0.7/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: 1b7a7c6477a3359437ef98aa36521d75
+config: 3b471e9415669756ad8786e543d28ee0
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/3.0.0/.buildinfo b/python/3.0.0/.buildinfo
index 2a0c04360e..17bda59588 100644
--- a/python/3.0.0/.buildinfo
+++ b/python/3.0.0/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: eaa2aa90926af34d2a473f2b030416d5
+config: 3ef111524f4465ee5b3bfebe331d9d0a
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/3.0.1/.buildinfo b/python/3.0.1/.buildinfo
index f05fc1c9f0..6e86789cfb 100644
--- a/python/3.0.1/.buildinfo
+++ b/python/3.0.1/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: 42423b57a99b32b39e6ac1166245380c
+config: 0db7069de67f64a221b5be2a7b5073d5
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/3.1.0/.buildinfo b/python/3.1.0/.buildinfo
index 5e3169316c..0ad9ca2b1c 100644
--- a/python/3.1.0/.buildinfo
+++ b/python/3.1.0/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: 53830cccb5be5c828c713c2e007d6e16
+config: 4f70389f651cdf4385966ef05c4df9a4
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/4.0.0/.buildinfo b/python/4.0.0/.buildinfo
index b8e79458f7..364833e7ec 100644
--- a/python/4.0.0/.buildinfo
+++ b/python/4.0.0/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: 14ccf1127decce3830a564a1da3be675
+config: b73ed721d2586c53f1c6a0db9e347ab4
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/4.0.1/.buildinfo b/python/4.0.1/.buildinfo
index 7aad8ebce9..174c7ba696 100644
--- a/python/4.0.1/.buildinfo
+++ b/python/4.0.1/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: 2b8cda2c56952b6f01208d8ff8456b88
+config: 6749dfb67fe836ba6a81a50639e37067
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/4.0.2/.buildinfo b/python/4.0.2/.buildinfo
index ce1beb9b1e..fd23cc0710 100644
--- a/python/4.0.2/.buildinfo
+++ b/python/4.0.2/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: f827bb871b0a6cee652156e69f2d1d88
+config: 776a4dbcc64974bf081bdcce94a39e74
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/4.0.3/.buildinfo b/python/4.0.3/.buildinfo
index 9c691f47e8..8a6042eb13 100644
--- a/python/4.0.3/.buildinfo
+++ b/python/4.0.3/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: a2650a7d78c0d586c8ba3aa7d3b47042
+config: e836f18f22acc794e9c763a43795df43
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/4.0.4/.buildinfo b/python/4.0.4/.buildinfo
index 3287ce1269..8d6f10f8c7 100644
--- a/python/4.0.4/.buildinfo
+++ b/python/4.0.4/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: 6e7211fd18f6386703f2de14aa3448a9
+config: dd175453a477eee82e721db9e4dddf0c
tags: 645f666f9bcd5a90fca523b33c5a78b7
diff --git a/python/main/.buildinfo b/python/main/.buildinfo
index f2cd499c0e..b226bb3840 100644
--- a/python/main/.buildinfo
+++ b/python/main/.buildinfo
@@ -1,4 +1,4 @@
# Sphinx build info version 1
# This file hashes the configuration used when building these files. When it
is not found, a full rebuild will be done.
-config: 4820d445cea123249fd86a52a21eb2aa
+config: 797648ffb22e5b57d5c8038f2336db11
tags: 645f666f9bcd5a90fca523b33c5a78b7