过年好,新一代大数据任务调度系统 - Apache DolphinScheduler 1.3.5 发布

2023-04-26,,

节后上班第一天,新一代大数据任务调度 - Apache DolphinScheduler(incubator) 就迎来了好消息 - 在社区 20 多位小伙伴的贡献与努力下,社区发布了 1.3.5 版本,1.3.5 作为 1.3.x 的 bug 修复版本,本次共修复了 1.3.4 版本发现的 10 多处 bug 。

BUG FIX 请参考下列内容:

[#3237][Docker] the file requirements.yaml in helm mode has error flag

[#3298][K8s] when recreate or upgrade helm release, the host ip changed

[#4691][UDF] udf jar path not exist when fs.defaultFS starts with file:///

[#4640][UI] Fixed a 404 error when the project name contains "HTTP"

[#4648][UI] TypeError: Cannot read property 'id' of undefined in createUser

[#4566][Worker] worker-server logback partial logs are not printed

[#4526][Worker] worker server doesn't work fine in K8s

[#4472][DataSource] Hive JDBC partial permission parameter concatenation JDBC URL error

[#4247][API] When schedulertime is empty, rerun the workflow, the time of the global parameter is not the latest

[#4449][API] Update workflow instance to report null point exception

[#4455] kill task error because of shell output truncation

[#4271][Logger] IOException or NoSuchFileException in logger server

[#4162][UI] fix re-login problem in new tab and state synchronization problem in multiple tabs

[#3457][Flink] fix flink args build problem

除了 Bug 修复外,本次也做了几处功能改进,参考以下内容:

[K8s] Support resource storage when fs.defaultFS=file:///

[Docker] Update readme

[UI] Improve parameter name

[UI] download url resolve and security page disappear delay problem under GENERAL_USER

[API]enable response resources gzip compression

[#703]Docker image optimization

[#4439][API] Cors inteceptor problems

[#4418][login controller] Need password when open in new tab

此外,1.3.5 具体变化请参考:https://github.com/apache/incubator-dolphinscheduler/releases/tag/1.3.5

1.3.5 下载地址:https://dolphinscheduler.apache.org/zh-cn/docs/release/download.html

1

DolphinScheduler 介绍

新一代大数据任务调度 -  Apache DolphinScheduler 在 2020 年接连获得由 InfoQ 主办的 “2020 年度十大开源新锐项目” 和 “2020 年度最具人气新锐项目” 以及 OSCHINA 年度 “最佳技术团队” 称号,非常欢迎更多小伙伴加入到贡献队伍中来,为中国的开源崛起贡献自己的一份力量。

Apache DolphinScheduler(incubator) 于 17 年在易观数科立项, 19 年 3 月开源,8 月进入 Apache 孵化器, 据不完全统计,已有 400+ 公司在生产上使用。DolphinScheduler 致力于“解决大数据任务之间错综复杂的依赖关系,使整个数据处理流程直观可见”。DolphinScheduler以 DAG(有向无环图) 的方式将 Task 组装起来,可实时监控任务的运行状态,同时支持重试、从指定节点恢复失败、暂停及Kill任务等操作。DolphinScheduler 专注于以下 6 个主要能力

Apache 组织崇尚 “社区大于代码”,DolphinScheduler 目前微信用户群近 4000 人,社区目前有  200 + 贡献者,来自 100+ 家公司、机构和高校(部分统计)

2

部分用户案例

据不完全统计,截止 2020 年 10 月,已经有 400 + 家公司及机构采用 DolphinScheduler 在生产环境使用,以下是部分案例(排名不分先后)

此外,还有 2000+ 用户注册了 demo 试用( http://106.75.43.194:8888 ),欢迎大家体验,十分欢迎对比哈。

3

参与贡献

近 2 年随着国内开源的迅猛崛起,DolphinScheduler 社区迎来了十分蓬勃的发展,为了做更好用、易用的调度,真诚欢迎热爱开源的伙伴加入到开源社区中来,为中国开源崛起献上一份自己的力量,让本土开源走向全球

参与 DolphinScheduler 社区有非常多的参与贡献的方式,包括:

贡献第一个PR(文档、代码) 我们也希望是简单的,第一个PR用于熟悉提交的流程和社区协作以及感受社区的友好度。

社区汇总了以下适合新手的问题列表:https://github.com/apache/incubator-dolphinscheduler/issues/4124

如何参与贡献链接:https://dolphinscheduler.apache.org/zh-cn/docs/development/contribute.html

来吧,DolphinScheduler开源社区需要您的参与,为中国开源崛起添砖加瓦吧,哪怕只是小小的一块瓦,汇聚起来的力量也是巨大的。

参与开源可以近距离与各路高手切磋,迅速提升自己的技能,如果您想参与贡献,我们有个贡献者种子孵化群,可以添加社区小助手

微信(easyworkflow) 手把手教会您( 贡献者不分水平高低,有问必答,关键是有一颗愿意贡献的心 )。添加小助手微信时请说明想参与贡献哈

来吧,开源社区非常期待您的参与。

DolphinScheduler's Github Repo 传送门

↓↓↓

https://github.com/apache/incubator-dolphinscheduler

喜欢️ DolphinScheduler 的话,别忘了 Star 收藏一下哟~

过年好,新一代大数据任务调度系统 - Apache DolphinScheduler 1.3.5 发布的相关教程结束。

《过年好,新一代大数据任务调度系统 - Apache DolphinScheduler 1.3.5 发布.doc》

下载本文的Word格式文档,以方便收藏与打印。