大数跨境

Apache DolphinScheduler 社区5月月报更新!

Apache DolphinScheduler 社区5月月报更新! 海豚调度
2024-06-03
4
导读:社区5月份月报更新啦!

点击蓝字

关注我们

各位热爱 DolphinScheduler 的小伙伴们,社区5月份月报更新啦!这里将记录 DolphinScheduler 社区每月的重要更新,欢迎关注,期待下个月你也登上Merge Star月度榜单哦~

月度Merge Star


感谢以下小伙伴5月份为 Apache DolphinScheduler 做的精彩贡献(排名不分先后):

@changxiangshimian,@abzymeinsjtu,@pegasas,@dongyu6,@EricGao888,@rockfang,@alei1206,@Gallardot,@cntigers,@SbloodyS,@stoplyy,@TianXinCoord,@Zzih96,@yinxiaolog,@jxbwhe,@privking,@sdhzwc,@wangxj3,@lw-yang,@ruanwenjun,@qingwli,@rickchengx,@coldestlin,@jbampton,@sofiaJYX



01


apache/dolphinscheduler仓库


Fix

  • [Bug]修复SeaTunnel补丁数据租户异常 @changxiangshimian
  • [Fix][UI]在编辑警报实例时,确保数值类型字段具有数值类型值。 @rockfang
  • [Fix][UI]修复消息提示框的问题 @rockfang
  • [Fix]修复审计日志参数拼写错误 @qingwli
  • [Fix-16061]修改WorkflowExecuteRunnable#isTaskDepsComplete()方法中的日志信息。 @alei1206
  • [Fix-16046][SqlTask]修复Sql任务使用的时间类型不正确。 @yinxiaolog
  • [Hotfix]在ZookeeperRegistryTestCase中增加block-until-connected的值 @ruanwenjun
  • [Hotfix]修复Apache SeaTunnel的NettyRemotingClient可能抛出IllegalMonitorStateException异常。 @ruanwenjun
  • [Fix][CI]修复E2E-K8S-Execute的持续集成错误 @rickchengx
  • [Fix-15992]通过有序遍历MasterPriorityQueue来维护槽位索引 @coldestlin
  • [Fix-15969] [Helm]没有数据库节点存在 @Gallardot
  • [HotFix] [CI]暂跳过可合并检查 @SbloodyS
  • [Fix-15937]在DynamicCommandUtils.createCommand中添加tenantCode的传播 @stoplyy
  • [fix-15907]修复获取远程shell退出码不正确的问题。 @Zzih96
  • [FIX]已完成的任务无法在工作流实例中重新执行。 @privking

Improve

  • Revert "[Improvement]异常字符检查(#15824)" (#16102) @ruanwenjun
  • Revert "[Improvement]检查异常字符" @ruanwenjun
  • [Improvement][Docs]关于Apache SeaTunnel的文档附录.md中的中文文本错误修正 @TianXinCoord
  • [Improvement][Flink]将Flink命令更改为FLINK_HOME @pegasas
  • [Improvement][Monitor]为监控添加单元测试(UT) @qingwli
  • [Improvement][Monitor]展示Master和Worker的忙碌或正常状态,并列出命令表列表 @qingwli
  • [Improvement]修复PyTorch任务中的git URL注入问题(#15873) @cntigers
  • [Feature][Helm]将api/master/worker/alert的application.yaml配置文件设置为可配置 @pegasas
  • [Improvement]使用Apache SeaTunnel的safe构造函数与Snake YAML一起使用 @EricGao888

其他

  • 将dolphinscheduler-aop重命名为dolphinscheduler-yarn-aop @ruanwenjun
  • [Doc]更新ZooKeeper的下载链接 @sofiaJYX
  • 文档:修复安装指南中的拼写错误 @lw-yang
  • 修复sudo enable为false时,仍会检查租户是否存在。 @ruanwenjun
  • [DSIP-44]如果TaskExecuteRunnable调度失败,设置延时时间 @ruanwenjun
  • [ "3.2.2 版本发布 cherry-pick:减少归档文件的大小,以便继续进行ASF 发布" ]( https://github.com/apache/dolphinscheduler/pull/16068 " "3.2.2 版本发布 cherry-pick:减少归档文件的大小,以便继续进行ASF 发布" ") @SbloodyS
  • [helm]从通用标签中移除 AppVersion。 @Gallardot
  • 请勿在start.sh脚本中移除OmitStackTraceInFastThrow @ruanwenjun
  • 移除了未使用的StateEventHandleFailure @ruanwenjun
  • [DSIP-42]添加dolphinscheduler-aws-authentication模块 @ruanwenjun
  • 3.2.2版本发布选挑 cherry-pick:为了继续Apache SeaTunnel的ASF发布,减少归档文件的大小 @wangxj3
  • 将变量QUEUE_MAX_SIZE重命名为QUEUE_INITIAL_SIZE @alei1206
  • 修复Apache SeaTunnel WorkerTaskExecutorThreadPool#isOverload方法的错误 @ruanwenjun
  • 文档:修复contribute.md中的类型 @jxbwhe
  • 修复因并发操作导致的rpc通道泄漏问题 @ruanwenjun
  • 在注册表中使用随机端口 @ruanwenjun
  • 已弃用的2.0.9/3.0.6升级测试 @ruanwenjun
  • 修复因varpool中存在重复键而导致工作流实例重启失败的问题。 @ruanwenjun
  • 文档:修正拼写 @jbampton
  • 在CI环境中,PostgreSQL(pg)的数据库模式变更检查失败了。 @ruanwenjun
  • [Doc]修复资源配置中的拼写错误 @dongyu6
  • 为注册模块添加统一的集成测试。 @ruanwenjun
  • EMR任务支持替换参数占位符。 @ruanwenjun
  • [DSIP-39][parameter]优化启动参数/全局参数/项目参数的数据类型 @sdhzwc
  • 优化RPC基类的范围 @ruanwenjun
  • [TEST]提升项目工作团队关系服务的覆盖范围 @abzymeinsjtu
  • [DSIP-35][Alert]重構警報线程模型 @ruanwenjun
  • [DSIP-25][Remote Logging]分割远程日志配置 @pegasas
  • 在ETCD/JDBC注册指南中添加链接 @pegasas



02


apache/dolphinscheduler-website

仓库


其他

  • 任务:尝试整合Kapa到网站中 @Gallardot
  • 任务:修复Kapa CSP @Gallardot
  • 修复:将Kapa集成到网站中 @Gallardot
  • 特性:将Kapa集成到网站中 @Gallardot

< 🐬🐬 >
精彩推荐

用户实践案例
奇富科技  蜀海供应链 联通数科 拈花云科
蔚来汽车 长城汽车 集度 长安汽车
思科网讯 生鲜电商 联通医疗 联想
新网银行 消费金融  腾讯音乐 自如
有赞 伊利 当贝大数据
联想 传智教育 Bigo
通信行业  作业帮


迁移实践
Azkaban   Ooize   
Airflow (有赞案例) Air2phin(迁移工具)
Airflow迁移实践
Apache DolphinScheduler 3.0.0 升级到 3.1.8 教程


新手入门
选择Apache DolphinScheduler的10个理由
Apache DolphinScheduler 3.1.8 保姆级教程【安装、介绍、项目运用、邮箱预警设置】轻松拿捏!
Apache DolphinScheduler 如何实现自动化打包+单机/集群部署?
Apache DolphinScheduler-3.1.3 版本安装部署详细教程
Apache DolphinScheduler 在大数据环境中的应用与调优
< 🐬🐬 >
参与社区
参与Apache DolphinScheduler 社区有非常多的参与贡献的方式,包括:


贡献第一个PR(文档、代码) 我们也希望是简单的,第一个PR用于熟悉提交的流程和社区协作以及感受社区的友好度。

社区汇总了以下适合新手的问题列表:https://github.com/apache/dolphinscheduler/issues/5689

非新手问题列表:https://github.com/apache/dolphinscheduler/issues?
q=is%3Aopen+is%3Aissue+label%3A%22volunteer+wanted%22

参与社区贡献:https://dolphinscheduler.apache.org/zh-cn/community

来吧,DolphinScheduler开源社区需要您的参与,为中国开源崛起添砖加瓦吧,哪怕只是小小的一块瓦,汇聚起来的力量也是巨大的!


我知道你在看

【声明】内容源于网络
0
0
海豚调度
Apache DolphinScheduler是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统,其致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。
内容 667
粉丝 0
海豚调度 Apache DolphinScheduler是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统,其致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。
总阅读167
粉丝0
内容667