大数跨境

【每周 FAQ】第一期 | 回答你关于 Apache DolphinScheduler 的疑问

【每周 FAQ】第一期 | 回答你关于 Apache DolphinScheduler 的疑问 海豚调度
2023-04-06
1
导读:社区互助,共同进步~




点击蓝字 关注我们





摘要

为了让 Apache DolphinScheduler 的广大用户和爱好者对于此项目的疑问得到及时快速的解答,社区特发起此次【每周 FAQ】栏目,希望可以解决大家的实际问题。


关于本栏目的要点:

  1. 本栏目每周将通过腾讯文档(每周更新)从社区微信群收集 10-30 个问答,并在每周五整理具有典型代表意义的问答后发布,供大家参考。

  2. 所有人均可登录文档并提出问题,每人限 2 个提问,提问范围包括:

    1. 关于 Apache DolphinScheduler 的使用问题和技术性问题;

    2. 在实际应用中遇到的瓶颈问题;

    3. 参与社区贡献遇到的困难;

    4. 关于社区发展的疑问。

  3. 资源有限,请勿提问项目无关问题。

  4. 【每周FAQ】是一个社区互助的项目,发起宗旨是鼓励社区成员相互帮助,因此,欢迎大家积极踊跃志愿回答提出的疑问,在腾讯文档中写下答案即可。(高手们都别“潜水”了,出来露一手😜😎)

  5. 在社群里已经提问的问题,请勿在文档中重复提问,节约资源。

  6. 本栏目招募志愿者,有兴趣参与的小伙伴请加微信小助手 Leonard ds 报名。





FAQ(4月1日-4月7日)




DolphinScheduler 1.3 版本的能直接升级到 3.x.x 吗?

原则上没有问题,但是有小伙伴发现部分版本升级的时候存在问题,建议先1.3升级2.0.4,然后升级到3。

DolphinScheduler 3.1.4去 ZK 依赖了吗?

重新编译的DolphinScheduler 3.1.4支持cdh版本zk3.4.5,不依赖原来默认的zk3.8,主要是用到数据质量的,主要是解决多版本zk的依赖的问题。后面想解决打包的问题,可以用这个命令mvn clean install -Prelease -Dzk-3.4 -Dmaven.test.skip=true。

User-subscribe 邮件订阅好像有问题?

发送邮件到 dev-subscribe@dolphinscheduler.apache.org

从老版本升级到最新版本有没有官方指导?

换一下对应的版本,参考一下 https://dolphinscheduler.apache.org/zh-cn/docs/1.3.3/upgrade

官网下载太慢了,怎么办?

可以使用镜像下载 https://mirrors.tuna.tsinghua.edu.cn/apache/

dolphinscheduler/3.1.4/

DolphinScheduler 目前不支持 OAuth2.0的单点登陆吗?

没发现有相关配置支持,不过支持LDAP。

Windows可以搭建DolphinScheduler的开发环境吗?

可以开发编译,但不能运行。要基于DS做二开,建议开个虚拟机做debug开发。

有本地搭建 DolphinScheduler 的文档吗?

有的,体验的话可以看看官网的standalone安装 https://dolphinscheduler.apache.org/zh-cn/docs/1.3.3/standalone-deployment

psmisc 在DolphinScheduler中有啥用处啊?

这是停止工作流按钮需要的,kill 任务实例。

请教一下安装 DolphinScheduler 的集群版本时候,机器之间做SSH免密登录,除了方便拷贝文件之外,还有其他作用吗?

还可以xsync分发文件。

DolphinScheduler是必须新建一个用户来调度吗,还是说root用户也OK?

最好建一个DolphinScheduler的账号,并有sudo权限,因为有时候你用root用户调度的东西有些危险。

如何用DolphinScheduler来调度SeaTunnel任务?

如果要使用SeaTunnel v2的话,需要升级到DolphinScheduler 3.1(可以试试看)。

参与贡献


随着国内开源的迅猛崛起,Apache DolphinScheduler 社区迎来蓬勃发展,为了做更好用、易用的调度,真诚欢迎热爱开源的伙伴加入到开源社区中来,为中国开源崛起献上一份自己的力量,让本土开源走向全球。


参与 DolphinScheduler 社区有非常多的参与贡献的方式,包括:


贡献第一个PR(文档、代码) 我们也希望是简单的,第一个PR用于熟悉提交的流程和社区协作以及感受社区的友好度。


社区汇总了以下适合新手的问题列表:https://github.com/apache/dolphinscheduler/issues/5689


非新手问题列表:https://github.com/apache/dolphinscheduler/issues?q=is%3Aopen+is%3Aissue+label%3A%22volunteer+wanted%22


如何参与贡献链接:https://dolphinscheduler.apache.org/zh-cn/community/development/contribute.html


来吧,DolphinScheduler开源社区需要您的参与,为中国开源崛起添砖加瓦吧,哪怕只是小小的一块瓦,汇聚起来的力量也是巨大的。


参与开源可以近距离与各路高手切磋,迅速提升自己的技能,如果您想参与贡献,我们有个贡献者种子孵化群,可以添加社区小助手微信(Leonard-ds) ,手把手教会您( 贡献者不分水平高低,有问必答,关键是有一颗愿意贡献的心 )。

添加社区小助手微信(Leonard-ds) 



添加小助手微信时请说明想参与贡献。


来吧,开源社区非常期待您的参与。



< 🐬🐬 >
更多精彩推荐

Apache DophinScheduler Meetup 成都站— 批流一体与大数据调度最佳实践

优秀用户案例有奖征集 | 活动火热开启,快来投稿!

Apache DolphinScheduler 从 1.3.4 升级至3.1.2 过程中的问题记录及解决方案

DolphinScheduler×长安汽车 | 千万级数据接入能力智能网联汽车云平台引进核心调度系统

去年办了这么多场Meetup都没有你,2023年赶紧安排起来!

DolphinScheduler UI 项目启动提速 2 倍,原来是使用了 Vite!

DolphinScheduler×思科网讯:k8S整合实践,提高大数据处理效率!



我知道你在看

【声明】内容源于网络
0
0
海豚调度
Apache DolphinScheduler是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统,其致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。
内容 0
粉丝 0
海豚调度 Apache DolphinScheduler是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统,其致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。
总阅读0
粉丝0
内容0