点击蓝字 关注我们
摘要
为了让 Apache DolphinScheduler 的广大用户和爱好者对于此项目的疑问得到及时快速的解答,社区特发起此次【每周 FAQ】栏目,希望可以解决大家的实际问题。
关于本栏目的要点:
本栏目每周将通过腾讯文档(每周更新)从社区微信群收集 10-30 个问答,并在每周五整理具有典型代表意义的问答后发布,供大家参考。
所有人均可登录文档并提出问题,每人限 2 个提问,提问范围包括:
关于 Apache DolphinScheduler 的使用问题和技术性问题;
在实际应用中遇到的瓶颈问题;
参与社区贡献遇到的困难;
关于社区发展的疑问。
资源有限,请勿提问项目无关问题。
【每周FAQ】是一个社区互助的项目,发起宗旨是鼓励社区成员相互帮助,因此,欢迎大家积极踊跃志愿回答提出的疑问,在腾讯文档中写下答案即可。(高手们都别“潜水”了,出来露一手😜😎)
在社群里已经提问的问题,请勿在文档中重复提问,节约资源。
本栏目招募志愿者,有兴趣参与的小伙伴请加微信小助手 Leonard ds 报名。
5月6日-5月12日
问
哪个版本支持跨用户依赖任务?就是a用户任务依赖b和d用户创建的多个任务。
答
3.1.5版本支持,参考https://dolphinscheduler.apache.org/zh-cn/docs/3.1.5/guide/task/dependent。
问
DolphinScheduler生产环境用什么版本?
答
最新 3.1.5 版本欢迎你,如果你还在调研没有正式使用的话,一周后的 3.1.6 也是不错的选择。
问
3.0.0 版本上传jar包超大失败如何解决?
答
需要前端增加超时 https://github.com/apache/dolphinscheduler
/issues/14027。
问
DolphinScheduler目前是否支持工作流的血缘分析?
答
看看项目管理 - 工作流关系是否是想要的功能。
问
DolphinScheduler 3.1.5版本,Spark节点,Spark-sql任务可以执行资源文件中的SQL吗?
答
目前不支持。
问
子流程传递参数这个功能有人在做了么?
答
有一个开源之夏的课题,欢迎认领:Apache DolphinScheduler 开源之夏学生项目申请开启,6 大课题等你来拿万元奖金!
问
不小心把zk删了,怎么办?
答
重新让海豚注册一遍就OK了。
问
有不少任务,依赖检查失败了,但是整体状态还是running,似乎后面的子节点一直在等待前面的调度成功了再运行。
答
2.0.5之后的版本修复了这个问题。
问
DolphinScheduler 1升级到3.1.5后,授权信息需要重新再执行一遍。
答
应该是有部分不兼容的更新了。
问
DolphinScheduler 3.1.5版本没有了loggerserver,调度执行的py文件内部执行异常日志没有打印到页面,原来的1版本可以打印py执行脚本日志信息。
答
logserver 集成到wroker和master了,可以看对应的日志。
问
DolphinScheduler 3.1.5版本工作流定时调度管理上线后,不会自动排序展示到第一个,不方便开发。
答
是按照工作流更新时间展示的。
问
DolphinScheduler 3.1.3版本新建sql任务,手动执行该任务,工作流实例一直运行状态,该任务实例一直处于派发状态(该问题怎样排错?)
答
看看master 的日志,会有具体的报错信息的。
问
3.1.6版本大概什么时候发版?
答
本周在走发版流程。
问
DolphinScheduler流里面的节点可以复制到其他流里面吗?
答
不支持任务复制,但是可以复制工作流后删除不必要的任务。
问
DolphinScheduler集群在安装时,只在本机创建了不存在的文件夹,另外两台机器上没有自动创建安装文件夹,这个问题什么原因?
答
查看SSH免密是否可以使用
查看文件夹权限或者路径是否正确。
问
海豚的项目可以复制吗?同一个集群,不同的项目。
答
可以导出,全选进行导出即可。
问
为什么worker跑着跑着就挂了?
答
看 worker 运行日志,正常不会挂。
问
3.1.5版本中支持stream任务么?
答
支持,任务定义-实时任务。
问
目前3.1.5这个版本里面能否配置任务与任务之间的弱依赖关系?
答
看看 subprocess 或者 dependent 这两个任务是否满足你的需求。
问
DolphinScheduler任务处于派发状态,怎么样才能继续执行?
答
重启master。
问
DolphinScheduler能集成到TiDB数据库,实现对TiDB数据库的调度吗?
答
元数据库是支持 TiDB 的,如果想说数据源的话,可以用 MySQL 协议。
< 🐬🐬 >
往期回顾
☞【每周 FAQ】第二期 | 回答你关于 Apache DolphinScheduler 的疑问
☞【每周 FAQ】第一期 | 回答你关于 Apache DolphinScheduler 的疑问
☞【第三期】Apache DolphinScheduler 每周 FAQ 集锦
☞【第四期】Apache DolphinScheduler 每周 FAQ 集锦
☞【第五期】Apache DolphinScheduler 每周 FAQ 集锦
< 🐬🐬 >
精彩活动推荐
汽车行业走在了数字化革命浪潮的前列。大数据和 AI 技术的日益成熟,让汽车行业面对着动辄上百万的日活数据,二调度系统助力汽车数字化平台数据调度重塑着未来汽车的面貌,其重要作用不言而喻。
Apache DolphinScheduler 作为国内外多家知名车企数据平台的核心调度系统,它是如何帮助车企迎接数字化时代新挑战的?如何辅助重塑未来汽车的新面貌?欢迎大家关注即将到来的 Apache DolphinScheduler 汽车行业最佳应用实践专场直播!
直播时间:2023 年 5 月 23 日 19:00-21:00
预约方式:点击预约,视频号直播不见不散!
参与贡献
随着国内开源的迅猛崛起,Apache DolphinScheduler 社区迎来蓬勃发展,为了做更好用、易用的调度,真诚欢迎热爱开源的伙伴加入到开源社区中来,为中国开源崛起献上一份自己的力量,让本土开源走向全球。
参与 DolphinScheduler 社区有非常多的参与贡献的方式,包括:
贡献第一个PR(文档、代码) 我们也希望是简单的,第一个PR用于熟悉提交的流程和社区协作以及感受社区的友好度。
社区汇总了以下适合新手的问题列表:https://github.com/apache/dolphinscheduler/issues/5689
非新手问题列表:https://github.com/apache/dolphinscheduler/issues?q=is%3Aopen+is%3Aissue+label%3A%22volunteer+wanted%22
如何参与贡献链接:https://dolphinscheduler.apache.org/zh-cn/community/development/contribute.html
来吧,DolphinScheduler开源社区需要您的参与,为中国开源崛起添砖加瓦吧,哪怕只是小小的一块瓦,汇聚起来的力量也是巨大的。
参与开源可以近距离与各路高手切磋,迅速提升自己的技能,如果您想参与贡献,我们有个贡献者种子孵化群,可以添加社区小助手微信(Leonard-ds) ,手把手教会您( 贡献者不分水平高低,有问必答,关键是有一颗愿意贡献的心 )。
添加社区小助手微信(Leonard-ds)
添加小助手微信时请说明想参与贡献。
来吧,开源社区非常期待您的参与。
点击阅读原文,点亮Star支持我们哟