大数跨境

【本周六】合肥站Meetup:探索云原生大数据集成、调度的最佳实践

【本周六】合肥站Meetup:探索云原生大数据集成、调度的最佳实践 海豚调度
2023-10-19
2
导读:在我们生活的数字时代,大数据已经成为推动商业和科技发展的重要驱动力。然而,处理海量数据的任务不仅需要高效的调...·

在大数据技术日新月异的今天,企业与开发者都面临着一个相同的问题:如何在不断增长的数据量面前,找到一种既灵活又高效的数据解决方案?云原生作为新时代的技术趋势,与大数据的结合成为行业焦点,但真正能够应对各种复杂场景的实践经验并不多见。

🎯为了帮助大数据工程师们寻找到最适合自己的解决方案,Apache DolphinScheduler 联合 Apache SeaTunnel社区联合策划了一场“合肥”的线下Meetup。

📅10月21日,为了让这次技术活动更加丰富,我们还额外邀请了Apache SeaTunnel社区的开发者来进行探讨交流!期待碰撞出更激烈的技术火花~

🌟本次活动还邀请了来自科大讯飞、三禾一信息、某电能公司等业内资深专家和社区的大佬为大家带来精彩的主题演讲,他们将以最前沿的视角,带领我们探索大数据的最新技术趋势,解析实际工作中遇到的难题,并分享他们在这些问题上的独到见解和实践经验。



报名通道

Apache DolphinScheduler & SeaTunnel 联合Meetup 合肥站——《探索云原生大数据处理线下活动报名通道已开启,赶快预约吧!


时间:2023-10-21 13:00-17:00

形式:线下活动

地址:合肥市高新区软件园D8栋一楼路演厅(望江西路800号,原创新产业园一期)


扫描报名二维码立即报名(免费)


预约报名


扫描二维码进合肥大数据活动交流群(免费):


扫码进群



🔥为何你不能错过这次活动


1️⃣ 权威嘉宾:直接与SeaTunnel与DolphinScheduler的核心贡献者面对面,获取一手的技术分享。

2️⃣ 实践案例分享:三禾一信息科技基于Apache DolphinScheduler构建数据平台实践👩‍💻👨‍💻

3️⃣ 最新技术展示Apache SeaTunnel 下一代高性能,分布式、海量数据集成工具


4️⃣ 交流与Networking与众多大数据领域的同行交流,分享经验,扩展您的职业网络。

5️⃣ 精彩的互动环节:不仅可以带走实用的知识,也可以带走美好的回忆。📸参与互动环节,有机会赢取特别礼品!🎁


📅往下滑了解活动的具体时间、地点和议程。📌(本次活动不设直播



徐辉


三禾一信息科技 数据平台负责人




议题:基于Apache DolphinScheduler构建数据平台实践


🔍本次分享主要介绍三禾一信息科技有限公司基于Apache DolphinScheduler和Apache SeaTunnel构建离线数据平台实践,介绍我们在实践过程中遇到的一些问题以及我们的解决方案。


刘广东


科大讯飞 软件工程师





议题:Apache SeaTunnel 下一代高性能,分布式、海量数据集成工具


🔍Apache SeaTunnel,作为下一代高效的分布式数据集成工具,致力于为全球的企业提供一流的数据处理能力。本次分享将带您深入解析SeaTunnel的技术架构和独特优势,包括其如何实现高性能、稳定性和可扩展性在众多复杂的数据集成场景中的应用。



丁傲隆


 大数据开发工程师




议题:基于Apache Dolphinscheduler构建数据质量管理流程实践


🔍如今,大数据已成为一种资本,全球各个大型技术公司无不基于大数据工作原理,在各种大数据用例中通过持续分析数据提高运营效率,促进新产品研发,他们所创造的大部分价值无不来自于他们掌握的数据,数据的质量直接决定了能否挖掘出数据的价值,本次分享将介绍我们基于Dolphinscheduler构建数据质量管理流程的实践过程以及我们遇到的一些问题和思考。


活动地址导航🧭图示:




欢迎大家参加10月21日  Apache DolphinScheduler & SeaTunnel 联合 Meetup 合肥站 ,下午13:30,我们不见不散。


💡 赋能每一位参与者:无论您是大数据领域的资深人士,还是刚刚踏入这一领域的新手,我们都为您准备了丰富的内容和交流机会。我们希望每一位参与者都能从中收获,找到自己的成长与突破。


我们一直倡导 CommunityOverCode,在这里要非常感谢由海豚调度社区合肥的用户“丁傲隆”先生发起了这次技术活动!感谢他作出的贡献!



社区介绍
Community


Apache DolphinScheduler 是一个云原生并带有强大可视化界面的大数据工作流调度平台,致力于让调度变得更加容易,已在 3000+ 家公司的生产环境上稳定运行。身为一款专门针对于大数据平台的工作调度系统,具有本土化风格和多样化的部署方式。同时,Apache DolphineScheduler还拥有十分活跃的社区与定期的交流会。


Apache SeaTunnel 是一个云原生的高性能海量数据集成平台。美国时间 2021 年 12 月 9 日, SeaTunnel以全票通过的优秀表现正式成为 Apache 孵化器项目,这也是 Apache 基金会中第一个诞生自中国的数据集成平台项目。目前,SeaTunnel 在GitHub 上Star 数达 4.9k+,社区达到5000+人规模。


2017 年对外开源后,SeaTunnel 已经发布了 30多个版本,并经过大量企业生产使用,在 Bilibili、新浪、水滴筹、搜狗、趣头条、唯品会等公司的生产实践中,广泛应用于海量数据集成、数据 ETL、数据聚合以及多源数据处理等场景中。

 

致谢

 

用户实践案例

奇富科技  蜀海供应链 联通数科 拈花云科

蔚来汽车 长城汽车 集度 长安汽车

思科网讯 生鲜电商 联通医疗 联想

新网银行 消费金融  腾讯音乐 自如

有赞 伊利 当贝大数据

联想 传智教育 Bigo


参与Apache DolphinScheduler 社区有非常多的参与贡献的方式,包括:


贡献第一个PR(文档、代码) 我们也希望是简单的,第一个PR用于熟悉提交的流程和社区协作以及感受社区的友好度。

社区汇总了以下适合新手的问题列表:https://github.com/apache/dolphinscheduler/issues/5689

非新手问题列表:https://github.com/apache/dolphinscheduler/issues?
q=is%3Aopen+is%3Aissue+label%3A%22volunteer+wanted%22

如何参与贡献链接:https://dolphinscheduler.apache.org/zh-cn/community/development/contribute.html

来吧,DolphinScheduler开源社区需要您的参与,为中国开源崛起添砖加瓦吧,哪怕只是小小的一块瓦,汇聚起来的力量也是巨大的。

【声明】内容源于网络
0
0
海豚调度
Apache DolphinScheduler是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统,其致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。
内容 0
粉丝 0
海豚调度 Apache DolphinScheduler是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统,其致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。
总阅读0
粉丝0
内容0