实时数仓工程师

岗位描述

岗位职责： 1、负责实时数据仓库的架构设计、开发、性能优化和稳定性保障。 2、支持离线数据的模型设计与ETL开发，产出支持各业务发展的公共主题数据及指标。 3、支持业务方数据提取、分析需求以及问题排查解决，对共性问题沉淀平台解决能力。 4、参与团队数据治理和架构优化，持续提升数据扩展性、时效性、易用性。 任职资格： 1、统招本科及以上学历，计算机相关专业，有5年及以上大数据开发经验。 2、熟练使用Java/Scala编程语言，编程基础扎实，代码风格良好。 3、深入了解Flink计算框架及原理，具备复杂场景的设计及开发能力。 4、熟练掌握大数据技术栈，如Spark、Flink、Kafka、Hbase、StarRocks、Paimon等，掌握实时数据库仓库建设的基本思路，有丰富的ETL开发及调优经验。 5、有数据湖流批一体的建设经验者优先，如Paimon、Hudi、Iceberg。 6、具备出色的需求分析能力及快速学习能力，能深入理解复杂的业务逻辑，具备良好的团队合作精神及沟通能力。