大数据开发工程师

职位描述：
我们正在招募一位资深的数据开发工程师，共同打造下一代高性能、高可靠、高安全的集团级数据平台。您将不仅参与核心技术的研发，更将深度介入数据体系的整体规划与关键难题的攻关。

岗位职责：
1、核心数据平台建设：主导集团级数据共享服务平台及实时数据通道的设计、搭建与持续优化，提升数据处理效率、完整性和安全性，为业务端提供高效、稳定的数据支撑。
2、技术架构与选型：负责重大数据项目的技术方案制定与技术栈评估，牵头核心组件的引入、验证与代码质量把控，保障系统架构的前瞻性与可靠性。
3、技术难题攻坚：深入大数据底层组件与存储中间件，针对高并发、大规模数据场景下的性能瓶颈与复杂问题进行定位与突破。
4、数据治理体系构建：参与数据管道运维、数据质量监控、元数据管理及数据安全机制的工具研发与流程设计，推动数据资产管理能力的全面提升。

职位要求：
1、本科及以上学历；
2、5年以上大数据平台或数据仓库建设经验，熟悉大数据生态、数仓模型及BI系统构建流程；
3、熟练掌握Hive,Spark,Flink,Kafka等主流组件，对内部机制和性能调优有深入理解；
4、了解主流开源大数据工具（如Doris,Paimon,DolphinScheduler等），具备集群部署、运维及调优实践经验；
5、至少熟练使用Java,Python,Scala,SQL中的两种语言，能编写高质量、可维护的数据处理逻辑；
6、熟悉Linux系统操作与Shell脚本编写，具备基本的服务器运维能力；
7、具备出色的逻辑思维与问题解决能力，工作严谨负责，抗压能力强；
8、拥有良好的协作意识、沟通表达能力与服务意识，能够主动推进项目落地；
9、持续关注大数据领域前沿技术发展，并具备将其应用于团队实践的能力；
10、有数据治理相关项目经验，了解数据治理方法论与实施路径。

优先条件：
1、具有金融、信贷行业背景，参与过数据平台建设或数据治理项目者优先。

职位关键词：
1、核心技术：Spark,Flink,Hive,Kafka,Doris,Paimon,DolphinScheduler,实时数仓
2、编程语言：Java,Python,Scala,SQL,Shell
3、行业经验：数据平台开发,数据治理,金融科技,信贷风控