大数据开发工程师

岗位职责：
1）参与虚拟数据体系下相关数据功能和自动化能力的技术设计和开发
2）参与虚拟数据体系和传统集市各数据层的数据模型设计和开发、变更处理、日常维护以及持续性的治理和优化工作
3）参与数据AI智能助手的设计和研发
任职要求：
1.本科及以上学历，计算机、软件工程及信息系统类，具备扎实的数据结构、算法及数据库理论基础。
2.具备4-8年大数据开发经验，熟悉大数据技术框架体系和原理，熟悉MapReduce、Spark、Tez、StarRock、ClickHouse等计算引擎的执行原理，主导或参与过完整的数据仓库项目（包括参与建模、SQL和ETL开发），有指标或标签平台的项目开发经验优先，有数据虚拟化相关的项目经验优先
3.精通Hive SQL与Spark SQL的开发与调优，具备对SQL执行计划的分析能力，能熟练定位和解决性能瓶颈，掌握SQL的高阶用法，包括但不限于复杂数据类型、窗口函数、grouping sets函数、行列转置函数等，具备严谨的数据逻辑能力
4.熟练使用Python进行数据处理和服务开发，具备FastAPI框架实战经验，能独立开发并部署基于FastAPI的接口服务，有使用Jinja2进行SQL模板化处理经验，有指标平台或语义模型系统开发经验优先。在此基础上，有一定Java基础的优先。
5.熟悉大模型相关技术，能结合AI技术赋能数据研发和应用场景，有相关AI应用研发经验优先
6.要求沟通表达能力强，逻辑思路清晰，具备团队协作精神，能与业务方进行良好的沟通
7.具备很强的自驱力、责任心和承压能力，有银行从业或互联网金融从业背景为佳