大数据开发工程师（银行驻场）

职责描述：
1．负责大数据系统和数据湖的设计、开发、搭建及性能优化，解决大数据组件技术问题；
2．基于业务需求进行数据建模及大数据作业开发，确保数据完整性、一致性与安全；
3．负责 Spark 和Doris的开发、调优及性能优化，保障批流一体作业的高效运行：
4．负责 Hadoop 、 Flink 、 Hive 等大数据组件的运维与调优
5．支持部门项目实施，确保安全规范，并完成相关文档记录。
6. 有实时flink项目实战经验
任职要求：
1．本科及以上学历，计算机相关专业，7年以上大数据开发经验；
2．精通SQL ，熟悉 Python / Shell / Scala 等至少一种开发语言，熟悉常用设计模式；
3．具备扎实的 Spark 开发与调优能力，熟悉 Spark SQL 、 Spark Streaming 、内存管理与性能优化；
4．具备 Doris 实际项目开发与调优经验，熟悉建模设计、查询优化及高并发场景处理；
5．熟悉其他主流大数据技术（ Hadoop / Flink / Hive / Kafka / Trino )，有华为 MRS 或 Hudi 数据湖经验者优先