大数据Java开发工程师

一、岗位名称
大数据Java开发工程师
二、岗位职责
1. 负责公司大数据平台、数据仓库及后端业务系统的设计、开发、迭代与优化工作，保障系统稳定、高效运行，支撑业务数据处理、数据分析及数据应用落地。
2. 基于Java及微服务技术栈，进行后端接口开发、业务逻辑实现、功能迭代及性能调优，配合前端、数据、产品团队完成需求落地。
3. 负责大数据数据采集、清洗、转换、建模、统计分析等核心流程开发，依托大数据组件完成海量数据的批量及实时处理工作。
4. 参与数据仓库架构设计、分层建设、数据模型迭代，梳理数据业务逻辑，保障数据准确性、完整性、一致性，提升数据复用性。
5. 负责现有大数据系统、Java微服务系统的问题排查、bug修复、性能优化及技术升级，持续提升系统稳定性和并发处理能力。
6. 参与技术方案评审、需求评审、代码评审，沉淀开发规范，配合团队完成技术迭代与创新落地。
7. 配合业务部门完成数据需求对接、技术支撑，输出相关开发文档、技术文档及数据说明文档。
三、任职要求
（一）基础条件
1. 本科及以上学历，计算机、软件工程、大数据、信息技术等相关专业，5年及以上Java后端+大数据开发实战工作经验。
2. 具备独立的项目开发、问题排查、方案落地能力，熟悉软件开发全流程，有完整的大数据项目、微服务项目落地经验。
3. 具备良好的编码规范、逻辑思维能力、学习能力及团队协作能力，工作严谨负责，具备较强的问题解决能力。
（二）专业技能要求
1. Java开发能力：熟练掌握Java基础语法、集合、多线程、IO、JVM调优等核心知识，精通Spring Cloud、Spring Boot主流微服务开发框架，熟练掌握微服务架构设计、服务注册发现、配置中心、网关、熔断限流等核心技术，具备大型微服务项目开发迭代经验。
2. 大数据技术能力：熟练掌握Hadoop、Hive、Spark核心大数据组件原理及实战开发，精通数据清洗、数据转换、离线数仓开发、海量数据计算等技术；熟悉大数据任务调度、数据同步、日志分析等配套技术。
3. 数据仓库能力：熟悉数据仓库建设规范，了解数仓分层（ODS、DWD、DWS、ADS）设计理念，掌握维度建模、分层建模思路，能够独立完成数仓模型设计、数据开发与优化。
4. 其他配套技能：熟练掌握MySQL、PostgreSQL等关系型数据库，精通SQL编写、索引优化、慢查询优化；熟悉Linux常用命令、Git版本控制、Maven/Gradle项目构建工具。
（三）优先条件
1. 有大型互联网、金融、政企等行业数据仓库完整搭建及开发经验者优先。
2. 熟悉spark分布式计算、Kafka消息队列、数据中台建设者优先。
3. 具备大数据平台性能优化、数据治理、数据质量监控相关经验者优先。
4. 有团队项目主导、技术方案落地、难点问题攻坚经验者优先。