大数据开发工程师

工作职责
1.参与数据仓库、数据湖架构设计，建设数据平台；
2.负责对数据进行分析，为项目组提供大数据技术指导及分析手段支撑；
3.针对需求提供大数据分析技术解决方案；
4.结合用户的业务场景，设计和研发公司大数据产品；
5.参与负责数据调研、数据接入、数据建模、数据清洗、数据映射、数据可视化等工作；
6.参与系统性能优化，解决各类潜在系统技术风险，保证系统的安全、稳定、快速运行；
7. 能够独立完成复杂任务，并发现、解决问题；熟悉团队协作，能够配合完成攻坚任务，并指导低级别人员完成复杂任务；
8. 与直属上级一起，持续优化产品功能、技术应用深度，探索技术创新应用；定期参与专业技能分享、培训。
工作要求
1.计算机相关专业，具有5年以上工作经验，3年以上大数据平台建设相关工作经验；
2.精通JavaEE体系架构，熟练使用Spring Boot框架；
3.熟悉 Hudi、Iceberg、Hadoop、Spark、Flink、Kafka、 HBase 、 ElasticSearch 、 Hive、Flume 、 Kettle、 Kylin、DelphinScheduler、ELK等相关技术；
4.熟悉oracle、sql server、mysql等数据库及脚本语言；
5.有大用户量、高访问量／并发量系统开发经验者优先；
6.有参与构建海量数据存储、离线／实时计算、实时查询，大数据平台、 BI 平台的经验优先；
7.熟悉数仓，数据湖设计，熟悉常见的数据接入方式，熟悉常见的数据核计和分析方法；
8.具有较强的学习能力、逻辑分析、数据分析能力、问题排查能力、数据库优化能力；
9.熟悉交通领域业务经验的从业者优先。