大数据开发工程师

工作职责：
1、负责数仓层模型落地，负责主题域宽表加工，标签构建，为上层数据应用服务提供提供统一、准确、高效的底层数据服务；
2、负责公司层面监管报送、保单登记、反洗钱等场景的相关数据治理工作，开展数据探查，确保数据质量和业务合规性；
3、负责公司级别数仓烟囱治理与资产整合，结合字段级别的元数据，结合LLM能力形成长效的治理审核机制；
4、系统化地沉淀元数据、数仓模型逻辑、业务指标定义与数据血缘等核心资产，以此为基础，积极探索以智能体驱动的自动化数据建模与运维框架；
5、负责已有大数据项目的维护工作，及时解决项目问题，保障大数据应用的稳定运行，确保数据服务的可靠性和可用性，参与公司大数据处理方向的技术拓展，跟踪大数据技术发展趋势，推动技术栈优化和平台能力提升。
岗位要求：
1、本科及以上学历，熟悉Hadoop技术体系,有Hadoop计算集群在实际项目上的开发和维护经验
2、三年以上基于Hadoop/Spark/Hbase/Hive等应用开发经验,对分布式计算有较为深刻的理解
3、熟悉大数据平台数据接入Sqoop,并有实际经验
4、精通 HiveSQL 及Hadoop/Spark生态，具备海量数据高效查询、复杂窗口函数应用、SQL性能调优与数据血缘治理能力
5、熟悉Linux/UNIX, 熟悉Perl/Python/Shell 等脚本开发语言
6、熟练使用主流AI编程辅助工具（如Cursor、Trae、通义灵码、CodeBuddy等）进行高效开发；具备Prompt Engineering能力，能将AI工具融入特征工程、模型训练、工程化部署全流程，实现开发效能与代码质量双提升
7、具备良好的问题排查和解决能力，能够快速定位和解决大数据应用中的各类问题
8、虚心好学,思维敏捷,良好的沟通能力和团队精神
9、具备互联网思维，并接纳互联网行业工作模式