综合数据工程师

岗位职责：
1.负责数据管道与ETL开发
设计、开发并维护高效、稳定的实时/批量数据管道，完成从多种数据源的数据抽取、清洗、转换和加载工作，为数据应用提供可靠数据支撑。
2.负责数据仓库与数据模型建设
参与数据仓库、数据平台的搭建与优化，根据业务需求设计并开发数据模型与数据集市，提升数据复用性和访问效率。
3.负责数据质量与任务运维
建立数据质量监控体系，保障数据的准确性、完整性和一致性；负责数据任务的日常运维、性能调优与故障排查。
任职资格：
1.学历：大学本科及以上；
2.专业：计算机科学与技术、软件工程、数据科学与大数据技术、人工智能、统计学、应用数学等相关专业；
3.年龄：35周岁及以下；
4.工作经验：3年以上数据处理或数据分析相关工作经验，具有海量数据清洗、加工和处理实践经验者优先；
5.职业资格/职称:
（1）熟练掌握SQL和Python，具备使用Pandas/NumPy等工具进行数据清洗和加工的能力，了解常用数据采集技术；
（2）熟悉数据仓库架构和数据处理流程，掌握数据质量评估方法，具备数据血缘分析和元数据管理经验；
（3）了解大数据生态组件，具有Spark、Flink等分布式计算框架使用经验者优先；
（4）具备数据治理、数据安全管理经验，持有数据工程师相关认证者优先。