岗位职责:
1. 负责大数据项目的设计、开发、测试,优化大数据处理流程,进行数据抽取、清洗、转换、加载和聚合;负责大数据平台的日常监控,及时排查并解决数据处理过程中的故障、延迟或数据质量问题。
2. 负责与业务部门对接,深入理解业务部门的数据需求,将模糊的业务问题转化为清晰、可执行的技术方案和数据需求规格说明书。
3. 设计与构建数据模型。根据业务需求和数据特性,设计合理、高效的数据模型(如星型模型、雪花模型、宽表等),支持数据分析和报表需求。维护和优化现有数据模型,确保其适应业务发展变化。
4. 保障数据质量与数据治理。识别、跟踪和解决数据质量问题,推动数据质量提升。参与数据治理相关工作,如元数据管理、数据血缘追踪、数据标准制定等。
5. 平台性能优化与资源管理。持续监控和分析数据处理任务的性能瓶颈,进行SQL优化、参数调优、资源分配优化等,提升数据处理效率和资源利用率。关注大数据平台的资源消耗(计算、存储),提出资源规划方案。
6. 完成部门安排的其他工作。
任职要求:
1.本科及以上学历,计算机类相关专业;
2. 具备数据中台、数据仓库相关项目经验,具有大数据云平台的数据运维和大数据开发经验,能够熟练地利用数据工具进行数据抽取、转换、清洗;
3. 具有一定的数据分析能力;
4. 具备较强的SQL开发能力,能够开发复杂的函数及存储过程对数据进行处理和统计;
5. 具备较强的沟通能力,有良好的团队协作能力、学习和理解能力,能够较快了解和掌握新知识,具备综合分析和解决问题能力;
6.诚实、踏实、认真负责,能承受一定的工作压力;
7.需提供真实有效的社保缴纳证明,核查与工作经历不符合者不予录用。