【岗位职责】 1、大数据平台构建与智能升级:基于 Dataworks 搭建分布式数据平台,负责数据集成、任务调度及全流程开发,保障高效运行。结合 AI 技术优化架构,引入智能调度算法提升资源利用率,推动平台向智能化演进,支撑业务数据需求。; 2、数据架构设计与 AI 融合应用:主导数据架构规划,制定存储、处理及流通方案,确保与业务契合。运用 AI 技术优化数据建模,通过机器学习算法提升 ETL 效率与数据质量,构建适配 AI 场景的数据支撑体系; 3、实时计算与技术创新:运用 Flink 实现海量数据离线与实时计算,解决数据倾斜等问题。关注 AI 与大数据融合技术,评估并落地智能计算框架,优化集群性能,降低成本,驱动技术创新。 【任职要求】 1、专业背景与经验:5 年以上大数据工作经验,本科及以上学历,相关专业优先;熟悉 Dataworks 平台,具备大数据项目开发经验,有 AI 辅助数据处理或智能数据平台搭建经验者优先。; 2、技术能力:精通数据仓库建模与 ETL,深入理解 Flink 原理,能开发优化计算任务;掌握 AI 基础算法,了解机器学习在数据处理中的应用,可利用 AI 工具提升数据处理效能。; 3、综合素养:具备良好沟通与团队协作能力,逻辑清晰,问题解决能力强;有较强自驱力与学习能力,能快速掌握 AI 与大数据融合新技术,适应新环境与业务需求。