大数据架构师

岗位职责：
承担智能数据平台领域新技术、新架构的预研与验证工作，输出可落地的技术方案，平衡技术前瞻性与当前业务需求，应对系统间数据标准不统一的问题，推动技术迭代升级。
• 主导AI业务场景下大数据技术架构的设计、搭建与持续优化，支撑AI模型训练、推理等数据需求。
• 建立数据标准、质量监控及元数据管理体系，确保数据的准确、一致与可信；推动跨部门协作，将治理规范融入日常流程，并实现自动化监控。
• 设计数据分级、权限控制、审计追踪及容灾备份方案，满足法规要求；动态跟进日益严格的数据安全法规，在保障安全与促进数据价值利用间取得平衡
• 负责智能数据平台核心任务模块的需求分析、方案设计、编码开发与上线交付工作。
• 负责智能数据平台核心大数据组件的性能监控与优化调优工作，保障平台稳定高效运行
任职要求：
基本条件：
• 精通大数据开发领域主流存储、计算引擎及相关技术栈，熟练掌握Hadoop、Spark、Flink、Doris、Hive、Kafka、DolphinScheduler其中四种以上组件的生产经验。
• 熟练掌握数据仓库核心技术，深入理解维度建模理论体系，具备完整的维度建模落地实施经验（含需求分析、模型设计、开发上线等全流程）。
• 至少熟练掌握Java、Python、Scala、Shell、SQL五种语言中的两种及以上，具备扎实的编码能力；熟悉Linux操作系统，能熟练进行系统环境配置、脚本编写及问题排查。
• 具备丰富的数据仓库建模实战经验，熟悉基于开源数据平台的全链路闭环运作流程，可独立完成平台搭建、数据开发、日常运维、性能调优等全流程工作，能深度结合业务场景输出技术解决方案。
• 拥有3年及以上大数据领域相关工作经验，有大型数据项目（数仓/数据平台）全生命周期管理经验者优先。
优先条件：
• 具备数据湖架构设计与落地实战经验，熟悉数据湖分层管理、数据治理及数据安全相关方案。
• 了解或熟悉AI大模型相关技术及应用场景，对AI领域有浓厚兴趣，有大数据与AI结合项目经验者优先。
• 拥有丰富的数据仓库、数据湖一体化建设经验。
• 深入理解湖仓一体、流批一体技术架构理念，具备相关架构设计、开发及调优经验者优先。