数据湖工程师

数据湖工程师将负责开发和维护数据基础设施及客户/运营分析能力，以支持威立雅中国团队的信息需求。该职位将设计中国数据湖（基于云的大数据架构），构建和扩展数字解决方案，包括统计数据分析、数据挖掘、商业智能、数据仓库等；同时负责数据湖技术、平台和数据中心的运营、部署和维护，包括数据风险与安全维护监控、数据治理（数据访问、数据存储、数据变更管理、数据恢复等）以及数据分类、ETL、计算、优化等工作。
架构设计与开发：
- 定义系统级架构，进行维度建模和数据集市设计
- 构建高度可扩展的数据集市供威立雅中国使用
- 构建整体数据集市架构，设计并记录数据系统生态
- 设计高度可扩展的数据湖数据提取解决方案
- 架构设计数据质量框架的详细方案
数据湖运营与维护：
- 负责基于云平台组件的威立雅中国数据湖技术运营和维护，包括部署和优化、客户培训和沟通、现场技术服务等
- 负责云平台组件优化需求的分析、开发和实施，解决威立雅中国数据湖运营维护中的疑难故障、性能瓶颈等问题
- 协助构建基于阿里云的威立雅中国数据湖数据治理体系，研究阿里云运维技术，协助制定威立雅中国数据湖运维技术方案
数据治理与管理：
- 负责数据风险与安全维护监控，以及数据治理工作，包括但不限于数据访问、数据存储、数据变更管理、数据恢复等
- 负责数据湖和数据中心的数据分类、ETL、计算、优化等工作
- 负责技术文档的管理和编制维护
跨部门协作：
- 与威立雅中国不同业务部门合作，将业务需求转化为技术功能规范
- 与不同平台/系统所有者和供应商合作，为威立雅中国制定最佳解决方案，同时平衡范围、成本和时间
- 与大数据分析和数据科学团队互动，开发最有效的分析和高级算法模型，实现数据价值的最优提取
- 与外部供应商进行云平台运营沟通
- 与其他项目团队协调技术细节
技术研究与培训：
- 研究并跟进大数据架构的新技术并分享
- 大数据处理和分析应用平台设计指导
- 制定培训指南，对团队成员进行新技术交叉培训
- 规划公有云自动化运维工具和辅助工具