雇员点评标签
职位描述
数据治理ETL
1.熟悉阿里云大数据生态,熟练使用Dataphin或DataWorks(Dataphin优先)进行数仓开发、任务调度与数据治理;
2.精通Hive SQL开发与优化,熟悉Hive底层执行原理,能解决复杂查询性能问题;熟练使用Spark进行任务开发;
3.精通数据迁移工具(Sqoop、DataX)的使用与二次开发,能根据不同数据源特性设计高效的抽取方案;
4.熟练编写Shell脚本,能读懂并调试Python脚本,具备自动化任务开发能力;
5.熟悉阿里云OSS对象存储的使用,掌握数据在OSS与Hive/Spark等组件间的流转逻辑;
6.具备迁移经验
2.精通Hive SQL开发与优化,熟悉Hive底层执行原理,能解决复杂查询性能问题;熟练使用Spark进行任务开发;
3.精通数据迁移工具(Sqoop、DataX)的使用与二次开发,能根据不同数据源特性设计高效的抽取方案;
4.熟练编写Shell脚本,能读懂并调试Python脚本,具备自动化任务开发能力;
5.熟悉阿里云OSS对象存储的使用,掌握数据在OSS与Hive/Spark等组件间的流转逻辑;
6.具备迁移经验
工作地点
西城区北京设计之都大厦

公司信息
认证资质
营业执照信息 人力资源服务许可证

更新于 今天


