该职位已失效,看看其他机会吧

数据开发工程师

1.5-1.7万
  • 上海黄浦区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

HiveHDFSETL
岗位职责:
1. 运用维度建模/实体关系建模设计数仓逻辑与物理模型,适配业务需求使用ER/Studio、PowerDesigner工具进行模型可视化设计与优化
2. 基于Hive/Spark/Flink开发数据处理程序,优化ETL流程配置Informatica/Kettle工具,调度Azkaban/Oozie任务,保障数据一致性
3. SQL编写与优化
4. 部署维护Hadoop/Hive/Spark/Flink集群,调优参数(HDFS/Spark内存)监控组件运行状态,协同运维团队解决故障与性能问题
5. 深入理解业务流程,与业务部门协作提供数据解决方案;
6. 适配Tableau/PowerBI数据模型,优化BI工具数据呈现逻辑.
任职期望:
1、计算机相关专业,本科或以上学历
2、3年以上大数据开发经验,主导过2个以上ETL项目
3、精通Hive/Spark/Flink,熟练使用Informatica/Kettle/Azkaban;掌握维度建模/实体关系建模方法,熟悉ER/Studio/PowerDesigner工具; 熟练编写复杂SQL,具备索引优化/执行计划分析能力
4、逻辑思维严谨、问题解决能力强、跨部门协作高效
查看全部

工作地点

上海市-黄浦区-西藏中路336号

职位发布者

李先生/人事经理

立即沟通
公司Logo上海博匡信息科技有限公司
博匡本着“化繁为简,契约至上,笃定当下,卓越未来”的企业使命为国内外企业政府机构提供全方位的一站式人力资源服务,聘用多位行业大咖作为咨询顾问,为客户提供当前政策下的最优解决方案,致力向客户提供全方位优质的服务。
公司主页