更新于 3月2日

数据开发工程师

1.8-2万
  • 上海黄浦区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

ETL数据建模数据库开发SqlSparkKafkaFlink
岗位职责:
1. 数据建模与设计;20%
运用维度建模/实体关系建模设计数仓逻辑与物理模型,适配业务需求
使用ER/Studio、PowerDesigner工具进行模型可视化设计与优化
2. 数据开发与ETL流程构建;25%
基于Hive/Spark/Flink开发数据处理程序,优化ETL流程
配置Informatica/Kettle工具,调度Azkaban/Oozie任务,保障数据一致性
3. SQL编写与优化;15%
编写复杂SQL查询,优化执行计划(索引/分区表/语句重构)
管理数据库对象(表/视图/存储过程),提升数据访问效率
4. 大数据组件应用与维护;20%
部署维护Hadoop/Hive/Spark/Flink集群,调优参数(HDFS/Spark内存)
监控组件运行状态,协同运维团队解决故障与性能问题
5. 业务理解与协作。深入理解业务流程,与业务部门协作提供数据解决方案;10%
6. BI工具协作。适配Tableau/PowerBI数据模型,优化BI工具数据呈现逻辑;10%
任职资格:
1、教育背景与职业/执业资格:计算机相关专业本科及以上学历;5%
2、工作经验及行业背景:3年以上大数据开发经验,主导过≥2个复杂ETL项目;20%
3、能力要求(专业技能/语言要求):65%
- 技术能力 精通Hive/Spark/Flink,熟练使用Informatica/Kettle/Azkaban
- 数据建模 掌握维度建模/实体关系建模方法,熟悉ER/Studio/PowerDesigner工具
- SQL与优化 熟练编写复杂SQL,具备索引优化/执行计划分析能力
4、人才核心特质要求(除通用标准外):10%
逻辑思维严谨、问题解决能力强、跨部门协作高效

工作地点

上海黄浦区华旭国际大厦15层

入职公司信息

  • 入职公司: 上海倍通医药科技咨询有限公司
  • 公司地址: 上海黄浦区上海市黄浦区西藏中路336号华旭国际大厦
  • 公司人数: 1000-9999人

认证资质

  • 劳务派遣经营许可认证

    劳务派遣经营许可证是由国家人力资源与社会保障相关部门颁发,代表人才经纪人所在企业可以合法开展劳务派遣相关业务的资质证件。展示该标签代表该企业发布此职位时已上传《劳务派遣许可证》并经由平台审验通过。

职位发布者

孔祥松/人事经理

今日活跃
立即沟通
悠派才选(上海)人力资源有限公司
卡思优派人力资源集团,成立于2007年。集团运行上海和无锡双总部模式,是国内屈指可数的业务涵盖高端猎头服务,白领招聘及外包服务,蓝领外包服务及薪酬、人事相关外包、代理服务的综合性人力资源服务机构。现旗下拥有卡思猎头、优派外包、优派好工作求职连锁吧等品牌,是长三角区域品牌影响力最广、客户数量最多、团队规模最大的人力资源服务机构之一。公司使命致力于“放大人的价值”,愿景是“成为人才驱动,数据驱动,产品驱动,技术驱动的面向客户的令人敬仰的组织”,成为中国招聘与外包领域领先的人力资源服务商。
公司主页