数据迁移工程师(数据仓库)

**-**元 查看薪资
  • 上海 闵行区
  • 3-5年
  • 本科
  • 招10人

职位描述

数仓开发数据治理JavaPythonHive sqlHadoopHiveSparkFlink数据迁移
统招本科学历
岗位职责:
1. 负责数据仓库脚本任务及数据的搬迁工作,确保最终数据完整性和一致性。
2. 使用 Hive SQL 进行数据查询操作,基于 Hadoop 大数据组件完成数据脚本部署、验证,编写和维护数据搬迁相关的操作文档
3. 与业务团队和开发团队协作,确保数据搬迁项目按时交付。
4.负责搬迁工具的用户支持、问题排查和系统运维等工作,沉淀工具手册,支持用户完成搬迁项目。
任职要求:
1. 数据仓库库:熟悉数据仓库的设计、建模和优化,熟悉 ETL 流程。
2. 大数据组件:熟悉 Hadoop 生态系统(如 HDFS、YARN),了解 Spark、HBase、Kafka、Flink、ES、ClickHouse 等大数据组件的使用。
3. 有大型数据仓库迁移项目经验者优先。"
4. 编程语言:精通 Hive SQL,能够编写复杂的查询语句;有一定 Python、Java 或 Scala 等编程语言的基础。
5.加分项:熟悉Java 前后端系统的运维工作,能够根据日志和数据库等进行问题的排查和解决。

工作地点

工作地点
上海*********
位置图标

公司信息

上海微创软件股份有限公司

不需要融资 · 10000人以上 · 软件/IT服务、软件/IT服务 已审核 已审核

202 个在招职位

公司介绍

上海微创软件股份有限公司2002年由微软与上海市政府共同创办,是微软在华投资的第一家合资公司。微创始终秉承高标准的服务品质与“成就客户”的服务理念,在全球设有20余处交付中心,分布在中国、美国、日本、澳大利亚,凭借在汽车、保险、高科技、金融、互联网等行业的深厚积累和丰富经验,与2500余家企业与政府客户达成了长期、稳定、友好的合作。

工商信息

企业名称 上海微创软件股份有限公司
企业类型 股份有限公司(外商投资、未上市)
法人代表 张维
经营状态 在营(开业)
成立时间 2002-05-22
注册资本 9163.3575万元
查看全部信息
完善简历

认证资质

营业执照信息

相似职位

查看更多

中级数仓开发工程师

1.3-1.6万 深圳建广数字科技有限公司青岛分公司
大专 3-5年 数仓开发 数据建模 ETL开发 Java Python Oracle MySQL Hadoop Hive Spark Flink

数据工程师(上海-黄浦区)

面议 上海江崎格力高食品有限公司
本科 5-10年 数据治理 数据运维 数据清洗 HANA

数据仓库、数据开发 证券 资管 保险 银行 监管报送

1.3-1.6万 上海春笛信息科技有限公司
大专 数仓开发 ETL开发 数据治理 Python Java MySQL PostgreSQL Hadoop Spark Flink Hive

数据仓库工程师(J11082)

9000-13000元 北京亿信华辰软件有限责任公司
本科 3-5年 数仓开发 MySQL Oracle

数据工程师

1.3-1.7万·14薪 福建星驿支付科技有限公司
本科 3-5年 数仓开发 Python

数据开发

1-1.2万 上海微创软件股份有限公司
本科 3-5年 数仓开发 Python Java Hive sql Spark sql Flink sql Hadoop Hive Spark Flink 全额社保公积金

数据仓库管理员

2-2.5万 上海振申医药进出口有限公司
本科 1-3年 数仓开发 SQL Server HBase GaussDB Hadoop Hive HDFS Spark Kafka Flink

大数据数仓开发工程师

1.1-1.3万 上海微创软件股份有限公司
大专 3-5年 数仓开发 数据迁移 Python Spark Hive Flink MySQL SQL Spark sql Flink sql Hive sql
最新招聘
热门城市
热门职位
热门公司