更新于 3月25日

ETL开发

1.5-1.8万
  • 广州海珠区
  • 5-10年
  • 本科
  • 全职
  • 招1人

雇员点评标签

  • 同事很nice
  • 工作环境好
  • 人际关系好

职位描述

Java汽车研发/制造新能源汽车汽车零部件
工作职责:
1、架构设计:负责海量数据集成平台的 ETL/ELT 流水线设计与开发,确保数据从源端到湖仓的高效流转。
2、数仓建模:深度参与数据仓库体系建设,负责 ODS、DWD、DWS、ADS 各层级的逻辑建模与规范落地。
3、性能调优:通过 SQL 深度优化、Spark/Flink 参数调优,解决计算倾斜、数据延迟等核心技术瓶颈。
4、质量保障:构建全链路数据质量监控体系,编写自动化校验脚本,确保数据的准确性、完整性与一致性。
5、任务管理:负责 Airflow/DolphinScheduler 等调度平台的任务编排与生产保障,维护集群稳定运行。

任职要求:
1、核心功底:计算机相关专业本科,3 年以上数据开发经验;精通 SQL(具备复杂的存储过程编写与执行计划调优能力)。
2、编程能力:熟练掌握 Python、Java 或 Scala 其中一种,能编写高性能的数据处理脚本。
3、大数据技术:熟悉 Hive、Spark、Flink 等组件及其底层原理,具备处理 PB 级数据的实战经验。
4、建模理论:深刻理解 Kimball 或 Inmon 数仓建模理论,掌握主数据管理(MDM)与元数据管理。
5、加分项:
实时场景:有 Kafka + Flink 实时流计算开发经验者优先。
前沿技术:熟悉 Iceberg、Hudi 等数据湖技术或云原生湖仓一体架构。
行业背景:具有 汽车工业营销、复杂潜客线索处理 或大型互联网高并发数据经验者优先。

工作地点

宝地广场广州市海珠区琶洲大道79-87号

认证资质

营业执照信息

职位发布者

郭露/hr

当前在线
立即沟通
公司Logo同方鼎欣科技股份有限公司
同方鼎欣科技股份有限公司(以下简称:同方鼎欣)是服务中国及全球的高端IT解决方案与服务提供商。同方鼎欣一直致力于以自主创新的技术推动信息化革新。公司成立于1994年,前身是清华大学首家校办企业,现为同方股份有限公司等多家上市企业的参股公司。公司总部位于北京,在国内外多个城市设有分支机构,拥有行业优秀的研发及服务团队。公司严格遵循国际最高的质量及安全标准,拥有完善、成熟的管理和研发体系。率先通过了CMMI L3、ISO9001:2008、ISO27001及系统集成二级等一系列资质认证。连续多年被认定为“国家规划布局内重点软件企业”,荣获”中国软件和信息服务业最佳解决方案奖”、“中关村国家自主示范区软件行业创新示范百强企业”、“自主可靠企业核心软件品牌”等荣誉。同方鼎欣以系统化咨询、平台化技术、专业化服务为全球客户提供咨询、IT服务及行业解决方案,专注于医疗、电力、公共服务、电信、金融等领域。通过丰富的业务积累和实施经验,不断创新产品与技术平台,帮助客户实现全方位的信息化业务。目前公司已成为众多全球500强企业及行业新锐公司的战略合作伙伴。同方鼎欣以“技术创新”作为企业核心竞争力及品牌座右铭。依托清华大学、同方股份等资源优势,实践以客户价值为核心的服务理念,致力于向全球客户提供高品质服务,不断为客户创造价值,提升竞争力。
公司主页