更新于 1月31日

【数据资产运营中心】java工程师

1.5-3万
  • 珠海香洲区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

数据治理数据挖掘PythonETL
岗位职责:
1、负责跨系统ETL流程的设计与开发,处理多数据源整合及复杂业务转换逻辑;
2、主导流批一体数据任务的开发与维护,包括基于Flink的实时处理与基于Spark的离线计算任务;
3、对ETL任务进行性能调优,解决数据倾斜、内存溢出等问题,保障任务稳定高效运行;
4、设计并实施数据质量校验规则与监控方案,确保数据处理过程的准确性与可靠性;
5、参与数据仓库建模与开发,基于Hive、ClickHouse等组件进行数据分层设计与应用支持;
6、协助构建和维护数据血缘追踪体系,推动元数据管理工具(如Atlas/DataHub)的落地与应用。
岗位要求:
1、统招本科及以上学历,计算机、数学或相关专业,具备3年以上大数据或ETL开发经验;
2、具备TB级数据处理平台项目经验,能够独立完成复杂ETL流程的设计与开发;
3、精通Spark、Flink计算引擎,掌握其核心调优方法与参数配置;
4、熟练使用Kafka构建数据管道,具备数据仓库开发经验,熟悉Hive、ClickHouse等组件的使用与优化;
5、熟悉数据质量管理方法论,有数据校验、监控报警等相关实践经历;
6、了解数据治理相关工具与理念,具备数据血缘追踪或元数据管理项目经验者优先;
7、具备多语言编程能力(如 Go/Rust/Python 等)者优先。

工作地点

珠海香洲区格创·集城-A座

职位发布者

傅先生/招聘培训专员

立即沟通
珠海市国资数字科技有限公司
珠海市国资数字科技有限公司,为珠海国资委委管国有企业。作为重要的实施平台,国资数科公司的定位是支撑国资国企实现“精准管控、数实融合、共建共享、协同运营”四大目标的技术服务单位。“国资数科公司将提供以‘咨询+软件+数据+运营’为主线的端到端综合数字化服务,为珠海市国资国企数字化转型提供全方位技术支撑和服务。以服务国资监管和国企治理为目标,加快建设国资国企一体化平台和统一的数据资产开发运营平台,打造政企一体化服务及数据产品体系,构建高价值数字生态圈。
公司主页