更新于 3月22日

高级数据开发工程师

1.5-3万
  • 上海浦东新区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

SqlJavaPythonHadoopFlinkSpark数据治理数据架构ETL
岗位职责:

OneID体系建设: 负责设计并搭建公司级的统一身份识别(OneID)系统,打通用户在不同端(小程序、APP、Web)、不同渠道的割裂数据,形成统一的用户视图。
数据清洗与治理: 负责多业务线(如交易、社区、广告)数据的接入、清洗、结构化处理,解决数据孤岛问题,制定数据质量标准。
ID-Mapping算法落地: 实施ID-Mapping策略(如基于设备ID、手机号、UnionID的强弱规则匹配),处理多源异构数据,确保OneID关联的准确率和覆盖率。
数据资产建设: 基于OneID建设用户标签体系、宽表及特征数据,为数据分析、推荐系统、CRM营销等场景提供高质量的数据资产。
性能优化: 负责数据链路性能优化,解决数据倾斜、数据延迟等问题,保障数据处理的稳定性和时效性。
任职要求:

硬性门槛: 本科及以上学历,计算机、统计或相关专业,具备扎实的SQL功底,熟悉Python/Java/Scala至少一种开发语言。
经验要求: 3年以上数据开发经验,至少有1个完整的OneID或用户画像项目落地经验,熟悉ID-Mapping的全流程技术细节。
技术栈: 熟悉大数据生态圈(Hadoop/Hive/Spark/Flink),有实时计算(Flink/Spark Streaming)经验者优先。
数据治理思维: 深刻理解数据质量的重要性,能识别并处理数据噪音、重复数据、垃圾数据,有较强的数据敏感度。
业务理解力: 能站在业务视角思考数据治理的价值,理解OneID如何服务于用户增长和精细化运营。
加分项:

有电商、社交、金融风控领域数据治理经验。
熟悉图数据库(如Neo4j)或知识图谱技术。

工作地点

上海浦东新区江程企创中心

认证资质

营业执照信息

职位发布者

李先生/CEO

今日活跃
立即沟通
公司Logo上海名懿科技有限公司
名懿科技公司是一家以90后为主的业内新生代大数据AI科技公司,公司创始人和核心团队80%来自于阿里、网易、百度等互联网大厂。公司核心产品集中在以大模型为主的企业AI智能体定制,视觉AI产品、AI标注平台,数字营销平台,公司的宗旨打造业内一流的数字化信息化平台
公司主页