该职位已失效,看看其他机会吧

数据工程师/数据开发

1.6-3万
  • 北京东城区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

数据建模数据仓库AI 相关数据支撑工作FlinkSparkhive
数据工程师(兼 AI 方向)
【岗位职责】
1.负责公司国内及跨境业务全链路数据体系的搭建与优化,涵盖数据采集、清洗、转换、存储及可视化等全流程工作,保障数据的准确性、完整性与时效性。
2.设计并优化数据模型与数据仓库架构,结合业务需求构建 ODS、DWD、DWS、ADS 分层数据体系,支撑业务分析、决策及 AI 模型训练的数据需求;负责数据 ETL 脚本的开发、调度与维护,优化数据处理效率,解决数据传输、转换过程中的性能瓶颈,保障数据链路稳定运行。
3.主导 AI 相关数据支撑工作,包括AI 模型训练数据的采集、标注、预处理与特征工程,构建高质量的 AI 训练数据集,适配编码转换、数据补全、自动编程等 AI 模块的开发需求。
4.负责数据安全与合规管理,建立数据访问权限管控机制,保障公司数据资产安全;与业务、后端、前端及海外技术团队协同,理解业务数据需求,提供数据支持与分析服务,编写数据字典、ETL 手册、数据接口说明等技术文档。
【专业能力】
1.精通 MySQL、Oracle 等关系型数据库与 Redis、MongoDB、HBase
等非关系型数据库的应用,具备扎实的数据建模与优化能力。
2.精通 Spark、Flink、Hive 等大数据框架与中间件工具,具备大数据量场景下的数据处理、分析与优化经验,能够搭建高效的大数据处理链路。
3.熟悉数据仓库设计理论与方法论,具备数据仓库搭建、分层设计及迭代优化经验,可结合业务需求构建合理的数据体系。
4.熟悉 Tableau、PowerBI等数据可视化工具,能够将复杂数据转化为清晰易懂的可视化报表,支撑业务决策。
5.具备扎实的 AI 相关基础,熟悉机器学习、深度学习基本原理,掌握 TensorFlow、PyTorch 等至少一种 AI 框架,可独立完成数据预处理、特征工程及简单 AI 模型的训练与调优。
【任职要求】
1.本科及以上学历,计算机科学与技术、软件工程、数据科学、统计学等相关专业,具备良好的职业素养与团队协作精神。
2.具备 3-5 年及以上数据工程师相关工作经验,有跨境业务数据处理、AI 相关数据支撑经验者优先;可独立承担数据体系搭建与 AI 数据服务相关工作。
3.具备清晰的逻辑思维与良好的沟通表达能力,能够准确理解业务数据需求,高效配合跨团队完成数据支撑与 AI 项目协同工作。
4.具备强烈的责任心、学习能力与创新意识,主动关注数据工程与 AI 领域前沿技术,乐于探索新技术在业务中的应用。
【加分项】
1.具备德语或英语沟通能力,可阅读基础英文 / 德文技术文档并开展简单技术交流者优先。
2.拥有 AI 数据项目开发经验,参与过 AI 模型设计和调优类工作。
查看全部

工作地点

北京东城区新世界太华公寓-1座

职位发布者

焦女士/行政人事总监

立即沟通
公司Logo北京中大门大数据科技有限公司
北京中大门大数据科技有限公司是中大门国际物流集团(CGL)旗下聚焦跨境数字化领域的核心子公司。公司以“技术赋能跨境贸易,数据驱动金融创新”为核心定位,致力于构建集跨境联网系统研发、大数据服务、数字金融配套于一体的综合服务能力,矢志成为国内跨境大数据服务与数字金融领域的标杆企业。中大门国际物流集团(China Gate Logistics Group,简称 CGL),是国内领先的跨境电商国际物流供应链集成服务商。集团以创新与服务为双轮驱动,深耕全球市场布局,依托“1+4”发展模式,立足“数字丝绸之路产业服务平台”,打造覆盖物流、商贸、金融、数字贸易的全产业链生态体系。为满足公司跨境数字化业务高速发展需求,强化技术研发与产品落地能力,现面向社会广纳贤才,诚邀有志之士加入,共筑跨境数字生态新蓝图!
公司主页