更新于 9月11日

大数据开发工程师

1.3-2万
  • 广州白云区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

数据治理数据建模数据仓库SqlJavaShellHadoopFlinkSpark
岗位职责​
ETL 架构设计与优化:负责搭建高可用、高性能的 ETL 数据处理 pipeline,主导数据抽取、清洗、转换及加载全流程设计,针对海量异构数据源(如日志、业务数据库、第三方 API 等)制定标准化处理方案,持续优化数据处理效率与准确性,解决数据一致性、冗余及延迟等核心问题。​
数据建模与数仓建设:基于业务场景构建企业级数据模型(含概念模型、逻辑模型、物理模型),设计分层数据架构(ODS、DWD、DWS、ADS),制定数据字典与元数据管理规范,支撑业务指标体系落地,确保数据资产的可复用性与扩展性,提升数仓对复杂业务分析的响应能力。​
数仓分析与指标体系搭建:深度理解业务需求,将业务问题转化为数据指标,通过多维度分析挖掘数据价值,构建动态更新的业务分析模型,为运营决策、产品优化提供数据支持,推动数据驱动的业务迭代。​
实时计算平台构建:负责实时数据处理框架(如 Flink、Spark Streaming)的选型与部署,设计低延迟的数据处理链路,支撑实时监控、实时推荐、实时风控等场景,解决流批数据一致性、状态管理、资源调度等技术难题。​
任职要求​
学历与工作经验:本科及以上学历,计算机、大数据、统计学等相关专业,5 年以上大数据开发经验,至少 3 年以上大规模数据仓库或实时计算平台搭建经验。​
ETL 与数据处理能力:精通 ETL 工具(如 DataX、Sqoop、Flume)及自定义 ETL 脚本开发,熟悉各类数据源(MySQL、Oracle、MongoDB、HBase
等)的抽取与转换逻辑,具备复杂数据清洗与质量监控经验。​
数据建模与数仓技能:掌握星型模型、雪花模型等建模方法,熟悉数据分层设计原则,熟练使用
Hive、Spark SQL 等工具进行数据开发。​
实时计算技术储备:理解 Flink/Spark Streaming 的核心原理,熟悉 Checkpoint、State 管理等机制,具备高并发、低延迟实时数据处理系统的开发与调优经验,熟悉 Kafka 等消息中间件的使用。​
推荐系统经验优先:有推荐系统算法工程化经验者优先,熟悉特征工程、模型训练与部署流程,了解协同过滤、深度学习推荐模型等算法原理优先。​
综合能力要求:具备良好的逻辑思维能力与问题解决能力,拥有较强的沟通协作能力,和团队协作精神,能够与不同部门的人员有效沟通和合作,有较强的责任心和工作主动性,能够承担工作压力,按时完成项目任务。

工作地点

广州白云区同和惠光大厦

职位发布者

杨女士/HR

立即沟通
公司Logo广东子光轮胎连锁经营集团有限公司
一、子光集团介始子光集团始创于1991年,是一家以轮胎批发、轮胎生产、轮胎翻新、轮胎零售连锁经营、物流仓储运输、电子商务以及为大型车队提供进驻服务的多元化集团公司。自成立以来,子光集团秉承“诚信经营、客户至上;价值为本,人才第一”的经营理念,打造了业内知名的“子光”品牌。在电子商务行业,由集团投资及互联网团队搭建汽配电商始创公司结合子光传统业务进行了升级改造与枫车公司结合商业模式,在汽车后市场上进行重新整合运营,于提供有别于现有电商形态的汽配电商新模式,开创全新的商业领域!二、核心业务与产品 1、数字化SaaS系统为汽服门店提供智慧管理系统,涵盖客户管理、在线预约、工单处理、库存管理、财务分析等功能,帮助门店实现运营数字化。推出“枫车养车”APP及小程序,支持车主在线下单、查询服务进度、获取养车知识等,提升用户体验。 2、供应链服务搭建汽配供应链平台,整合优质厂商资源,为门店提供正品配件、油品、耗材等一站式采购服务,降低采购成本。支持智能选品、库存预警、快速配送,优化供应链效率。3、运营赋能与培训提供门店运营指导、营销活动策划、员工培训等服务,帮助传统门店提升管理水平和盈利能力。通过数据分析为门店提供精准客户画像和营销建议。4、行业资源整合连接保险公司、金融机构、主机厂等生态伙伴,拓展增值服务(如车险、金融分期等),增强门店竞争力。 5、市场定位与优势精准聚焦汽车后市场:深耕细分领域,深度理解行业痛点(如门店效率低、供应链分散等)。技术驱动:利用大数据、AI等技术优化服务流程,例如智能诊断、配件匹配算法等。规模覆盖:截至2023年,合作门店已超数万家,业务覆盖全国多个省份。行业认可:曾获“中国汽车后市场最具影响力品牌”“年度创新企业”等荣誉。三、企业发展愿景子光枫车以“让汽车服务更高效、更透明”为使命,旨在通过数字化工具和生态协同,推动行业标准化、规范化发展,助力中小型汽服企业转型升级,同时为车主提供更便捷、可信赖的服务体验。集团重视每位员工的专业和综合素质的培养,给予每位有激情有梦想的团队成员充分发展的空间,同时为求职者提供具有竞争力的薪资和各种福利待遇,欢迎各位有志之士加盟。子光辉煌的过去,您来不及参与,子光美好的未来,诚邀您共同创造!四、福利待遇及其他我们将为您提供有竞争力薪酬待遇、完善的福利机制:1、周末双休,工作时间:周一至周五9:00-18:00,中间休息1小时; 2、社会保险:按国家的相关规定执行,入职当月为员工按月缴纳社会保险; 3、住房公积金:根据国家有关部门规定及员工个人实际情况,为员工按月缴纳住房公积金; 4、商业保险:根据岗位性质为每一位员工购买商业意外险; 5、公司提供餐费补贴,话务补贴,高温补贴; 6、员工体检:关心员工身体健康,每年组织员工体检; 7、年度旅游:公司每年为全体员工提供至少一次户外旅游或拓展活动; 8、节日津贴:按公司规定,为全体员工发放节日津贴,如端午、中秋等; 9、带薪年假:按照国家规定为符合条件的员工提供各类带薪年休假; 10、有完善的培训体系和选拔、晋升机制,注重员工的全面发展,给员工提供展现自我能力的平台和渠道等。
公司主页