更新于 3月6日

数据开发工程师

1.1-1.3万
  • 长沙望城区
  • 5-10年
  • 大专
  • 全职
  • 招1人

雇员点评标签

  • 同事很nice
  • 工作环境好
  • 人际关系好
  • 准时发工资
  • 五险一金

职位描述

大数据开发
数据开发工程师
岗位职责:
1、精通数仓分层架构设计(ODS/DWD/DWS/ADS),构建企业级维度模型与事实模型,支撑业务主题分析。
2、开发高效、稳定的离线/实时数据管道,处理TB级数据量,满足SLA时效要求。
3、开发和优化Hive/Spark SQL/Flink脚本,并解决数据倾斜、资源浪费等问题,降低计算成本。
4、精通Doris/StarRocks等分析库特性,能够开发高效脚本;并能够运维Doris和StarRocks集群。
5、维护和扩展数仓调度系统(如DataWorks/DolphinScheduler),开发自动化监控工具,保障数据产出质量与时效。
6、对接业务/分析师团队,理解需求并提供数据解决方案(如数据指标、报表数据集等)。
任职要求:
1、5年以上数据开发经验,至少主导过1个完整数仓项目(分层设计→模型落地→业务交付)。
2、精通 Hive/Spark SQL/Flink/Doris/StarRocks 开发,熟悉调优技巧。
3、熟练使用 调度工具(DataWorks/DolphinScheduler等)。
4、掌握维度建模方法论,并理解数据分层设计原则。
5、熟练使用 Python/Java/Scala 至少一种,能开发UDF/脚本工具提升ETL效率。
6、掌握Linux基础命令及Shell脚本编写,具备问题排查能力(日志分析/资源监控)。

工作地点

长沙望城区澳优全球总部大楼

职位发布者

郑女士/猎头

昨日活跃
立即沟通
公司Logo武汉佰钧成技术有限责任公司公司标签
武汉佰钧成技术有限责任公司(以下简称“佰钧成”)正式成立于2006年6月,主要业务是面向欧美、日本以及国内市场的制造业、金融、电信、能源、IT及政府和公共服务行业提供 ITO、BPO服务。背靠武汉地区丰富的人才优势及良好的技术研发能力,佰钧成现已成为IBM、华为、Google、Alcatel-Lucent、NTT Data等近十家世界500强企业的核心供应商,并已与HP、CBS、Honeywell、亚信联创、南瑞等一大批知名企业结成了战略合作伙伴。佰钧成连续三年被评为“中国软件服务外包前20强”,于2009年通过ISO 9001认证,2010年通过ISO 27001认证,并于2004年通过CMML-3认证,计划于2012年通过CMMI-4体系评估。佰钧成被陆续评为技术先进型企业、国家高新技术企业、省重点服务外包企业。2011年11月,佰钧成收购原东南融通信息科技(苏州)有限公司,其正式成为佰钧成全资子公司,佰钧成作为华为全领域供应商,向全球客户提供高质量、专业化的软件外包服务。佰钧成现已有员工4500余人,其中技术员工占总数的87%。佰钧成已建成多个大型离岸外包中心(ODC),包括有华为移动互联软件开发ODC,华为电信ODC,CBS数据挖掘ODC,富士施乐远程开发中心,谷歌地图ODC及IBM MF技术开发ODC等。成熟的离岸外包服务模式,创建为客户提供高效率、低成本服务的交付平台。此外,佰钧成作为武汉服务外包协会(简称WSOA)的理事长单位,在协会内领导建立了完善的人才共享机制与人才培养模式,在帮助企业汇聚区域优势的同时,有效解决了单个企业成长中遇到的人才、市场、成本等问题,为带动武汉地区软件外包服务行业的整体发展水平起到了积极的推动作用!佰钧成,以“服务全球,交付信任”为价值理念,以不断创新为生命力,立足中部优势,不断优化资源配置,持续提升其在产业价值链的地位和作用,致力于成为全球卓越的软件外包服务商!
公司主页