更新于 今天

数据开发(联通项目+五险一金+双休+年假)

1-1.1万
  • 广州海珠区
  • 3-5年
  • 大专
  • 全职
  • 招1人

雇员点评标签

  • 工作环境好
  • 同事很nice
  • 人际关系好
  • 团队执行强
  • 氛围活跃
  • 免费班车
  • 管理人性化
  • 准时发工资

职位描述

数据治理ETL数据库开发JavaPythonSqlHadoopKafkaSpark
现有技术栈:hadoop、hive、spark、dolphinscheduler、dataX、fineBI、doris
实时技术栈:kafka、flink
【岗位内容】
1. 基于集团及自研大数据平台,运用 Hadoop、Hive、Spark、Doris 等技术栈,参与内部业务系统数据的全链路 ETL/ELT 实施,通过 DataX 实现跨源数据高效同步,确保数据接入的准确性与时效性,构建标准化数据接入体系。
2. 参与数据仓库 / 数据湖的分层建模,运用维度建模等方法论完成数据模型构建,明确各层级数据边界与流转规则,支撑数据基础层的稳定性与扩展性,为上层应用提供可靠数据底座。
3. 基于 Python、Linux、Shell 技术栈,开发离线批处理与准实时流处理任务,优化数据处理链路的资源占用与执行效率;负责 Hadoop、Spark 等核心组件的日常运维与性能调优,保障集群稳定运行。
4. 作为技术与业务衔接枢纽,与业务团队、分析师及应用开发团队深度协作,基于 Fine
BI 等工具输出数据服务,支撑运营分析、可视化报表及 AI/ML 场景的数据需求。
5. 参与制定技术规范与操作手册,完成数据任务的监控告警体系搭建及日常运维,输出标准化技术文档。
【岗位要求】
1. 3 年以上数据开发领域相关工作经验,具备大型数据平台建设实践经历。
2. 熟悉 SQL 优化原理,能独立编写复杂业务 SQL 并完成性能调优;熟练掌握MySQL、PostgreSQL、Oracle 等关系型数据库的架构设计与运维。
3. 熟练运用 Python(或 Java/Scala)进行数据处理脚本开发,具备千万级以上数据
量的处理经验。
4. 具备扎实的数据仓库理论基础,深入理解星型 / 雪花模型等维度建模方法,有参与企业级数据仓库分层设计的实际项目经验。
5. 熟练掌握 Hadoop、Hive、Spark、Doris 等大数据组件的原理与应用,能独立完成基于上述组件的离线计算任务开发;精通 DataX 数据同步机制,熟悉 Linux、Shell环境下的批处理脚本开发。
6. 具备数据治理全流程实践经验(含数据标准、质量、安全等模块),拥有良好的数
据敏感度与问题洞察能力。
7. 具备强业务理解力与跨团队沟通能力,能快速转化业务需求为技术方案。

工作地点

海珠区广州国际生物岛标准产业单元一期-办公区1

认证资质

营业执照信息

职位发布者

曾颖/高级招聘顾问

昨日活跃
立即沟通
公司Logo软通动力信息技术(集团)股份有限公司公司标签
软通动力信息技术(集团)股份有限公司(以下简称“软通动力”)是中国领先的全栈智能化产品与服务提供商,2005年成立于北京,始终坚持创新,致力于成为一家具有全球影响力的科技企业。公司提供软件与数字技术服务、计算产品与智能电子、数字能源与智算服务以及国际化服务,员工90000人。目前,公司在10余个重要行业服务超过2600家国内外客户,其中超过230家客户为世界500强或中国500强企业。公司位列2024年中国 IT服务市场第一,入选2025年财富中国 500强企业,位列429。软通动力拥有软通咨询、软通金科、软通国际、软通工业互联、软通华方、机械革命、恒悦等业务子品牌,北京、江苏两大智能制造基地,布局北美、日韩、亚太、中东四大区域市场,在全球60余个城市构建完善的全球业务网络。公司锚定AI前沿,以人工智能工程能力为基础,科学智能(AI for Science)为引领,布局智能制造、ICT软硬基础能力和具身智能等领域,打造新产业链闭环,为客户提供场景智能(AIAgent)、终端智能(AI Terminal)、计算智能(AIInfra)的全栈智能服务。软通动力设立30个能力中心,拥有1个国家级工程实验室,6个省市政府认定的工程、技术实验室及研发中心,1个博士后科研工作站,依托全球软硬生态协同创新体系,不断探索前沿技术应用潜力。公司旗下教育品牌软通教育,拥有一家全日制本科学院——郑州西亚斯学院数字技术产业学院;全国合作院校700多所,设有70多个校企联合人才培养基地,通过校企合作、协同育人,为社会培养高素质应用型人才。软通动力先后荣获“2024新经济企业500强”、“2024年中国软件和信息技术服务竞争力百强企业”、“中国软件产业40年贡献企业”、“2024年信创领军企业”、“省级科技进步奖”,入选沪深300、中证A500、创业板50等核心指数,深交所信息披露最高“A”级评价,连续三年获得Wind ESG评级AA级等权威认可;拥有专利380+项、全球软件工程领域最高级别CMMI V2.0成熟度5级评估认证、信息系统建设和服务能力最高等级——杰出级(CS5)、信息技术服务标准(ITSS)运维能力成熟度一级认证等专业资质,支撑公司更优质的服务体系。
公司主页