更新于 11月22日

大数据开发工程师(J11579)

1-1.4万
  • 南宁青秀区
  • 5-10年
  • 本科
  • 全职
  • 招1人

职位描述

HadoopSparkFlinkPythonShell数据库开发数据架构数据建模
岗位职责:
1、负责大数据平台(Hadoop,HBase,Spark、MPP等)集群环境的性能调优和日常维护;
2、负责数据架构设计和优化,数据的开发与维护,确保数据存储和处理的稳定和效率;
3、熟悉数据仓库建模、ETL设计开发,有数据质量与数据治理相关经验;
4、理解业务需求并提供相应的数据解决方案。
任职要求:
1、本科及以上学历,计算机科学、信息技术或相关领域专业;
2、至少5年以上大数据开发经验,并具备一定的运维经验;
3、熟练掌握Linux操作系统,并熟悉Shell,Python等一种以上的脚本语言,并灵活运用到实际工作中及解决技术问题;
4、熟练使用SQL,熟练掌握数仓建模,掌握常用的数据建模方法,有实时Flink相关开发经验优先;
5、熟练掌握Hadoop、Spark、Hive、Doris、 Flink、 ZK、Kafka、Flume、DataX等一种以上的大数据处理工具和技术,有实际大数据处理经验;
6、掌握Flume、DataX或者Flink,Kafka,HDFS等技术,能够独立完成实时、离线数据接入工作优先;
7、有大数据项目管理经验者优先;
8、有RAG 知识库产品/项目业务落地和实际应用的经验者优先。
9、有良好的团队精神和沟通能力,积极主动、热爱技术并善于钻研,责任心强、能够承受一定工作压力。

工作地点

青秀区广西南宁市民族大道153号交通设计大厦

职位发布者

吴女士/HR

昨日活跃
立即沟通
公司Logo广西交通设计集团有限公司
广西交通设计集团有限公司(原广西壮族自治区交通规划勘察设计研究院)成立于1960年,拥有独立面积4万平米的办公大楼及占地70亩、建筑面积约12万平米的新建研发基地,位于广西首府南宁核心区域。被誉为中国西部交通勘察设计综合实力最强的企业之一、广西交通建设“先行者”,广西交通设计集团有限公司主要从事各等级公路、水运、市政工程、工业民用建筑的咨询、勘察设计、检测和科学研究等业务。广西交通设计集团现持有公路行业、水运行业、市政行业(排水、道路、桥梁)专业、工程勘察、测绘资格等国家甲级资质,以及公路工程施工、港口与航道工程施工、市政公用工程施工、建筑工程施工总承包、地基与基础工程专业、公路交通工程专业承包、公路养护工程全系列资质和国家对外承包工程经营权等。截止2021年12月底,公司在职员工 1176人(含子公司),其中中国公路学会“百名优秀工程师”1人,广西工程勘察设计大师 2人,教授级高级工程师 35人,高级以上专业技术资格人员 369人次,博士、硕士 550人,各类注册人员 356人次,各类专业技术人员 853余人。近年来,公司凭借雄厚的实力,开拓了老挝、重庆、郑州、贵州、成都、广州、安徽、新疆等国外及省外市场。先后完成高速公路3700多km,独立特大型公路和市政桥梁200多座。广西沿海1万吨至20万吨级沿海泊位20多个及内河港口码头30多个,国家重点水运工程桂平、贵港、那吉、鱼粱老口、长洲(全世界最大通航等级规模)等大型内河航电枢纽船闸10个及“一干七支”众多枢纽船闸设计工作。荣获国家、部(省)级科技成果奖、优秀勘察、设计200余项。
公司主页