更新于 2月9日

大数据开发工程师

1-1.3万
  • 青岛市南区
  • 1-3年
  • 本科
  • 全职
  • 招1人

职位描述

SparkHadoop
岗位职责:
1、负责基于 Spark(Scala) 的核心数据处理模块开发,支撑全球企业多源数据的高效汇聚、清洗、标准化与融合;
2、设计并实现高可靠、高性能的数据计算任务,输出结果至 HDFS、HBase、Kafka、Elasticsearch 等存储系统;
3、参与数据质量监控、异常检测及性能调优,保障 TB 级数据 pipeline 的稳定运行;
4、编写清晰的技术文档,包括数据流程说明、接口规范及运维手册;
5、协同运维与数据团队,参与平台日常维护与问题排查。
任职要求:
1、本科及以上学历,计算机、软件工程、数学或相关专业,2年以上真实大数据开发经验;
2、精通 Scala 语言,具备扎实的函数式编程能力,1年以上 Spark(RDD/DF)实战经验;
3、熟悉 Hadoop 生态体系,深度使用过 HDFS、HBase、Elasticsearch 等技术;
4、具备TB级数据处理经验,能独立完成从数据接入、加工到输出的全链路开发;
5、熟悉数据建模、ETL 流程及常见数据质量问题的处理方法,对数据准确性与一致性有高度敏感性;
6、具备良好的沟通协作能力、责任心强,能主动推进任务闭环;
7、有全球多源企业数据汇聚、企业工商数据、商业情报类项目经验者优先。

工作地点

市南区青岛软件园4号楼

职位发布者

李女士/HRD

今日活跃
立即沟通
公司Logo青岛格兰德信用管理咨询有限公司
关于格兰德:一、坚持长期理念与全球化视野:格兰德成立于2006年,总部位于青岛,是全球领先的跨境信用数字服务商,中国同业首批获得央行企业征信备案资质,服务客户覆盖全球50个国家,已在10余个大中城市设立了分支机构。格兰德资深团队深耕行业19年,业务覆盖海外企业、国内小微进出口企业、国内大企业、政府、金融五大服务板块。提供大企业全流程信用管理服务、小微进出口企业全流程服务两大服务,覆盖全球征信网络和全球应收账款法律服务网络。二、累计获得各项资质荣誉110余项:【重点资质】首批获得央行颁发的企业征信牌照山东省信用服务机构(第一批)涉外调查许可证(国家统计局颁发)全国信用和认证信息公示平台信用评价机构国家高新技术企业ISO/IEC27001信息安全管理体系认证/ISO9001质量管理体系认证信息系统安全等级保护备案证明(三级)等【国家级重点荣誉】第五届“新华信用杯”全国优秀信用案例中国国际服务贸易交易会-全球服务实践示范案例中国新型智慧城市创新应用大赛-数字经济领域奖项等【省级重点荣誉】青岛市专精特新中小企业山东省大数据“三优两重”-重点数商&大数据解决方案山东省数据要素型示范企业(第一批)等三、数据要素示范性企业:格兰德聚焦大数据征信和企业信用管理服务,数据可覆盖230个国家和地区,数据互联136个国家,可提供6亿+全球企业数据,2亿+国内企业数据,中国企业服务类型涵盖60多个行业领域。四、践行国家战略:格兰德是数字中国建设、国家信用体系建设、“一带一路”、上合组织国家建设的数据要素参与者。五、平台福利:行业高薪,不设上限等你来谈;股份期权,实现个人财富自由;双休、五险一金、超5天带薪年假、各项法定假期,守护你的诗和远方;每周下午茶、丰富的主题文化活动,推崇全员快乐工作;工作氛围轻松,提供多元化岗位培训,期待优秀的你加入!咨询电话:0532-66773355企业官网:https://www.x315.cn公司地址(总部):青岛市宁夏路288号市南软件园4号楼(黄岛办事处):黄岛区武夷山路118号中南金石国际a座3003
公司主页