更新于 3月10日

大数据平台测试工程师

1.5-3万·14薪
  • 成都青羊区
  • 5-10年
  • 本科
  • 全职
  • 招1人

职位描述

功能测试性能测试自动化测试云计算/大数据互联网人工智能
一、岗位职责
1、设计并实施数据质量测试框架,构建覆盖完整性、准确性、一致性、及时性、唯一性的数据质量规则库,使用Great Expectations、Deequ等工具实现自动化数据验证;
2、开发数据测试自动化框架,集成到CI/CD流水线,实现数据管道变更后的自动化回归测试与数据影响面分析;
3、负责ETL/ELT数据管道的全流程测试,验证数据抽取、转换、加载过程中的数据血缘追踪与字段映射准确性,确保源系统到目标系统的数据零丢失与逻辑正确性;
4、执行数据仓库分层(ODS/DWD/DWS/ADS)的数据验证,编写复杂SQL脚本进行跨层数据核对、指标逻辑验证与报表数据交叉验证;
5、开展大数据组件的功能测试与性能测试,验证海量数据场景(PB级)下的计算正确性、处理延迟与吞吐量瓶颈。
二、能力要求
1、计算机、软件工程等相关专业本科及以上学历,5年以上数据相关测试经验,其中至少3年大数据平台(Hadoop生态)测试经验;
2、精通SQL,能够编写复杂的多表关联查询进行数据核对;掌握数据质量工具的使用与规则配置;
3、熟悉Hadoop、Spark、Flink、Kafka的技术原理,了解数据分区、并行计算、窗口函数等机制对数据结果的影响;具备HDFS、Hive、HBase等组件的基本操作与问题诊断能力;
4、精通Python、Java测试框架,具备自动化测试脚本开发能力,熟悉工作流调度工具的测试方法;掌握Git、Docker等DevOps基础工具;
5、掌握JMeter、Locust等性能测试工具,能够设计大数据并发读写场景的压力测试方案,识别数据倾斜、资源竞争导致的性能瓶颈;
6、优秀的沟通能力和团队协助能力。

工作地点

成都青羊区侠客岛里创意空间(星立方)3层308室

认证资质

营业执照信息

职位发布者

蒋先生/人事经理

昨日活跃
立即沟通
公司Logo北京天行探索科技有限公司
公司简介:北京天行探索科技有限公司,是一家专注于卫星互联网终端设备及信息服务系统软件研发与应用的科技创新型企业。公司瞄准影响卫星互联网产业发展的关键环节——卫星互联网应用服务,以交通、海洋、能源等行业应用需求为牵引,把握商业航天和卫星互联网产业发展机遇,融合应用大数据、人工智能等新一代信息技术、通过构建以智能化、高性能、高安全为特色的航天智能化信息服务平台底座,打造覆盖体制协议、芯片、模组、终端、APP软件全链条的通导遥融合终端产品体系,为用户提供基于天基信息资源的综合信息增值服务,打通以卫星互联网为核心的空天信息产业链最后一公里,服务大众及行业用户。公司创始团队由来自于中国星网、中国航天、华为等行业顶尖企业的资深领域专家组成,拥有超过15年的行业经验,在卫星通信、航天技术应用、通信系统研发等领域积累了深厚的专业知识和丰富的实践经验。团队成员曾参与多项国家级重大科研项目,掌握前沿的卫星通信体制协议、终端设备研发以及数据融合处理技术。凭借多年的技术积累和行业洞察,团队具备强大的技术创新能力和市场敏锐度,致力于将先进的卫星互联网技术应用于交通、海洋、能源等行业,推动卫星互联网产业发展。公司主要业务方向:一、卫星通信、导航、感知信息融合服务整合卫星通信网络、时空信息网络和天空地信息感知网络,融合应用大数据和人工智能技术,打造卫星互联网综合信息服务平台,为交通、海洋、能源等行业提供全面、精准的信息服务,为客户提供有价值的决策支持以及数据增值服务。二、多体制卫星互联网终端产品研发面向大众市场和行业市场需求,紧跟卫星互联网、6G等技术发展趋势,参与卫星通信体制协议研发,研制支持多种卫星系统的低成本卫星互联网终端设备以及芯片、模组等关键核心器件产品,打造卫星互联网终端产品体系。三、行业卫星互联网应用解决方案基于数据服务和终端产品,整合卫星互联网产业资源,为交通、海洋、能源等行业提供卫星互联网应用解决方案,支撑用户业务发展,为用户持续创造价值。公司愿景:用好中国卫星,让中国卫星好用!公司使命:打通以卫星互联网为核心的空天信息产业链最后一公里,为客户提供优质服务,为员工提供成长空间,为股东创造价值。业务目标:以交通、海洋、能源领域的海量需求为牵引,以卫星互联网综合信息服务平台为底座,以卫星通信、导航、感知融合数据处理算法为支撑,以覆盖体制协议、芯片、模组、终端、信息服务软件全链条的产品为核心,打通空天信息产业链最后一公里,持续为客户创造价值,服务国家战略。业务定位:一是研发高低轨融合、通导感融合的具有世界一流水平的卫星应用智能信息终端系列产品,成为世界一流的卫星互联网设备供应商;二是以天地融合信息服务平台为载体,形成兼具卫星通、导、感功能的融合信息服务,向行业、民商用户提供泛在感知、态势分析等数据增值服务,成为世界知名的卫星互联网信息服务商;三是以终端和数据为基础,深耕海洋、交通、能源领域,提供的融合信息服务解决方案,持续为客户创造价值,成为行业卫星互联网应用整体解决方案提供商。企业文化:务实高效,创新引领,合作共赢,信任平等
公司主页