更新于 3月19日

软件测试工程师

1.1-1.2万
  • 佛山顺德区
  • 3-5年
  • 大专
  • 全职
  • 招1人

职位描述

功能测试AI对话质量验证BAD CASE挖掘与分类AI模型评测
工作职责
1. 负责财经AI助手线上对话质量的抽样验证,聚焦模型幻觉、意图理解偏差、上下文丢失等AI特有问题,保障回答的准确性与逻辑一致性。
2. 从用户反馈、日志数据中挖掘典型Bad Case,按理解错误、合规风险等维度分类标注,建立结构化问题台账。
3. 配合算法团队完成新旧模型版本及Prompt调优方案的对比测试,通过预设用例集统计准确率、无效回复率等核心指标,验证优化效果。
4. 推动问题闭环管理,将Bad Case转化为可复现的问题描述反馈至技术团队,跟踪修复进度并执行回归验证。
5. 基于线上问题沉淀测试用例,持续丰富财经AI专项评测数据集,提升上线前测试覆盖度。
任职要求
1. 3年以上软件测试经验,熟悉测试流程与Bug生命周期管理,能独立完成接口测试与功能验证。
2. 深度使用过至少2款主流AI产品(如ChatGPT、文心一言等),理解AI幻觉、上下文处理等核心特性。
3. 具备敏锐的细节判断力,能快速识别AI回答的逻辑偏差与数据准确性问题。
4. 熟练使用Excel进行数据筛选、透视分析,可输出质量分析报告。
5. 加分项:有智能客服测试、AI模型评测或数据标注经验;具备财务/金融领域背景或兴趣;了解Python基础语法及RAG、Prompt工程等概念。

工作地点

佛山顺德区人才小镇15栋

认证资质

营业执照信息

职位发布者

聂欣/人事经理

今日活跃
立即沟通
公司Logo深圳华云信息系统科技股份有限公司
【公司概况】深圳华云信息系统有限公司成立于2007年5月,坐落在中国广东省深圳市南山区高新科技园国家创新创业中心国家工程实验室大楼,是国内金融科技领域领先的IT系统建设及提供全套解决方案的高科技企业,公司业务覆盖基于FPGA的极速交易产品、AI+大数据相关解决方案、 IT基础设施建设与服务等领域。华云信息拥有专业的软件产品设计和研发团队、优秀的市场销售团队、高效的业务交付团队,同时通过十多年的辛苦耕耘,积累了丰富的客户资源。华云信息专注于开发具有自主核心技术、知识产权的软件产品,致力于为客户构建从IT基础规划到方案落地再到业务创新的完整的价值链,帮助客户实施、管理和完善企业的信息系统,提供端到端的服务。面向未来,华云信息继续秉承“您所需,我所为”的服务理念,通过专业化的IT服务,推动技术向价值的转化,加快客户自身的变革转型,以己所长为我们的客户提升价值贡献一份力量。
公司主页