大模型数据清洗

岗位职责：
开展数据预处理工作，对原始数据进行清洗、去重、格式转换、特征提取等操作，优化数据质量，为模型训练提供高质量的数据支撑；
负责AI相关数据的标注工作，包括但不限于文本、图像、语音等类型数据，确保标注数据的准确性、完整性和规范性。
基于现有大模型，结合业务需求进行模型微调，调试模型参数，优化模型性能，提升模型在特定场景下的适配度和效果；
负责模型的部署工作，配合相关团队完成模型的环境搭建、部署调试、版本更新和日常维护，确保模型稳定运行；
任职要求：
技能要求：熟练掌握Python编程语言，具备扎实的AI算法基础，了解常见的机器学习、深度学习算法原理及应用场景。
能力要求：具备数据标注、数据处理的相关经验，能熟练使用常用的数据处理工具；了解大模型微调的基本流程和方法，有模型微调及部署相关经验者优先。 大模型微调和PE 经验优先