多维度多角度的自动化大模型测试系统及方法
知识产权简介
如今,大模型的评测仍具有挑战。人工评测成本高昂,而自动化评测缺乏准确度。本专利基于自动化评测的特点,设计了多种评测角度,并把实际使用的评测维度安装不同角度进行评测,多角度的评测不仅拓宽了模型评测的应用场景,同时也能实现评测结果的多重验证,以提高准确度。此外,基于此类评测方法,提出对应的数据构建方法,与自动化评测模型的训练和应用方法。
如今,大模型的评测仍具有挑战。人工评测成本高昂,而自动化评测缺乏准确度。本专利基于自动化评测的特点,设计了多种评测角度,并把实际使用的评测维度安装不同角度进行评测,多角度的评测不仅拓宽了模型评测的应用场景,同时也能实现评测结果的多重验证,以提高准确度。此外,基于此类评测方法,提出对应的数据构建方法,与自动化评测模型的训练和应用方法。