首页 > 快讯

科大讯飞公布大模型评估专利 可提高评估准确性

快讯 零壹财经 零壹财经 2025-06-06 阅读:2021

关键词:科大讯飞大模型


6月6日讯,科大讯飞股份有限公司申请的“大模型评估方法、装置、设备、系统及程序产品”专利公布。
摘要显示,该方法通过获取通过目标大模型问答所得的对话数据;然后基于问答对话之间的跟随关系依次对问答对话进行指令抽取得到对话指令,并对对话指令进行打分得到第一得分;并提取问答对话对应的答案信息,并将答案信息与前序答案信息进行比对得到第二得分;且对答案信息进行回复质量评价,以得到第三得分;进而结合第一得分、第二得分以及第三得分得到目标得分,以通过目标得分对目标大模型进行评估。从而实现多维度的评估过程,由于针对多轮次对话的特点进行多维度的指标配置,实现了自动化评估,可以大幅降低人工的参与度,减少因个人主观看法造成的偏差,提高大模型评估的准确性。(金融界)

上一篇>IDC发布2025基础大模型报告:文心大模型综合能力第一

下一篇>小红书开源首个大模型,11万亿非合成训练数据



相关文章


用户评论

游客

自律公约

所有评论

主编精选

more

专题推荐

more

第四届中国零售金融发展峰会(共15篇)


资讯排行

  • 48h
  • 7天



耗时 224ms