指令跟随大比拼：Meta 发布多轮多语言基准 Multi-IF，覆盖 8 种语言

快讯零壹财经零壹财经 2024-11-25 阅读：1521

关键词：Meta 大模型 人工智能

Meta 全新发布的基准 Multi-IF 涵盖八种语言、4501 个三轮对话任务，全面揭示了当前 LLM 在复杂多轮、多语言场景中的挑战。所有模型在多轮对话中表现显著衰减，表现最佳的 o1-preview 模型在三轮对话的准确率从 87.7% 下降到 70.7%；在非拉丁文字语言上，所有模型的表现显著弱于英语。（IT之家）

上一篇>特朗普媒体和科技公司注册“TruthFi”为商标，拟推出加密支付服务

下一篇>谷歌重磅发力AI Agent ，商用大爆发