苹果研究评估LLM翻译质量标注能力
热点事件历史事件
苹果研究评估LLM翻译质量标注能力
1 篇报道1 个报道来源4 天前更新
先了解这件事
AI 综述
苹果机器学习研究团队发表论文,评估大语言模型在机器翻译质量标注任务上的表现,方法是比较模型与人类标注者在两种主流评估方案下的一致性:多维质量指标(MQM)和错误跨度标注(ESA)。测试覆盖70个语言对的长上下文测试集,以及WMT23、WMT25公开数据。 论文称,人类与模型在质量标注上都面临挑战。研究未给出LLM可替代人类标注者的结论。
AI 根据报道生成 · 2 天前更新
最新进展10月12日 08:00
大语言模型用于机器翻译质量标注:人类与模型都面临挑战报道时间线
沿着报道,了解事件的不同侧面。
10月12日
- Apple Machine Learning Research大语言模型用于机器翻译质量标注:人类与模型都面临挑战
研究评估了 LLM 在 MQM 和 ESA 两种机器翻译质量评估方案下与人类标注者的一致性,覆盖 70 个语言对的长上下文测试集及 WMT23、WMT25 公开数据。