跳到正文
热点事件历史事件

苹果研究评估LLM翻译质量标注能力

1 篇报道1 个报道来源4 天前更新

先了解这件事

AI 综述

苹果机器学习研究团队发表论文,评估大语言模型在机器翻译质量标注任务上的表现,方法是比较模型与人类标注者在两种主流评估方案下的一致性:多维质量指标(MQM)和错误跨度标注(ESA)。测试覆盖70个语言对的长上下文测试集,以及WMT23、WMT25公开数据。 论文称,人类与模型在质量标注上都面临挑战。研究未给出LLM可替代人类标注者的结论。

AI 根据报道生成 · 2 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. Apple Machine Learning Research
    大语言模型用于机器翻译质量标注:人类与模型都面临挑战

    研究评估了 LLM 在 MQM 和 ESA 两种机器翻译质量评估方案下与人类标注者的一致性,覆盖 70 个语言对的长上下文测试集及 WMT23、WMT25 公开数据。