跳到正文
UK AI Security Institute·原文发布· 20 小时前AI 评分56

AISI 研究开源权重生物模型的预训练数据过滤效果

Pretraining data filtering in open-weight biological models

AI 导读

UK AI Security Institute 的 Chem-Bio 团队从零预训练 8M 到 3B 参数的 ESM-2 蛋白质语言模型,测试剔除病毒蛋白序列的数据过滤效果。

本站提供 AI 导读,完整报道请前往来源网站阅读。

阅读原文 UK AI Security Institute · aisi.gov.uk