Back to Home
RadarAI··Papers & Tech

Meta 等提出 Context Language Models,模型自管上下文

中文摘要

Meta提出CLMs,将上下文视为可编辑文件,无需训练即可实现零样本使用,且在准确率与效率上均优于现有模型。

English Summary

Meta's Context Language Models (CLMs) treat context as editable files for zero-shot use, outperforming SOTA in accuracy and efficiency without additional training.

Original Excerpt

Meta 及合作者提出 Context Language Models(CLMs),把实时上下文当作模型可自由编辑的文件,无需训练即可零样本使用。在 BrowseComp-Plus 上比 SOTA 上下文管理策略准确率高 11.4%、FLOPs 少 21.5%;12 小时 EdgeBench 上分数高 5%、FLOPs 少 59%。