AI2 推出 StateBench 基准,测语言模型在长文档中的状态追踪能力
AI2 发布 StateBench 基准,按四个难度级别评测语言模型在长文档中追踪实体状态变化的能力。
AI2 发布 StateBench 基准,按四个难度级别评测语言模型在长文档中追踪实体状态变化的能力。
Hugging Face 推出 Palette,一个经 LoRA 微调的 20B 开源权重模型,按 IBM Design Language 训练,学习“设计师+程序员”分工方式生成幻灯片,在 PresentBench 三个领域中的两个排名第一。
Collinear AI 推出 CWE-bench v2,公开 100 个网络安全任务,覆盖 91 种不同 CWE,评测完全程序化、结果可复现,任务均经人工审核。