跳到正文
热点事件持续更新

Hugging Face发布StateBench评估长文档状态追踪能力

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

2026年11月4日,Hugging Face发布StateBench基准测试,旨在评估语言模型在长文档中追踪实体状态变化的能力。该基准包含四个难度等级,涵盖从不可变赋值到引用赋值等不同复杂度的状态更新操作。测试结果显示,尽管Gemini 3.8 Flash、Claude Opus 5.5和GPT-6 Sol等前沿模型在简单任务上表现良好,但在输入变长时仍会在更复杂的状态追踪任务中失效。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. Hugging Face Blog
    StateBench:测试语言模型在长文档中追踪状态变化的能力

    Hugging Face 发布 StateBench 基准测试,用于评估语言模型在长文档中追踪实体状态变化的能力。该基准包含四个难度等级,涵盖从不可变赋值到引用赋值等不同复杂度的状态更新操作。测试显示,尽管 Gemini 3.8 Flash、Claude Opus 5.5 和 GPT-6 Sol 等前沿模型在简单任务上表现良好,但在输入变长时仍会在更复杂的状态追踪任务中失效。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。