norgitov/ trends
Технологии · люди · идеи
К обзору/Daily Papers53 минуты назад

DecisionPivot: Диагностический тест для моделей решений в системах LLM

DecisionPivot — это диагностический тест, включающий 48 задач и 40 033 элемента по семи ролям принятия решений. Он содержит основной трек с 7 800 элементами из 13 сгенерированных задач и дополнительный трек с 32 233 элементами из 35 публичных тестов. Исследование оценило 40 моделей решений и 14 общих моделей, выявив значительные различия в точности принятия решений и надежности уверенности в предсказаниях.

Открыть первоисточник
СИГНАЛ ИЗ ИСТОЧНИКА
1
голосов источника
Наблюдаем с21 октября 2026 г.1 голосов источника
Темп интереса—Нужны повторные замеры
Опубликовано20 октября 2026 г.Xialie Zhuang, Mingcong Lei, Zunhai Su
ЗА ЦИФРАМИ

Как меняется интерес

История начинает расти

График появится после повторных замеров. Текущий показатель уже получен из источника.

1 голосов источника

Только реальные замеры. История до подключения источника не восстанавливается.

ЗАЧЕМ ОБРАТИТЬ ВНИМАНИЕ

DecisionPivot помогает выявлять тонкие ошибки в принятии решений, которые не видны при агрегированной оценке, позволяя лучше понять, как модели справляются с различными задачами.

Полезная находка?
ПРОДОЛЖИ ИССЛЕДОВАНИЕ

Рядом по теме

Вся тема