norgitov/ trends
Технологии · люди · идеи
RSS
RUEN
К обзору/arXiv1 час назад
ИсследованияarXiv

TreeSpark: Калиброванные, адаптивные по нагрузке деревья-драфты для полуавторегрессивного спекулятивного декодирования

TreeSpark — метод для спекулятивного декодирования в языковых моделях, использующий калиброванные и адаптивные по нагрузке деревья-драфты для повышения эффективности. Он использует родительскую условную распределение из марковского головного модуля драфтера для оценки принятия ребер и динамически регулирует размер дерева в зависимости от нагрузки на декодирование и требований к раунду.

Открыть первоисточник
СИГНАЛ ИЗ ИСТОЧНИКА
22
сентябрь 2026 г.
Наблюдаем с22 сентября 2026 г.
Темп интереса—Нужны повторные замеры
Обсуждение—Источник не передаёт комментарии
Опубликовано22 сентября 2026 г.Huapeng Zhou, Huayu Wang, Xinyu Wang
ЗА ЦИФРАМИ

Как меняется интерес

arXiv

Здесь важнее сама публикация

Этот официальный источник не публикует счётчик популярности. Материал обновляется по его RSS.

Только реальные замеры. История до подключения источника не восстанавливается.

ЗАЧЕМ ОБРАТИТЬ ВНИМАНИЕ

TreeSpark может повысить эффективность декодирования за счёт динамического регулирования размера дерева-драфта в зависимости от нагрузки и требований к декодированию, что может привести к более быстрому времени вывода.

Полезная находка?
ПРОДОЛЖИ ИССЛЕДОВАНИЕ

Рядом по теме

Вся тема
Daily Papers

ActionPiece: Пересмотр токенизации действий для авторегрессивных моделей визуально-языково-действий

В статье представлена ActionPiece — метод для авторегрессивных моделей визуально-языково-действий, который улучшает токенизацию действий за счет сохранения физических отношений действий с помощью совместного надзора за обучением представлений и квантацией. Используется физическая согласованность рангов (PRC) для оценки того, насколько токенизация сохраняет локальные ранги расстояний после восстановления, и показаны улучшения в успехе политики на нескольких тестах.

6 дней назадDaily Papers

Может ли MiniMax-H3 рассуждать о физическом мире? Оценка мультимодельной генеративной модели

В этой статье оценивается способность мультимодельной генеративной модели MiniMax-H3 рассуждать о физическом мире. Исследование представляет новую систему оценки физического рассуждения через четыре измерения, используя задачи, требующие интеграции информации по нескольким модальностям. Модель показывает общую успешность 41,97% по 517 экземплярам оценки, при этом рассуждение на основе видео работает лучше всего, а на основе аудио хуже всего.

6 дней назадDaily Papers

IntBMoE: Интеграция блоковой условной композиции экспертов для полного участия в смеси экспертов

IntBMoE представляет блок-условную архитектуру Mixture-of-Experts (MoE), которая разделяет участие, выполнение и материализацию, объединяя плотную композицию экспертов с разреженным выполнением блоков. Используется обученная кодовая книга для блоков и гиперсеть для объединения экспертов, обеспечивая полное участие при низких затратах на выполнение и память. Эксперименты показывают улучшения в классификации изображений, языковом моделировании и последовательном рекомендовании, с реальным внедрением в системе рекомендаций AMap.

4 дня назадDaily Papers

Самоэволюционирующийся поисковый индекс

В статье представлено SELF-INDEX, фреймворк, позволяющий индексу самовосстанавливаться без участия человека, диагностируя проблемы поиска, изменяя ключи индекса и проверяя изменения. Он также использует симулятор запросов для активного поиска новых требований к поиску, улучшая производительность в различных корпусах и приложениях.

5 дней назадDaily Papers

ScienceIDE: Превращение мирового научного кода в среды, обучаемые агентами

В статье представлен ScienceIDE, фреймворк, преобразующий научные репозитории кода в программируемые среды для обучения научных агентов. Эти среды позволяют генерировать задачи, их выполнение и верификацию, поддерживая сверточную настройку и усиление обучения. Подход показывает улучшения в восстановлении научного кода и общих задач.

6 дней назадDaily Papers

Пересмотр обучения критика в PPO: понимание и смягчение плоскостности значений

В статье выявлено явление под названием Value Flattening в критиках Proximal Policy Optimization (PPO), когда оцененные значения состояний резко меняются, в то время как прогнозы критика остаются плоскими. Предложена методика SP^3O, которая применяет функцию потерь значения только к нескольким состояниям на ответ, демонстрируя улучшения в обучении политики.

6 дней назад