Сжатие промптов для больших языковых моделей: тренировочный пайплайн без обучения, детерминированный с эмпирическим анализом Парето по одиннадцати категориям задач

В этой статье представлено обучение без учителя, детерминированный пайплайн для сжатия промптов больших языковых моделей с использованием классических методов лексико-грамматического НЛП. Оцениваются одиннадцать лексических преобразований по 1 242 английским промптам из шести источников, достигая до 40,3% сокращения токенов с минимальной потерей качества. Исследование анализирует баланс между сжатием и точностью по одиннадцати категориям задач, выявляя рассуждение о здравом смысле как проблемную область при агрессивном сжатии.