Выборка раскрывает стиль: несупервизируемое, безобучное обнаружение стилистических осей, зависимых от подсказок, в активациях LLM

В этой статье представлена методика без обучения для выявления стилистических осей в активациях LLM, основанная на выборке завершений при высокой температуре и применении PCA. Метод идентифицирует значимые стилистические измерения без надзора, проверенный аннотациями людей, демонстрируя хорошие результаты на определенных моделях.