Производительность, эффективность и коллапс: преимущества и вызовы офлайн-пост-обучения кодовых LLM

Исследование изучает возможность выполнения пост-обучения с подкреплением (RL) для кодогенерирующих больших языковых моделей (LLM) полностью в офлайн-режиме с использованием существующих наборов данных, демонстрируя значительное улучшение нулевого выстрела в генерации кода с минимальным временем обучения и для различных размеров моделей.