Препринт на arXiv: порядок слоёв в Qwen, Llama и Gemma задаёт измеримую траекторию вывода
Исследования внутреннего устройства больших языковых моделей обычно ищут функции в параметрах, головах внимания или отдельных нейронах, но эти части не объясняют, как разворачивается один конкретный вывод. Авторы препринта на arXiv предлагают другой объект: упорядоченную траекторию состояний слоёв внутри одного прохода модели. Они проверяют, задаёт ли порядок слоёв измеримое вычисление.
Главный результат: на репрезентативных чекпойнтах Qwen, Llama и Gemma реальный порядок слоёв давал пути, которые в 1,60-2,24 раза сильнее выровнены со своей хордой между начальной и конечной точками, чем при перемешиваниях слоёв, сохраняющих те же концы. Диапазон дан по чекпойнтам; значения для отдельных моделей в аннотации не приводятся.
Эффект перенёсся на лексическую задачу, но оказался сильнее в трёх случайных инициализациях той же архитектуры Qwen (то есть у необученных моделей). Авторы читают это так: порядок слоёв отражает каркас, совместимый с архитектурой, а не закономерность, специфичную для конкретного обучения.
Далее авторы сообщают, что прямые скрытые состояния дали более сильные координаты механизма, чем считывание через словарь, а координата, заданная самой задачей, сделала конкуренцию кандидатов вычислимой. Аддитивные вмешательства (простое добавление к состояниям) не сработали. Зато «локальные актуаторы переходов» избирательно управляли внутренними траекториями на разных чекпойнтах.
С добавлением порога уверенности (confidence gate) такое вмешательство сдвинуло 17 из 87 отложенных траекторий Qwen типа closure (термин в аннотации не раскрыт) через границу кандидата top-1 по всему словарю. При этом все 203 остальных top-1 выхода, не относящихся к closure, остались без изменений. Перераспределение действий с учётом безопасности дало схожий результат, и авторы заключают, что выигрыш даёт избирательное срабатывание и ограниченное семейство актуаторов, а не тонкая подстройка дозы.
Авторы сами очерчивают границы: порядок слоёв делает процесс вывода трансформера наблюдаемым, вычислимым и влияющим на поведение, но полной теории динамики LLM или контроля над правильностью ответов это не даёт.
Ключевые факты
- Реальный порядок слоёв в чекпойнтах Qwen, Llama и Gemma давал траектории, в 1,60-2,24 раза более выровненные со своей хордой, чем перемешивания с теми же концами.
- Эффект порядка был сильнее в трёх случайных инициализациях архитектуры Qwen; авторы трактуют это как архитектурный каркас, а не закон конкретного обучения.
- Аддитивные вмешательства не сработали, а локальные актуаторы переходов избирательно управляли внутренними траекториями.
- Порог уверенности сдвинул 17 из 87 отложенных closure-траекторий Qwen через границу top-1 кандидата, оставив неизменными все 203 прочих top-1 выхода.
- Авторы подчёркивают: полной теории динамики LLM и контроля правильности ответов работа не даёт.
Почему это важно
Работа предлагает смотреть на вывод трансформера не как на набор отдельных компонентов, а как на траекторию через слои, и показывает, что порядок слоёв влияет на измеримую характеристику этой траектории. Эффект проверен на трёх семействах моделей (Qwen, Llama, Gemma), а усиление в случайных инициализациях указывает, по мнению авторов, на свойство самой архитектуры.
Кому это важно
Прежде всего исследователям интерпретируемости и механистического анализа языковых моделей, которым нужны альтернативы поиску функций в отдельных нейронах и головах внимания. Прикладной пользы, внедрения или выгоды для безопасности в аннотации не заявлено.
Как это применить
Напрямую применить результат нечем: перед нами аннотация препринта, а не инструмент или метод для разработчиков. Исследователь может взять идею рассматривать порядок слоёв как траекторию и сравнивать его с перемешиваниями при тех же концах. Детали метода и данные в аннотации не раскрыты.
Можно ли доверять
Это препринт на arXiv; в тексте аннотации нет указания на рецензирование, а авторы и организации в ней не названы. Все выводы принадлежат авторам. Эксперимент с порогом уверенности описан только для Qwen: для Llama и Gemma такого результата в аннотации нет. Размеры моделей и точные чекпойнты не указаны, независимой проверки пока нет.
Риски и подводные камни
Эффект управления скромен: 17 из 87 траекторий, причём авторы прямо оговаривают, что не контролируют правильность ответов, и не сообщают, что сдвинутые выходы стали верными. Диапазон 1,60-2,24 раза дан без разбивки по моделям. Понятия closure-траекторий и лексической задачи в аннотации не определены, поэтому масштаб применимости результата оценить трудно.
«Порядок слоёв делает процесс вывода трансформера наблюдаемым, вычислимым и влияющим на поведение, не создавая при этом полной теории динамики LLM и не позволяя управлять правильностью ответов.»
— из аннотации препринта arXiv:2610.26866