Все публикации
1 мин чтения
Исследования20 октября 2026 г.

Условная теорема без волос для трансформеров: Как языковые модели забывают свой промпт

arXiv:2610.24133v1 Тип объявления: new Аннотация: Мы спрашиваем, насколько авторегрессионный трансформер сохраняет свой промпт после генерации $t$ токенов. Рассмотрим два разных промпта, за которыми следует один и тот же текст продолжения, так что любая разница в их скрытых состояниях исходит из...

Shuyang Xiang·arXiv — cs.AI
Первоисточник
Ключевые инсайты
  • 01.arXiv:2610.24133v1 Тип объявления: new Аннотация: Мы спрашиваем, насколько авторегрессионный трансформер сохраняет свой промпт после генерации $t$ токенов
  • 02.Рассмотрим два разных промпта, за которыми следует один и тот же текст продолжения, так что любая разница в их скрытых состояниях исходит из...

Материал представлен в формате расширенного аналитического дайджеста.

Читать полную версию в первоисточнике
Материал агрегирован в рамках национального инфопотока AI Qazaqstan с сохранением ссылки на автора.

Связанные материалы

Все материалы →
Исследования1 мин

Anthropic открывает свои бухгалтерские балансы для Уолл-стрит, показывая рекордные доходы и растущие обязательства

Anthropic — первая крупная лаборатория искусственного интеллекта, подавшая заявку S-1 в SEC и планирующая разместить свою компанию на Nasdaq под тикером «ANT». Цифры впечатляют: квартальный доход составляет $11,6 млрд, первая в истории операционная прибыль, а существующие клиенты тратят в девять раз больше по сравнению с прошлым годом.…

The Decoder