Скрытая структура генерации текста ИИ: как контекст меняет продолжение
Исследование из Habr ML раскрывает, как даже небольшие изменения в контексте влияют на предсказания больших языковых моделей. Показаны механизмы «контекстного дрейфа» и их практические последствия.