Исследования
Как контекст переворачивает предсказания ИИ: скрытая структура генерации текста
Иногда по нескольким последним словам можно довольно точно угадать, что будет дальше. Но если показать предыдущие предложения или всю страницу, ожидания могут кардинально поменяться — и модель выдаст совсем другое продолжение.
Статья разбирает, как контекст формирует неочевидные паттерны в генерации текста и почему одно и то же начало может вести к разным финалам в зависимости от объёма доступной информации.
Источник: habr.com