Никаких выдумок: чат, который отвечает только цитатами из готового корпуса
Идея не нова, но доведена до жёсткой схемы: у LLM два раздражающих свойства — дороговизна каждого запроса и способность уверенно сочинять небылицы. Автор решил убрать генерацию как класс: корпус лежит на диске файлами, кандидатов ищет обычный код, а нейросеть выступает только в роли судьи.
Судья — это классификатор с типизированными примитивами: «выбери один из вариантов», «это правда?», «оцени по шкале». Текст он не пишет вообще. Ответом становится дословная цитата с указанием источника — фразы, которой нет в корпусе, система не выдаст в принципе.
В заголовке упомянуты 43 гипотезы и четыре ошибки замера — видимо, это цена, которую пришлось заплатить, чтобы отладить подход. Главное же — «честная стена»: система не притворяется, что знает то, чего нет в её базе.