Как мы нормализовали миллионы записей номенклатуры на 8 ядрах с точностью 98%

Нормализация справочников номенклатуры — головная боль для многих: миллионы записей, дубли, опечатки, разные форматы. Автор поделился решением, которое позволяет справляться с этим на обычном сервере с 8 ядрами и 16 ГБ оперативной памяти, достигая точности 98%.

Секрет — не в суперкомпьютере, а в грамотном ограничении: вместо «золотой рыбки» они посадили ИИ в «лампу», то есть настроили модель работать эффективно в рамках доступных ресурсов. Подробности и практические наработки — в статье.