209 тысяч товаров, 150 представительств и 1% совпадений: как LLM решила задачу, неподвластную обычному join

209 тысяч наименований товаров разбросаны по 150 представительств — кажыое записано по-своему. Обычый join давает всего 1% совпадений. Дата-инженер Дмитрий Дунaев на Вечерней школе Слёрма раазобал, как эту путанцу разгребли с помощью LLM, эмбеддингов и fuzzy-поиска. За одно решили освободить менеджеров от звонков на 5 минут на каждую единицу из бесконечного списка на обзвон.

Из 15 протестированных моделей тольк одна показала нужный баланс критериев — какая именно и почему, авторы разбирают в конспекте. Там же приведен чек-лист: когда имеет смысл строить агента для таких задач, а когда деньги луше сэкономить. Практический пример, как силами одной LLM можно заменить многочасовую ручную обработку данных.