Компактная CNN с пространственным вниманием: как Smart Engines находим подписи на документах

Проверка подписи в документе — задача капризная: рядом могут быть печатный текст, печати, водяные знаки, а сама подпись — бледной, размытой или частично перекрытой. В Smart Engines решили не усложнять пайплайн, а сделать компактную CNN на базе ResNet18, которая получает на вход фрагмент изображения и отвечает на единственный вопрос: есть тут подпись или нет?

Главная фишка — модуль пространственного внимания. Он помогает сети фокусироваться на значимых участках и игнорировать визуальный шум. По словам авторов, добавление этого модуля заметно снизило долю ложных срабатываний. А карты внимания, которые строит модель, показывают, какие именно зоны области подписи сеть считает важными при анализе.