Инструменты
DubClean: сервис, который вырезает оригинальную речь из закадрового перевода
Автор проекта DubClean давно страдал от того, что в старых фильмах с закадровым переводом слышен оригинал. Это ломало погружение. В итоге он собрал сервис, который сопоставляет две дорожки — оригинальную и русскую — выделяет речь, убирает английскую подложку и склеивает результат с музыкой и шумами.
Внутри используются готовые модели, две собственные небольшие нейросети и несколько алгоритмических этапов. У схемы остаются ограничения, но базовую задачу она решает. Подробности автор разбирает в статье на Хабре.
Источник: habr.com