Технологии 17 сентября 21:17

В «VK Видео» новые алгоритмы ИИ улучшили качество субтитров на 25%

Субтитры становятся всё более популярными на платформе «VK Видео», и в настоящее время ими пользуются уже 11 % от всей аудитории сервиса. За последний месяц использование функции субтитров в веб-версии увеличилось на 28 %.

«VK Видео» стремится улучшить удобство и понятность субтитров. На платформе внедрены новые алгоритмы искусственного интеллекта для автоматического распознавания речи и синтеза субтитров в различных типах контента, включая ролики, шоу и клипы. Эти улучшения позволили повысить точность анализа и расшифровки речи на 25 %.

Быстрое развитие нейросетей также оказывает значительное влияние. ИИ освоил тысячи новых слов, включая профессиональные термины, имена собственные, акронимы и мемы. В ближайшем будущем искусственный интеллект сможет разделять речь разных спикеров на отдельные фразы, что дополнительно улучшит качество субтитров.

Процесс генерации автоматических субтитров осуществляется с помощью ML-моделей, которые формируют текст, расставляют знаки препинания и синхронизируют его с видео. Для достижения высокой точности аудиопоток обрабатывается ИИ в несколько этапов. Сначала нейросеть удаляет посторонние шумы и преобразует распознаваемую речь в набор фраз. Затем модели пунктуации и денормализации формируют из этих фраз удобочитаемый текст. В завершение текст синхронизируется с аудиодорожкой.

Субтитры необходимы в ситуациях, когда звук при просмотре видео включить невозможно. Они также предоставляют важную помощь людям с нарушениями слуха.

Источник: CNews