ИИ «VK Видео» расширил словарный запас для точных субтитров

Вторник, 17 Сентября 2024 21:39

Фото из открытых источников

Сервис «VK Видео» внедрил новые алгоритмы искусственного интеллекта для автоматического распознавания речи и синтеза субтитров в роликах, шоу, клипах и другом контенте. Точность анализа и расшифровки выросла на 25 %, кроме того, нейросети теперь знают тысячи новых слов, включая мемы, имена собственные, акронимы и профессиональные термины.

Автоматические субтитры генерируются с помощью ML-моделей, которые создают текст и расставляют знаки препинания, синхронизируют его с видео. Для повышения точности аудиопоток проходит через несколько этапов обработки. Нейросеть отсеивает сторонние шумы, распознает речь и превращает её в текст. После чего подключаются модели пунктуации и денормализации, которые превращают набор из распознанных слов в удобный, читаемый текст. Потом ИИ синхронизирует получившийся текст с аудиодорожкой. Все это позволяет субтитрам быть понятными и удобными как в профессиональных роликах, так и любительских видео.

В ближайшее время нейросети научатся разделять речь разных спикеров на отдельные реплики, что упростит восприятие и чтение субтитров.

Популярность субтитров растет. Доля пользователей, использующих эту функцию в веб-версии, только за последний месяц увеличилась на 28 %, и сейчас субтитрами пользуются 11 % всей аудитории «VK Видео». Технология помогает людям с нарушениями слуха, а также удобна для просмотра видео в условиях, когда звук включать нежелательно.

Источник: CNews

Николаева Мария Опубликовано в Технологии Теги Новости

Главное за сутки

МО: над пятью регионами РФ и Азовским морем за ночь сбили 15 БПЛА Дежурные средства противовоздушной обороны сбили за ночь 15 украинских беспилотных летательных аппаратов (БПЛА) над пятью регионами РФ и Азовским морем. Об этом сообщили в Минобороны России. "Пресечены попытки киевского режима…

Уничтожение украинских формирований: что известно о ситуации в Курской области Вооруженные силы Украины (ВСУ) за сутки потеряли более 300 человек на курском направлении. Всего за время боев в Курской области уничтожены свыше 15,6 тыс. военнослужащих противника. ВС РФ за сутки…

МО РФ рассекретило архивные документы об освобождении Таллина от фашистов Минобороны России разместило рассекреченные документы к 80-летию освобождения столицы Эстонии города Таллина от немецко-фашистских захватчиков. На сайте Минобороны России к 80-й годовщине освобождения Таллина от немецко-фашистских захватчиков открыт новый исторический…

Интернет и СМИ

Новости СМИ2

Читайте также

Физики создали долгожданную электромагнитную вихревую пушку Кольца ортекса довольно крутые, а электромагнетизм еще круче. Теперь команда физиков нашла способ объединить два явления, создав электромагнитную вихревую пушку. Исследование опубликовано в журнале Applied Physics Reviews. В жидкостях (включая…

Инженеры ДГТУ улучшили качество соединений корпусов атомных реакторов Инженеры и исследователи Донского государственного технического университета (ДГТУ) достигли значительного прогресса в области укрепления сварных соединений для корпусов атомных реакторов. Они разработали инновационный метод, названный волновым деформационным упрочнением (ВДУ), который…

ИИ «VK Видео» расширил словарный запас для точных субтитров Сервис «VK Видео» внедрил новые алгоритмы искусственного интеллекта для автоматического распознавания речи и синтеза субтитров в роликах, шоу, клипах и другом контенте. Точность анализа и расшифровки выросла на 25 %,…

Тема дня