ИИ в «VK Видео» улучшил распознавание речи на 25%
«VK Видео» внедрила новые алгоритмы искусственного интеллекта для автоматического распознавания речи и синтеза субтитров в роликах, шоу, клипах и другом контенте. Об этом сообщает пресс-служба VK.
Автоматические субтитры генерируются с помощью Ml-моделей, которые создают текст и расставляют знаки препинания, синхронизируют их с видео. Для повышения точности аудиопоток проходит через несколько этапов обработки. Нейросеть отсеивает сторонние шумы, распознаёт речь и превращает её в текст. После чего подключаются модели пунктуации и денормализации, которые превращают набор распознанных слов в читаемый текст. Далее ИИ синхронизирует получившийся текст с аудиодорожкой. Такой порядок действий позволяет субтитрам быть понятными и удобными как в профессиональных роликах, так и в любительских видео.
Уточняется, что в ближайшее время нейросети научатся также разделять речь разных спикеров на отдельные реплики, что упростит восприятие субтитров.
В VK отмечают, что популярность субтитров растёт. Так, доля пользователей, использующих эту функцию в веб-версии, за последний месяц увеличилась на 28%, и сейчас субтитрами пользуются 11% всей аудитории «VK Видео». Технология помогает людям с нарушениями слуха, а также удобна для просмотра видео в условиях, когда включать звук неудобно.
Ранее сообщалось, что «VK Видео» первой в России запустила интерактивный контент.
© пресс-служба «ВКонтакте»
Отмечается, что точность анализа и расшифровки выросла на 25%, также нейросети теперь знают тысячи новых слов, включая мемы, имена собственные, акронимы и профессиональные термины.Автоматические субтитры генерируются с помощью Ml-моделей, которые создают текст и расставляют знаки препинания, синхронизируют их с видео. Для повышения точности аудиопоток проходит через несколько этапов обработки. Нейросеть отсеивает сторонние шумы, распознаёт речь и превращает её в текст. После чего подключаются модели пунктуации и денормализации, которые превращают набор распознанных слов в читаемый текст. Далее ИИ синхронизирует получившийся текст с аудиодорожкой. Такой порядок действий позволяет субтитрам быть понятными и удобными как в профессиональных роликах, так и в любительских видео.
Уточняется, что в ближайшее время нейросети научатся также разделять речь разных спикеров на отдельные реплики, что упростит восприятие субтитров.
В VK отмечают, что популярность субтитров растёт. Так, доля пользователей, использующих эту функцию в веб-версии, за последний месяц увеличилась на 28%, и сейчас субтитрами пользуются 11% всей аудитории «VK Видео». Технология помогает людям с нарушениями слуха, а также удобна для просмотра видео в условиях, когда включать звук неудобно.
Ранее сообщалось, что «VK Видео» первой в России запустила интерактивный контент.
Читайте также
ВСУ за сутки потеряли до 175 военных в зоне группировки "Восток"
Наука
ВСУ за минувшие сутки потеряли до 175 военнослужащих в зоне ответственности группировки войск "Восток", сообщили в Минобороны РФ. "Подразделения группировки войск "Восток" продолжили наступление в глубину обороны противника. Нанесли поражение живой силе и технике трех механизированных, штурмовой, аэромобильной бригад ВСУ и бригады теробороны в районах населенных пунктов Поддубное, Зеленое Поле, Богатырь, Комар, Отрадное и Вольное Поле Донецкой Народной Республики.
Путин призвал к борьбе с фальсификацией итогов Второй мировой войны
Наука
Россия сталкивается сейчас с фальсификацией итогов Второй мировой войны, в том числе с преуменьшением роли СССР в угоду политическим интересам отдельных стран. Не допустить этого призвал президент России Владимир Путин обращении к участникам III Международного антифашистского конгресса. «Сегодня, когда мы сталкиваемся с серьезными вызовами, когда в угоду корыстным политическим интересам пересматриваются, фальсифицируются итоги самой жестокой войны XX столетия, принижается роль Советского Союза
Комментарии (0)