Пользователям «Вконтакте» станет доступна функция текстовой расшифровки видеосообщений

[душман]

«ВКонтакте» представила расшифровку видеосообщений, анимированные реакции и другие новые функции в «VK Мессенджере», сообщили в пресс-службе соцсети. Технология расшифровки работает на основе методов машинного обучения. Для высокой точности расшифровки видеозаписи обрабатываются тремя нейросетями: они распознают звуки, отделяя их от видеоряда, формируют из звуков слова и определяют границы предложений.

За распознавание слов отвечает разработка «ВКонтакте», созданная на базе технологии ASR (Automatic Speech Recognition). В процессе участвуют три нейросети: акустическая распознает звуки, языковая формирует из звуков слова, а пунктуационная определяет границы предложений и расставляет знаки препинания. 

Технология обучается на субтитрах фильмов и способна понимать неразборчивую речь и неформальную лексику, убирать паузы из записи, разбивать текст на предложения и смысловые блоки.Распознавание речи полностью автоматизировано и происходит без участия человека.