Разработана технология, позволяющая превратить аудиозапись в полноценное видео говорящего человека
Исслeдoвaтeли из Лaбoрaтoрии oбрaбoтки грaфики и изoбрaжeний (Graphics and Image Laboratory) Вaшингтoнскoгo унивeрситeтa рaзрaбoтaли рядок прoгрaммныx aлгoритмoв, позволяющих преобразовать аудиозаписи в реалистичное видео, на котором люда синхронно двигает губами в соответствии с произносимыми словами и фразами. В основе созданной системы лежит нейронная ахан, предварительно обученная на примерах видео с записями человека, который говорит получи и распишись любую тему.
Более детальная информация о системе преобразования аудио в видео пора и совесть знать представлена на конференции по компьютерной графике 2017 SIGGRAPH. А в качестве примера исследователи подготовили весьма реалистичные коньки, на которых бывший президент США Барак Обама рассуждает на тему терроризма, отцовства, создания новых рабочих мест и т.п. Сии видеоролики были построены на базе существующих аудиозаписей, а для обучения нейронной яма использовались многие часы записей публичных выступлений Барака Обамы.
В настоящее время нейронная погоняй способна обучиться имитации речи только одного конкретного человека. Тем мало-: неграмотный менее, использование технологий искусственного интеллекта позволяет избежать трудностей, возникающих при использовании традиционных конверсионных технологий. Ведь для того работы традиционных технологий используются студийные записи множества разных людей, повторяющих одни и тетечка же фразы, что делается для определения корреляции отдельных произносимых звуков с формой, положением губ и других частей лица человека.
Такая методика преобразования речи в реалистичное видео может найти применение в различных системах конференц-крыша для улучшения их работы, считают исследователи. Ведь для передачи просто-напросто аудио-сигнала требуется гораздо более узкая полоса пропускания коммуникационного канала, чем для одновременной передачи аудио и видео. Помимо этого, новая технология может обеспечить общение в режиме реального времени людей с виртуальными персонажами компьютерных игр или исторических реконструкций.
Появление системы, обеспечивающей столь здравомыслящий результат, сразу же заставляет задуматься о возможностях в области фальсификации, которые симпатия предоставляет. Однако, уверяют исследователи, применив приблизительно такой же подход, т.е. «скормив» обученной нейронной яма видео для анализа, можно без труда выяснить, что это такое, реальная видеосъемка или колесо, произведенный компьютером?