Apple представила нейросеть для создания дипфейк-видео
. NeuMan генерирует реалистичные видео за небольшой отрезок времениApple разработала нейросеть NeuMan, которая «обучается» с помощью коротких видеороликов и может генерировать реалистичную подмену — дипфейки. Исходный код программы разработчики опубликовали в GitHub.
Нейросеть способна «обучаться» за считаные секунды на видеороликах, причем их продолжительность может составлять всего десять секунд. Алгоритм копирует из видео изображение человека и окружающей среды. На основе этого NeuMan создает собственные ролики.
На сгенерированных видео персонаж может выполнять разные действия, какие задаст программа: бегать, кувыркаться или подпрыгивать. При этом отмечается, что у подобных видео невысокая резкость, за счет чего они похожи на съемку низкого качества.
Для обучения нейросети используются две модели NeRF: первая из них «изучает» человека, а вторая — фон, на котором происходила съемка. По словам разработчиков, основное назначение программы — приложения для дополненной реальности. Их создатели смогут внедрять разработку в свои продукты.