Компания Meta* недавно представила два новых проекта в области генеративного искусственного интеллекта, которые в будущем позволят пользователям Facebook* и Instagram* создавать видеоролики на основе текстовых подсказок и осуществлять настраиваемое редактирование изображений непосредственно в приложениях. Эти инновации могут найти широкое применение в различных сферах.
Первый проект, “Emu Video“, представляет собой модель преобразования текста в видео. Он позволяет создавать короткие видеоролики на основе текстовых подсказок или статичных изображений. Эта технология использует так называемый факторизованный подход, который включает в себя два этапа: сначала генерация изображений на основе текстовой подсказки, затем создание видео, учитывающего как текст, так и сгенерированное изображение. Это позволяет эффективно обучать модели генерации видео. “Emu Video” способен генерировать четырехсекундные видеоролики размером 512×512 пикселей со скоростью 16 кадров в секунду. По оценкам пользователей, качество и соответствие текстовым подсказкам этих видео значительно превосходят предыдущие работы Meta* в этой области.
Видео, сгенерированное “Emu Video”
Второй элемент, “Emu Edit“, позволяет пользователям осуществлять свободное редактирование изображений с помощью текстовых инструкций. Эта модель точно следует инструкциям, изменяя только указанные элементы изображения и оставляя несвязанные с инструкцией области без изменений. Особенностью проекта является его способность работать на основе разговорных подсказок, что упрощает процесс редактирования и позволяет создавать более индивидуализированные варианты визуального контента.
Оба проекта открывают значительные возможности для творческих людей и брендов, предоставляя новые способы использования генеративного ИИ. Компания Meta* пока не сообщила, когда эти инструменты станут доступны в ее приложениях, но они, по всей видимости, скоро появятся, что обещает новые творческие возможности в различных областях.
* – Facebook и Instagram запрещены в РФ и принадлежат компании Meta, признанной экстремистской в РФ
22 Апр 2024
696