На ежегодном фестивале Lens Fest компания Snap обычно представляет новые функции и инструменты. В этом году многие анонсы были посвящены инструментам, работающим на основе искусственного интеллекта.
В этом году компания объявила о запуске бета-программы для Lens Studio 5.0, которая включает в себя новые инструменты для разработки генеративных линз с искусственным интеллектом и API, позволяющий создателям интегрировать ChatGPT, “открывая новые типы обучения, общения и творческого опыта для пользователей Snapchat”.
Lens Studio 5.0
Lens Studio – это набор инструментов, с помощью которых разработчики создают линзы и фильтры – эффекты дополненной реальности, используемые повседневными пользователями Snapchat. Lens Studio также является основой Camera Kit, который партнеры Snap используют для разработки собственных AR-проектов, работающих в других веб-приложениях и приложениях.
В грядущем пятом поколении платформы искусственный интеллект будет использоваться в двух основных направлениях: для создания контента и для создания новых типов опыта.
Линзы генеративного ИИ
Генеративный ИИ берет подсказку и выдает продукт. Благодаря сотрудничеству с компанией OpenAI, Lens Studio 5.0 объединяет генеративный ИИ с инструментами Snap для создания сетки лиц. Вместе они распознают лицо, отображают его в трехмерном пространстве и создают эффекты, реагирующие на лицо пользователя в режиме реального времени.
На фестивале 2023 Snap Lens Fest был представлен инструмент для генерации сетки лиц с помощью искусственного интеллекта благодаря интеграции с OpenAI.
Выразительные линзы, построенные на основе сетки лиц, являются одними из самых популярных в Snapchat. Ускорение и упрощение процесса создания таких линз – это мощный инструмент для разработчиков, а также залог более интересного опыта для пользователей платформы.
Snap также сотрудничает с 3D ИИ-генератором Meshy, позволяя пользователям генерировать материалы и текстуры с помощью текстовых подсказок. Этот инструмент позволяет облегчить то, что Тревор Стивенсон, старший менеджер Snap по разработке программного обеспечения, назвал “наиболее трудоемкими и сложными аспектами создания реалистичных AR-проектов”.
Компания Snap продемонстрировала использование генератора текстур с поддержкой искусственного интеллекта для ускорения процесса производства линз.
Наконец, Стивенсон рассказал об инструментах, которые позволят пользователям изменять функции камеры на основе простых подсказок, “как режиссер”. В сопроводительном видеоролике женщина ищет “настроенческие вибрации”, и приложение активирует нечеткий черно-белый объектив.
Первые объективы, созданные с помощью GenAI, стали доступны в начале этого года, однако ранее набор инструментов для их создания не был доступен широкому кругу разработчиков.
Разговорные линзы
Большинство читателей наверняка сталкивались с большой языковой моделью, которая отвечает на запрос не продуктом, а своими идеями. Lens Studio 5.0 включает “удаленный API”, который позволяет разработчикам интегрировать ChatGPT в свои объективы.
Хотя многие читатели уже относительно знакомы с этой технологией, инновационные приложения для социальных сетей, такие как Snapchat, – это то, с помощью чего многие люди впервые знакомятся с такими новыми технологиями, как искусственный интеллект, обеспечивая значительную точку входа для менее склонных к технологиям людей.
ИИ в Snap
Snap использует искусственный интеллект не только для создания контента. Руководитель отдела образования, обучения и тренингов Стейси Лонг Дженовезе также продемонстрировала интеграцию с компанией Mendable, которую Snap использовала для создания “генеративного инструмента на базе искусственного интеллекта, объединяющего весь обучающий контент для создания интеллектуального просмотра”.
ИИ Snap также предлагает объективы на основе окружения или воспоминаний пользователя. Весной на саммите партнеров Snap компания анонсировала My AI – настраиваемый ИИ-компаньон. Однако эта функция до сих пор поддерживается только на устройствах iOS и с момента выпуска не получила интересных обновлений.
Компания Snap уже не раз использовала старое, чтобы применить новое. Самопровозглашенная “компания камер” познакомила множество людей с миром дополненной реальности.
Теперь, когда многие пользователи и разработчики склонны воспринимать магию AR как должное, Snap постепенно открывает людям будущее искусственного интеллекта в качестве производственного инструмента и социального компаньона. Кроме того, AR в любом случае идет рука об руку с искусственным интеллектом, поскольку в нем сильно развито компьютерное зрение.
22 Апр 2024
687