Neuralangelo AI от Nvidia превращает видео с iPhone в 3D-миры

Ваши фильмы на iPhone теперь превратились в игровые миры.

Когда вы подумали, что дикий мир искусственного интеллекта больше не может удивлять, Nvidia представляет свой новый искусственный интеллект Neuralangelo, который может превращать 2D-видеоклипы в 3D-структуры и сцены. Он буквально генерирует подробные копии зданий, скульптур и реальных объектов из видеоклипов, снятых на мобильный телефон или камеру.

Идея Neuralangelo, которая «лепит» реалистичные 3D-сцены из видео, подобно современному Микеланджело (geddit), заключается в том, что эти 3D-сцены затем можно импортировать в другое программное обеспечение. Ресурсы Neuralangelo можно редактировать для использования в видеоиграх, архвизах, проектах Web 3, да и вообще в чем угодно, включая помощь цифровым художникам в определении источников света.

Это происходит благодаря искусственному интеллекту Nvidia для общения с игровыми персонажами и новому генеративному искусственному интеллекту для преобразования текста в 3D, который все еще находится в разработке исследователями HiFA. В демо-версии Neuralangelo (ниже) Nvidia показала, как ее ИИ может воссоздавать сложные объекты, такие как Давид Микеланджело, а также такие повседневные вещи, как бортовой грузовик.

Nvidia опубликовала подробное объяснение того, как работает Neuralangelo, поделившись тем, как она может переводить сложные детали видео, такие как стекло и гладкий мрамор, в 3D. Идея заключается в том, что этот ИИ поможет ускорить рабочие процессы творческих людей и открыть виртуальные 3D-миры и ресурсы для новых отраслей, а не заменять рабочие места.

«Возможности 3D-реконструкции, которые предлагает Neuralangelo, принесут огромную пользу создателям, помогая им воссоздать реальный мир в цифровом мире», — сказал Минг-Ю Лю, старший директор по исследованиям и соавтор статьи, в заявлении для прессы. «Этот инструмент в конечном итоге позволит разработчикам импортировать детализированные объекты – будь то небольшие статуи или массивные здания – в виртуальные среды для видеоигр или промышленных цифровых двойников».

Лучшие генераторы ИИ — это те, которые могут вписаться в рабочий процесс и улучшить его, а не заменять рабочие места. Новые генеративные модели искусственного интеллекта, такие как Adobe Firefly, например, могут вписаться в рабочий процесс концепт-арта и ускорить процесс, а не заменить художников, выполняющих работу. Прочтите руководство Кена Коулмана о том, как использовать Adobe Firefly, или мое интервью с Крисом Колманом из Final Frontier, который использует ИИ каждый день.

Спасибо, что прочитали 5 статей в этом месяце* Присоединяйтесь сейчас, чтобы получить неограниченный доступ.

Наслаждайтесь первым месяцем всего за 1 фунт стерлингов / 1 доллар США / 1 евро.

*Читайте 5 бесплатных статей в месяц без подписки.

Присоединяйтесь сейчас и получите неограниченный доступ

Попробуйте первый месяц всего за1 фунт стерлингов / 1 доллар США / 1 евро

Ежедневные новости дизайна, обзоры, инструкции и многое другое по выбору редакторов.

Ян Дин — редактор отдела искусства и дизайна Creativebloq и бывший редактор многих ведущих журналов. В число этих игр вошли ImagineFX, 3D World и ведущее название видеоигр Official PlayStation Magazine. В начале своей карьеры он писал для музыкальных и киножурналов, включая Uncut и SFX. Ян выпускал журнал Xbox X360 и редактировал PlayStation World. В Creative Bloq Ян объединяет свой опыт, чтобы рассказывать последние новости об искусственном интеллекте, цифровом искусстве, искусстве и технологиях видеоигр и многом другом в Creative Bloq, а в свободное время он рисует в Procreate, ArtRage и Rebelle, находя время для игр. Xbox и PS5. Он также является заядлым пользователем Cricut и поклонником лазерной резки и в настоящее время работает с Glowforge и xTools M1.