AR скульптуры

Как я сделала свою первую 3D скульптуру для AR?

при помощи нейросетей
3d скульптура космонавт
В августе 2022 года мне посчастливилось присоединиться к арт лабе и стать альфа тестером приложения Phygital Plus.
Это онлайн софт, который позволяет работать с нейросетями без знания кода и каких-то технических нюансов. Очень удобно, интуитивно понятно и нет пугающего интерфейса гугл колаба.

В рамках лаборатории мы готовили проект для ARTLIFE FEST 2022. Каждому учатснику досталось рандомно картина, к которой нужно было создать 3д скульптуру.

Мне досталась картина Насти Миро "Хьюстон, у нас проблемы".
Нам не нужно было буквально передавать замысел художника в 3д. Задача была передать ощущение, настроение, свои ассоциации от картины.
Так я и создала свою первую 3д скульптуру.
Ниже поделюсь алгоритмом всех действий.
Мой пайплайн.
Что было сделано?
1) Нейросети позволяют быстро найти интересные референсы.
Я их создала через Midjourney и Stable Diffusion.
2) Затем я достала свой VR шлем Oculus Quest 2 и там попробовала создать 3д цветы и растения, на основе сгенерированных референсов.
Для лепки цветов я выбрала приложение SculptrVR. Опыта в создании 3d до этого у меня не было, выбрала самое интуитивно понятное приложение.

3) 3д скульптуру астронавта я скачала с сайта https://sketchfab.com/
и раскрасила ее в Procreate.

4) Затем оба файла импортировала в Blender.
5) при помощи stable diffusion была сгенерирована текстура планеты

6) анимирование космонавта в Mixamo. Этот сайт мое открытие! По клику мыши можно поставить вашего персонажа в любую позу или анимировать его (костная анимация)
7) В итоге все было собрано и доведено до идеала в Blender. Для демонстрации в AR я воспользовалась сервисом ARHead.
Перейдя по этой ссылке с телефона, вы можете посмотреть на мою скульптуру в дополненной реальности - https://app.arhead.io/V3_BVYkr
Видео пайплайн
Видео процесс создания 3д скульптуры для дополненной реальности
Это был мой первый опыт и я очень горжусь тем, что моя работа была представлена на манеже на выставке Арт Лайф Фест.
Я благодарна команде Phygital Plus, что они не только предоставили нам доступ к своему крутому сервису, но и поддерживали нас и научили работать с нейросетями и 3д.

Я так вдозновилась этой историей, что продолжила экспериментировать нейросетями и 3д.
Подписывайтесь на меня в соц сетя (ссылки ниже), не стесняйтесь задавать вопросы.)
Возможно вас еще заинтересуют эти статьи: