Google предлагает помощь ИИ для создания фантастических существ

Google выпустила прототип инструмента на основе искусственного интеллекта под названием Chimera Painter, который с помощью машинного обучения превращает базовый эскиз в фантастического зверя.

По словам Андипа Сингха Тоора, разработчика программного обеспечения Stadia, и Фреда Бертша, разработчика программного обеспечения, Google Research, Brain Team, инструмент предназначен для разработчиков, которые хотят создавать изображения для видеоигр.

Говорят, что игровому художнику нужно не только художественное творчество и технические знания, но и
«быстро перерабатывать идеи и создавать большой объем ресурсов, часто в условиях сжатых сроков. Что, если бы у художников была кисть, которая действовала не как инструмент, а больше как помощник? Модель машинного обучения, действующая как такая кисть, могла бы сократить количество времени, необходимое для создания высококачественного искусства без ущерба для художественного выбора «.
Возможное решение Google — это Chimera Painter, модель обученного машинного обучения (ML), которая автоматически создает полностью развернутый рендеринг из предоставленного пользователем контура существа. Chimera Painter добавляет элементы и текстуры к контуру существа, сегментированному метками частей тела, такими как «крылья» или «когти», когда пользователь нажимает кнопку «преобразовать».
Результаты выглядят впечатляюще, что можно увидеть ниже:

Однако наши эксперименты показывают, что вам все равно потребуется довольно много художественных навыков и потратить больше времени, чем мы были готовы посвятить, чтобы получить что-то действительно хорошее, а не тревожную лошадь пантомимы. Также довольно сложно придумать, как должны выглядеть крылья или рога, которые в конечном итоге не будут похожи на образцы:

Под прикрытием система была обучена с использованием генеративных состязательных сетей (GAN) с обратной связью, предоставленной настоящими художниками с целью создания изображений существ, которые можно было бы использовать в фэнтезийной карточной игре. GAN объединяют две сверточные нейронные сети друг против друга: сеть генератора для создания новых изображений и сеть дискриминатора, чтобы определить, являются ли эти изображения образцами из обучающего набора данных (в данном случае изображениями, созданными художником) или нет.
Исследователи Google использовали условную GAN, в которой генератор принимает отдельные входные данные для управления процессом создания изображения.
После обучения моделей попросили сгенерировать «многовидовые химеры» на основе эскизов, предоставленных художниками. Затем в Chimera Painter была включена лучшая по производительности модель, и на выходе получились такие звери: