Инструмент рисования Canvas AI от Nvidia мгновенно превращает капли в реалистичные пейзажи

ИИ уже много лет заполняет пробелы для иллюстраторов и фотографов – буквально, он разумно заполняет пробелы визуальным контентом. Но новейшие инструменты нацелены на то, чтобы позволить ИИ помогать художникам с самых ранних, чистых этапов работы над произведением. Новый инструмент Canvas позволяет создателю грубо рисовать пейзаж, как капли по номерам, а затем заполняет его убедительно фотореалистичным (если не полностью готовым для галереи) контентом.

Каждый отдельный цвет представляет разные типы объектов: горы, воду, траву, руины и т. Д. Когда цвета наливаются на холст, грубый набросок передается в генерирующую враждебную сеть. По сути, GAN передают контент туда и обратно между ИИ-создателем, который пытается создать (в данном случае) реалистичное изображение, и ИИ-детектором, который оценивает, насколько реалистично это изображение. Они работают вместе, чтобы сделать то, что, по их мнению, является довольно реалистичным изображением предложенного.

Это в значительной степени более удобная для пользователя версия прототипа GauGAN (понимаете?), Показанного на CVPR в 2019 году. Этот гораздо более гладкий по краям, дает лучшие изображения и может работать на любом компьютере с Windows с приличной видеокартой Nvidia. .

Этот метод использовался для создания очень реалистичных лиц, животных и пейзажей, хотя обычно есть какие-то «подсказки», которые может заметить человек. Но приложение Canvas не пытается сделать что-то неотличимым от реальности – как объясняет концепт-художник Джама Джурабаев в видео ниже, это больше о возможности свободно экспериментировать с изображениями, более детализированными, чем с каракулями.

Например, если вы хотите увидеть гниющие развалины в поле с рекой с одной стороны, быстрый карандашный набросок может рассказать вам не так много о том, как может выглядеть финальный кусок. Что, если у вас в голове есть один способ, а затем через два часа рисования и раскрашивания вы поймете, что, поскольку солнце садится в левой части картины, тени на переднем плане становятся неуклюжими?



Если вместо этого вы просто нацарапали эти функции в Canvas, вы могли бы сразу увидеть, что это так, и перейти к следующей идее. Есть даже способы быстро изменить время дня, палитру и другие высокоуровневые параметры, чтобы их можно было быстро оценить как опции.

Кредиты изображений: Nvidia

«Я больше не боюсь чистого холста, – сказал Джурабаев. «Я не боюсь вносить очень большие изменения, потому что я знаю, что всегда есть ИИ, который помогает мне с деталями … Я могу вложить все свои усилия в творческую сторону вещей, а все остальное я позволю холсту».

Это очень похоже на Chimera Painter от Google, если вы помните тот конкретный кошмарный бензин, в котором почти идентичный процесс использовался для создания фантастических животных. Вместо снега, камней и кустов у него были задняя лапа, мех, зубы и так далее, что сделало его более сложным в использовании и легким ошибкой.

Кредиты изображений: Девин Колдеви / Google

Тем не менее, это может быть лучше, чем альтернатива, потому что такой любитель, как я, конечно, никогда не смог бы нарисовать даже странных трубчатых животных, которые появились в результате простой рисования кляксами.

Однако, в отличие от Chimera Creator, это приложение запускается локально, и для этого требуется мощная видеокарта Nvidia. Графические процессоры долгое время были предпочтительным оборудованием для приложений машинного обучения, и что-то вроде GAN реального времени определенно нуждается в крупном. Вы можете бесплатно скачать приложение здесь.