Как это вообще работает?
Как и любая другая, “рисующая” нейронная сеть — это математическая модель, созданная по образу и подобию человеческого мозга. В ее основе лежит нейрон, единица, которая получает информацию и производит над ней простые вычисления. Сеть состоит из тысяч нейронов, которые контактируют между собой, решая задачи с очень высокой скоростью.
Как и человек, нейросеть требует обучения. Обычно процесс проходит так: ей предлагают параметры, а она распознает по ним объекты. В случае ошибок алгоритм корректируется.
Нейросети, которые распознают изображения, называются сверточными. Они состоят из нескольких слоев, каждый из которых состоит из определённого количества нейронов. При этом на каждом слое нейроны полностью независимы от других. Первый слой занимается преобразованием картинки, а последующие — группировкой и распознаванием мелких элементов. Последний слой называется "выходным слоем" - он демонстрирует нам результат.
Популярные “рисующие” нейросети (например, Midjourney) генерируют изображения на основе текста. Сначала разработчики загружают в программу визуальные референсы, потом группируют их под текстовое описание. Некоторые нейросети можно не “кормить” картинками вручную — они уже научились самостоятельно искать картинки в интернете. Например, Disco Diffusion, созданная Google, сама может гуглить референсы.
По сути, это не творческий процесс, а компоновка готовых идей под одну задачу. Впрочем, творческий процесс в нашей голове выглядит похоже: мы также придумываем картинку из доступных нашему мозгу образов.
Кто может рисовать с помощью технологий?
Любой желающий: в сети множество ссылок на бесплатные сервисы. Просто войдите на сайт, вбейте в поисковую строку текст и выберите стиль изображения. Например, выше приведена картинка, которую сеть выдала по запросу “бассейн, заполненный галактикой при лунном свете” в абстрактном стиле.
“Услугами” нейросетей пользуются для создания графических элементов: логотипов, рекламных изображений и пр. Например, “Студия Лебедева” призналась, что некоторые логотипы для их клиентов делала нейросеть, которую они назвали «Николай Иронов». По мнению сотрудников студии, преимущество работы с “роботом-художником” в том, что он без труда генерирует тысячи уникальных картинок за короткое время, что снимает нагрузку с дизайнера и экономит время на обработку заказа.
С графикой понятно, а что с картинами?
Пожалуй, наиболее известная сегодня нейронная сеть — DALL-E, представленная компанией Илона Маска. Сеть - “однофамилица” известного художника Сальвадора Дали. Разработчики обучили ее 12 миллиардам параметров (распознавание цветов, стилей, строения лиц и т.д.), благодаря чему она способна создавать реалистичные картины животных и объектов.
Недавно блогер Denis Sexy IT протестировал обновленную версию DALL-E-2 весьма необычным способом: он предложил программе показать нам то, что осталась за рамками (в прямом смысле) произведений искусства. Так пользователи интернета смогли увидеть обстановку комнаты, в которой жила “девушка с жемчужной сережкой”:
Еще одна интересная разработка принадлежит специалистам из России: в 2019 году резиденты “Сколково” представили алгоритм на основе нейросети, который умеет превращать статичные портреты в анимированные изображения. Алгоритм может работать даже с одиночным изображением, в том числе с портретами.
Могут ли нейросети рисовать красками?
Да, если их внедрить в робота. Например, недавняя разработка из Германии с интересной историей: робот E-David изначально был сконструирован для сварки деталей автомобилей, но благодаря сенсорам, которыми снабдили конструкцию, он может с фотографической точностью переносить на бумагу все, что видит. Например, рисовать портреты по фотографии.
Процесс создания картины начинается с того, что робот фотографирует предмет или живое существо. После этого он анализирует изображение и создает копию. Робот может рисовать только акриловыми красками, поскольку они быстро высыхают. А еще у него есть ограничения по нанесению мазков: “рука” может работать только под тремя углами.
Рисунки робота уникальны – даже изображения одного и того же предмета отличаются, потому что прибор каждый раз ищет более оптимальный ракурс.
Получается, художники останутся без работы?
Нет. Все-таки надо понимать, что в основе живописи лежит не совершенная картинка, которую может воспроизвести машина, а определенный культурный код: это и жизненный опыт мастера, и символизм, и исторический контекст.
Несколько лет назад, во время бума нейросетей, их "работы" начали продавать на аукционе. Люди были готовы вложить за картину от робота 432,5 тысяч долларов (случай с работой Арт-группы OBVIOUS “Портрет Эдмона де Белами” на аукционе Christie's), но уже сейчас такое искусство приобрело характер массового и относится скорее к развлечению.
По мнению экспертов, нейросети сами по себе не отдельные творческие единицы, но их механизмы помогут создавать работы современным художникам. Ждем примеры таких творческих коллабораций.
