Всего несколько лет назад нейросети были чем-то из разряда далеких и непостижимых Hi-Tech. Сейчас они все активней входят в нашу жизнь и как развлечения, и как рабочие инструменты. В этой статье мы обобщим знания о тех нейросетях, которые наиболее активно используются в настоящее время.
- Генерация изображений по текстовому описанию, коллажам и с помощью смешивания картинок
- Нейросети для создания логотипов
- Нейросети для работы с текстом и программным кодом
- Принцип работы нейронных сетей
- Особенности нейронных сетей
- Проблемы нейросетей
- Юридические и социальные аспекты использования нейросетей
- Выводы
Генерация изображений по текстовому описанию, коллажам и с помощью смешивания картинок
Таких нейросетей сейчас очень много. Даже просто перечислить их — задача непростая. Мы решили остановиться на тех, которые наиболее известны и доступны в том или ином виде на территории РФ. Однако начнем мы все-таки с наиболее популярной графической нейросети — DALL-E 2.0.
Нейросеть DALL-E 2
Cеть полностью заблокирована на территории РФ. Тем не менее, мы не можем не упомянуть ее, так как она является мировым лидером по генерации изображений с помощью текстовых запросов на английском языке с возможностью триального доступа. Считается одной из передовых нейросетей, созданных для генерации графики по текстовым запросам.
Российская нейросеть ruDALL-E
Российский аналог всемирно известной DALL-E был запущен в конце 2021 года. В настоящее время есть три вариации генератора — Kandinsky, Kandinsky 2.0 и Malevich. Отдельно можно выделить генератор эмодзи, но его мы рассмотрим отдельно.
Пока ruDALL-E сложно назвать продвинутым генератором графики. Ему более или менее даются пейзажи, а вот с изображениями людей наш аналог DALL-E справляется не очень хорошо. Тем не менее сейчас на территории РФ эта нейросеть является самой сложной. Ее тренировка потребовала 24 тыс. GPU-дней (произведение дней, ушедших на обучение сети, и задействованных графических процессоров — GPU).
Интерфейс, как видим, предельно прост.
В Kandinsky есть возможность дополнительно выбирать размер картинки и то, каким стилем она будет сделана.
Причем возможных стилей довольно много.
Картинки генерятся быстро. В течение 1-2 минут. Но, как мы уже говорили, с изображением людей сеть решительно не справляется.
Впрочем, собственные портреты каждая из версий нейросети ухитрилась сделать довольно интересными:
Портрет Kandinsky 2.0
Портрет Malevich
Портрет ruDALL-E
С пейзажами дела обстоят немного лучше.
В целом, следует это признать, пока ruDALL-E — всего лишь любопытная игрушка, которая только начинает свой путь в мире генерации изображений.
Плюсы нейросети ruDALL-E:
- Бесплатна.
- Проста в использовании и понимает русские запросы.
- Много возможных стилей.
Минусы нейросети ruDALL-E:
- Очень слабые результаты генераций.
Нейросеть DALL-E MINI/Craiyon
В отличие от DALL-E 2.0, нейросеть DALL-E Mini (Craiyon) свободно доступна и на территории РФ. Ее создатель — житель Техаса Борис Дайма. Да, эта сеть проще, чем DALL-E 2.0, работает с меньшим количеством параметров, а обучали ее на 30 млн примеров, но создана она на исходной архитектуре DALL-E 2.0, показывает неплохие результаты и быстродействие — генерирует 9 вариантов запроса всего за минуту. По качеству отрисовки Craiyon пока превосходит любую из версий ruDALL-E.
DALL-E Mini быстро набрала большое количество поклонников. Эта сеть стала очень популярна у любителей мемов и не только, что вынудило разработчиков сменить ее имя на Craiyon, ведь иначе сеть ассоциировалась с оригинальным DALL-E.
Интерфейс у нейросети очень простой.
Качество итогового изображения 1024х1024.
С изображением людей проблема. Особенно в том, что касается глаз и рук.
Плюсы нейросети DALL-E Mini (Craiyon):
- Бесплатна.
- Проста в использовании.
- Изображения можно скачать в достаточно хорошем качестве и сколько угодно.
- Понимает даже довольно абстрактные запросы. Для мемов идеальна.
Минусы нейросети DALL-E Mini (Craiyon):
- Качество и детализация изображений оставляет желать лучшего.
- Руки и глаза, как правило, не получаются корректно.
Нейросеть Artbreeder
Отличная нейросеть для того, чтобы научиться составлять запросы (промты), к тому же позволяет делать новые изображения из грубых коллажей и даже просто зарисовок.
В классическом варианте сеть создает генерации на основе «родительских» картин. Нужно только выбрать, что именно вам нужно.
Можно доработать какое-то одно изображение, изменив его до полной неузнаваемости:
Коллажирование — еще более интересная функция. Она позволяет создавать изображение из зарисовки или коллажа. Например, так: делаем грубый набросок, описываем текстом, что мы хотим получить в итоге и ждем результат. Если итог не устроил, можно изменить настройки, уменьшив или увеличив участие AI в создании генерации.
Плюсы нейросети Artbreeder:
- Бесплатна.
- Любое количество генераций.
- Позволяет как создавать картины, миксуя изображения или изменяя характеристики исходников, так и генерировать новые изображения из коллажей, текста и даже весьма условных зарисовок.
- Работает через браузер.
- Результаты можно использовать в коммерческих проектах.
Минусы нейросети Artbreeder:
- Иногда приходится ждать довольно долго.
- Платная закачка изображений в более высоком разрешении.
Нейросеть Lexica.art
Триальная версия доступна на территории РФ.
?
Создание графики по текстовому запросу подходит для создания простых иллюстраций. Чем сложнее запрос, тем меньше шансов получить нужный результат.
Lexica также позволяет работать с уже готовыми изображениями. Для этого достаточно выбрать картинку, которая вам подходит, и посмотреть на ее промт. Потом вы сможете создать свой собственный вариант, улучшая и совершенствуя запрос.
Некоторые генерации получаются очень красивыми и удачными.
Плюсы нейросети Lexica.art:
- Возможность использовать уже готовые варианты промтов для собственных работ.
- Простота интерфейса.
- Яркие работы.
- Много бесплатных триальных генераций.
Минусы нейросети Lexica.art:
- Работают в основном только простые запросы.
- Невозможность купить платную подписку на территории РФ.
Нейросеть Dream by WOMBO
Веб-версия — бесплатная в тестовый период, но некоторые стили доступны только при премиум-подписке.
По запросу «Portrait of Dream by Wombo» сеть выдала нам вот такой результат:
Изображения можно скачать в достаточно высоком разрешении. Также есть возможность загружать собственные картинки как эталонные и дополнять их текстовыми уточнениями.
?
Нейросеть с открытым кодом Stable Diffusion
Доступна на территории РФ и представляет собой один из лучших вариантов нейросетей с генерацией картинок. Stable Diffusion — программа с открытым исходным кодом. Ее создатель —группа Stability.Ai.
С помощью решения можно генерить изображения бесплатно, в любом количестве и хорошем качестве, а пользоваться ею можно даже с собственного компьютера.
Среди минусов можно отметить.
- Установка на ПК требует определенных умений и знаний или хотя бы желания эти знания получить.
- Требования к железу — видеокарта должна быть не ниже Nvidia 10XX минимум с 4 ГБ видеопамяти.
- Программа «тяжелая» и занимает на жестком диске около 400 ГБ.
- Настройки, установка моделей и прочие нюансы требует траты некоторого времени.
?
Рабочий интерфейс Stable Diffusion
Настроек довольно много, как и возможных моделей генерации, которые можно скачать с сайта civitai.com/
С помощью писателя Екатерины Радион, которая использует программу для визуализаций персонажей своих книг, мы смогли сгенерировать портрет нейросети Stable Diffusion.
В данной модели Stable Diffusion предпочла портрет… лошади.
Портрет Stable Diffusion
Екатерина также выделила нам несколько наиболее удачных изображений для иллюстрации возможностей нейросети.
Как видим, качество неплохое, хотя с руками людей тоже проблемы. По словам Екатерины, «Stable Diffusion, как и любая другая нейросеть, не может быть полноценной заменой художникам и дизайнерам. У нее есть свои ограничения. На одну удачную генерацию приходится 20-30 неудачных попыток. Нужно тщательно составлять запросы, дорабатывать полученные рисунки сначала с помощью программы, а потом, как правило, вручную». ?
Нейросеть Dezgo, как вариант Stable Diffusion без установки на компьютер
Dezgo по сути своей является частным развитием Stable Diffusion. В ней меньше настроек, меньше возможностей. Тем не менее для тех, кто не хочет устанавливать Stable Diffusion на компьютер, это неплохой вариант.
Свой портрет Dzego видит вот так:
Портрет Dzego
Нейросеть позволяет также создавать новые изображения из уже готовых.
Нейросеть Midjourney
Сеть Midjourney способна создавать порой настоящие шедевры. Основателем проекта является Дэвид Хольц, выпускник Университета Северной Каролины. Сама нейросеть появилась в феврале 2022 года и за это время сделала огромный скачок в качестве, хотя в ее штате всего около 10 человек.
Для работы с Midjourney нужна регистрация в мессенджере Discord, который довольно популярен в среде геймеров и дизайнеров. Discord выбрали из тех соображений, что людям намного проще творить, находясь в группе. Начать работать просто — нужно зайти на сайт www.midjourney.com, затем авторизоваться через мессенджер, после чего есть вариант воспользоваться бесплатной пробной версией или же оплатить подписку.
Бесплатная пробная версия включает возможность сгенерировать около 25 изображений, но попытки можно потратить впустую, если заранее не разобраться с тем, как и что делать. В сети достаточно много подробных инструкций, рекомендуем их изучить, прежде чем погружаться в тестирование. Сразу предупреждаем — занятие очень увлекательное.
Обратим внимание на две важные вещи, из-за незнания которых новички часто теряют свои генерации. Во-первых, нужно следить за чатом. Запрошенная картинка появится там среди многих чужих. Ее легко пропустить. Во-вторых, для сохранения картинки по ней нужно кликнуть правой кнопкой мыши и открыть изображение на новой вкладке.
Повторно зарегистрироваться затруднительно. Система отслеживает такие попытки.
К сожалению, платную подписку на Midjourney оплатить с территории РФ не получится, однако и при этом сеть довольно популярна.
Вот все текущие подписки на настоящий момент. Их несколько больше, чем обычно упоминают в сети, вероятно потому, что на сайте пока царит некоторый сумбур и полный список тарифных планов приходится тщательно искать. Различаются они количеством «быстрых» часов в месяц (приоритетная очередь), возможностью безлимитных генераций в порядке «общей» очереди, количестве одновременных запросов и возможностью работать в приватном режиме, не отправляя свои картинки в общий чат.
Стоимость базовой подписки 10$ в месяц, стандартной — 30$ в месяц и профессиональной — 60$ в месяц. Есть также корпоративный тариф стоимостью 600$ в год. При корпоративной подписке сотрудники компании могут работать совместно в отдельной команде. К сожалению, платные подписки на территории РФ и с помощью карт российских банков пока купить нельзя.
Для создания изображения нужно набрать в чате с ботом Midjourney слова, в которых описывается то, что вы хотите получить, скажем, «autumn park». Система сгенерирует четыре изображения на выбор, а дальше наиболее подходящую картинку можно масштабировать, изменять и дорабатывать до идеала.
В бесплатной демо-версии готовые изображения появляются в общем канале Discord ориентировочно через минуту после того, как запрос отправлен. Платные подписки позволяют отправлять команды личными сообщениями боту. При максимальной версии подписки можно скрывать сгенерированные изображения от других пользователей.
Здесь же можно генерировать новые картинки из уже готовых изображений.
И даже смешивать картинки для генерации чего-то нового.
Мы поговорили с Мирой Гром, писателем и цифровым художником, которая пользуется Midjourney для создания визуализаций к своим произведениям.
«Midjourney, несмотря на пока еще очень непонятный юридический статус, уже сейчас стал хорошим подспорьем для коллажистов или тех, кому нужны визуализации. Однако у него много недостатков. Первым и самым главным я назвала бы непонятный статус изображений, которые нейросеть использует для создания своих генераций. Мне приходилось сталкиваться со случаями, когда без спроса загружали произведения художников в сеть, создавая произведения в подобном стиле. Сходство заметить можно и не так уж сложно. Этически это очень сомнительно, хотя доказать плагиат, увы, почти невозможно.
При генерации изображений зачастую появляются остатки подписей или водяных знаков. Да, они переработаны и переделаны, но вполне узнаваемы. К примеру, вот одно из таких изображений. На небе отчетливо читаются надписи известного фотобанка, пусть и видоизмененные.
Встречаются лица известных актеров. Например, в этом портрете легко можно узнать Джареда Падалеки, игравшего одну из главных ролей в сериале «Сверхъестественное».
Еще один недостаток этой нейросети — ей пока плохо удается человеческая анатомия. Хуже всего дела обстоят с руками. Зачастую в генерациях вместо пальцев можно получить щупальца. Сеть учится, и это заметно, но пока недостатков много.
До сих пор довольно редко удается создать изображение, которое не нужно править в фотошопе. Рассчитывать по-прежнему приходится в основном на собственные умения. Поэтому пока я бы назвала Midjourney скорее инструментом дизайнера, но не самим дизайнером или художником».
Нам было очень любопытно посмотреть, как видит свой образ нейросеть Midjourney, поэтому мы задали ей запрос «Portrait Midjourney».
Нейросети для создания логотипов
С помощью таких нейросетей можно за считанные минуты придумывать название бренда и создавать фирменный стиль. Таких нейросетей тоже много, поэтому мы сделаем обзор только на те, которые работают на территории РФ и создают названия на русском языке.
Нейросеть Turbologo
Российская разработка.
Принцип работы прост: для создания логотипа и фирменного стиля нужно указать название компании, слоган, сферу ее деятельности.
Вот что нам выдала система на запрос логотипа компании Pressfeed со слоганом «Публикации в СМИ — это легко». Сервис предоставляет такое бессчетное количество вариантов, что мы устали листать ленту.
В конечном итоге мы получили огромное количество вариантов, из которых можно выбрать любой.
А затем можно посмотреть варианты использования логотипа в фирменном стиле, а заодно довести его до идеала.
Для того чтобы скачать готовый логотип, нужно купить платную подписку. Впрочем, цены совсем невелики.
Николай Иронов — дизайнер и нейросеть
Проект студии Артемия Лебедева.
Триальной версии нет, но можно посмотреть на демо-проекты.
Стоимость таких логотипов намного выше.
Нейросеть выполняет проект самостоятельно по созданной пользователем технологической карте. Пожалуй, это такое вложение средств окажется довольно рискованным делом.
Нейросети для работы с текстом и программным кодом
Explainpaper — анализ текстов и статей
Онлайн-сервис, работающий на базе GTP-3. Он предназначен для анализа сложных статей или просто текстов и получения краткого резюме по ним. Также пользователь может получать пояснения непонятных слов, фраз, абзацев или расшифровки сокращений. Сервис работает как на русском, так и на английском языке. На дополнительные вопросы нейросеть отвечает только в пределах статьи.
Сервис абсолютно бесплатный. Все что нужно — это регистрация. Работает в пределах РФ. Формат файлов для работы — PDF.
Copilot — помощник для написания программного кода
Нейросеть в помощь программистам. Разработана компаниями GitHub и Open AI. Программа подсказывает, что можно улучшить в коде, оставляет комментарии, дает имена функциям.
По сути дела, это программа-помощник программистов, которая встраивается в IDE. Она не пишет код, но сильно облегчает его создание. Лучше всего Copilot работает с Python, JavaScript, Ruby, TypeScript и Go.
Ghostwriter — помощник для написания программного кода
Еще один помощник программиста. Предлагает улучшения для написанного кода. Основа Ghostwriter обучается на миллионах строк кода, находящихся в открытом доступе. Программа решает четыре основные задачи: пишет продолжение кода, генерирует новый код, трансформирует кода и объясняет его.
RuGPT-3 — нейросеть для генерации текста
Обучение RuGPT-3 проводилось на 600 ГБ данных, в число которых вошла коллекция русской классической литературы, «Википедия», новостные сайты и многое другое. Однако результат в демо-версии получился очень скудный. Насколько лучше расширенная версия — сложно сказать.
Результат очень сомнительный и больше напоминает набор слов.
ReText.AI — сервис перефразирования и рерайтинга
При пробной версии можно перефразировать одно предложение. Результат приемлемый.
Copy Monkey.ai — генерация текстов
Сервис предлагает генерацию более 10 видов разнообразного контента: статьи, посты для блогов и соцсетей, описание видео и др. В ознакомительной версии можно сгенерировать 3 текста.
Результат удовлетворительный, но текст очень общий и нуждается в дальнейшей редактуре. В том виде, в каком есть, вряд ли его можно использовать для статьи или поста в соцсети.
Принцип работы нейронных сетей
- Искусственный нейрон сети принимает сигналы.
- Полученные данные преобразовываются и передаются другим нейронам.
- Обучающая выборка. Нейросеть получает данные, необходимые для выполнения поставленных задач, а также готовые ответы на полученную информацию. Данных должно быть в десятки раз больше, чем общий объем нейронов сети. Чем больше информации получает нейросеть в процессе обучения, тем выше вероятность правильно решить поставленную задачу.
- Преобразование. Сеть обрабатывает полученные данные и отправляет их дальше, делая это с помощью математических формул. Процесс напоминает то, как человек видит предметы — нервный импульс передает в мозг сигнал, сигнал обрабатывается и только после этого мы воспринимаем картинку.
- Обработка информации. Выводы.
Особенности нейронных сетей
Закрытый характер. Все характеристики и правила, которыми пользуется машина, неизвестны даже ее создателям. Такие нейросети начинаются с описания формул и структуры, а затем уже развиваются самостоятельно и независимо.
Независимость нейронов в сети. Функционирование каждого из нейронов автономно. Они обмениваются данными, но в пределах сети независимы. Поэтому при выходе из строя одного из нейронов, остальные работают так же, как и работали. Благодаря этому достигается высокая устойчивость сетей. Но отсюда исходит и главный минус подобной структуры — хаотичные и практически непредсказуемые решения на выходе.
Гибкость. Архитектура нейросетей во многом подобна биологическим системам. Благодаря этому они могут самостоятельно обучаться, адаптироваться к новым данным, выбирать важное и игнорировать малозначимое.
В головном мозге человека около 86 млрд нейронов. Количество нейронов в современных разработках составляет около 10 млрд нейронов.
Проблемы нейросетей
Катастрофическая забывчивость — при обучении новой задаче нейросети не запоминают старые навыки. По этой причине одна и та же сеть не может научиться последовательно выполнять сразу несколько задач — каждая новая обучающая выборка приводит к переписыванию нейронов.
Переобучение — еще одна проблема нейросетей. Модель воспринимает обучающую выборку, хорошо объясняет примеры из нее, но неспособна классифицировать примеры, которые не принимали участие в обучении.
Непредсказуемость — даже создатель нейросети не может сказать, каким именно образом идет обработка информации после обучения.
Юридические и социальные аспекты использования нейросетей
Появление нейросетей поставило под угрозу многие творческие профессии. В частности, еще в декабре 2022 года тысячи художников начали размещать на своих работах один и тот же знак — надпись AI в красном перечеркнутом круге. Это означает запрет со стороны художников на использование их работ для обучения нейросетей. Действительно, умение нейросетей перенимать художественный стиль разных авторов сродни плагиату.
Одновременно другие дизайнеры и художники начали использовать нейросети как инструменты. В настоящее время полностью отсутствует законодательная база, позволяющая достигнуть баланса между ИИ и представителями творческих профессий.
По вопросам допустимости использования нейросетей в современном творчестве мы взяли интервью у директора по рекламе и PR литературного портала «Призрачные Миры» Елены Колзуковой.
— Законно ли с юридической точки зрения использование графики, созданной нейросетями, в коммерческом сегменте? Разрешает ли ваш портал использовать подобные обложки к платным книгам?
— В настоящее время нейросети юридически находятся в «серой» зоне. Закон не запрещает использовать результаты их работы в коммерческом сегменте. Во всяком случае, это справедливо для России. За рубежом к нейросетям относятся более строго — обложки, созданные ИИ, на Amazon не используются. Во всяком случае, формально. Однако на деле достаточно легко замаскировать результат работы нейросети, так что и в этом случае запрет носит все больше рекомендательный характер.
Портал «Призрачные Миры» не запрещает авторам использовать обложки, сгенерированные нейросетями, но настоятельно не рекомендует это делать и предупреждает о том, что при изменении законодательства такие обложки придется заменять.
— Книги, написанные нейросетями — реальность или по-прежнему фантастика?
— Книги, написанные нейросетями, пока еще фантастика, а вот рерайт нейросети уже научились делать. Нам приходилось натыкаться на порталы, где наряду с авторами-людьми есть фейковые аккаунты, торгующие рерайтом книг. Процедура элементарная — писатель приносит свои книги на портал, тексты подгружаются в систему, обрабатываются, а затем рерайтятся под разные запросы. Утверждается, что таким образом любой читатель может найти книгу по своему интересу и в стиле того автора, который ему нравится. Фактически это такое же пиратство и плагиат. Увы, юридически доказать подобные вещи сложно. Единственное, что мы можем сделать для писателей — предупредить их о возможных махинациях и порекомендовать быть крайне осторожными в выборе литературных порталов для реализации своего творчества.
Выводы
В настоящее время нейросети не могут полностью заменить представителей творческих профессий. Пока их правильней назвать инструментом, облегчающим работу. Однако отсутствие юридических документов, ограничивающих использование нейросетей и защищающих права людей, уже сейчас становится серьезной проблемой, которая потенциально будет обострятся по мере совершенствования нейросетей.
Получайте новые статьи моментально в Telegram по ссылке: t.me/sldonline_bot
