5 нейросетей, которые превращают фото в аниме-рисунок

Как работают нейросети

Любой, кто хоть раз делал что-то с помощью нейросети, знает, что это похоже на магию. Просто вбиваешь запрос, робот анализирует его содержание и выдает результат. Переделка фото в аниме — это лишь одна из возможностей современной нейросети. Пользователи в сети умудряются создавать настоящий ai art.

Как это работает? Ну, начнем с того, что даже создатели нейросетей до конца не понимают, чем руководствуются алгоритмы при генерации результата. Нейросеть можно «натренировать» — научить ее различать черты лица, показывая ей миллионы человеческих фотографий. Так же с текстом, музыкой и даже видео. Все это умеет делать нейросеть.

Принцип работы всегда один и тот же:

• Пользователь вбивает свой запрос текстом или загружает свое изображение.
• Нейросеть ищет закономерности в базах и на их основе генерирует изображение.
• Вуаля, получается результат.

Чтобы из фото сделать аниме-картинку, нейросеть ищет на ней маркеры «глаза», «нос», «рот» или «волосы». А потом по их расположению, цвету и другим отличительным чертам составляет аниме-портрет пользователя. Иногда результат получается впечатляющим. Самые прокачанные нейронки могут даже фотографию животного преобразовать в аниме.

Примеры сгенерированных картинок

Мы прогнали фотографии через несколько бесплатных нейросетей, чтобы проверить, как они преобразуют их в аниме. Эти изображения были сгенерированы в следующих нейросетях:

• Stable Diffusion
• This Anime Does Not Exist.ai
• AnimeGAN.js
• Different Dimension Me
• Selfie2Anime

Вот что мы смогли сгенерировать

Подборка лучших нейросетей, генерирующих аниме

Если вы сами хотите попробовать сгенерировать аниме со своим участием, то можете воспользоваться этой подборкой бесплатных нейросетей. Какие-то из них могут преобразовать фото в аниме, а некоторые — сделать совершенно нового рисованного персонажа.

1. Stable Diffusion

В 2022 году это была самая нашумевшая бесплатная нейросеть, заполонившая все социальные сети. Каждый выкладывал свои сгенерированные рисунки. До сих пор она остается самой популярной и уникальной — потому что, в отличие от аналогов, использует метод диффузии. Она отлично работает — сначала создает маленькое изображение в низком качестве, а потом постепенно увеличивает и улучшает его.

Принцип работы прост — нейросеть Stable Diffusion работает либо по текстовому запросу, либо обрабатывает загруженное изображение. Язык платформы — английский, поэтому, чтобы описать, как сделать аниме из фото, придется подтянуть знания из школы.

Для метода диффузии требуется много вычислительной мощности, поэтому нейросеть не такая быстрая, как остальные в этом списке. Зато она выдает гораздо более впечатляющий результат.

2. This Anime Does Not Exist.ai

Если Stable Diffusion — это сложноустроенная нейросеть, то This Anime Does Not Exist.ai — это простой генератор аниме-персонажей. Все, что она умеет — это рисовать аниме. Причем абсолютно в случайном порядке. Работает она так же, как и нейросети This Person Does Not Exist и This Cat Does Not Exist. Да, она не подходит для переделки фото в аниме, зато может сгенерировать бесконечное количество рисованных персонажей.

Создали проект в 2021 году, и почти сразу нейросеть обрела огромную популярность. Применений у нее немного, в ней нет практически всех главных особенностей других пунктов из этого списка, но зато изображений для блога про аниме хватит с лихвой.

3. AnimeGAN.js

Веб-версия нейросети, которая умеет делать аниме из загруженного фото. Многого сказать про нее нельзя — она просто берет черты лица и по их расположению генерирует ту же картинку в стиле аниме.

Отличительная черта этой нейронки в том, что она умеет создавать изображения предметов и животных. Настроек нет — пользователь загружает картинку и ждет, пока AnimeGAN сама все обрисует.

4. Selfie2Anime

Нейросеть, которая превращает селфи в аниме (что следует из названия). Все работает в целом элементарно — нужно просто загрузить фото и получить его же в аниме-стиле. При этом работает Selfie2Anime довольно медленно — результат приходит через какое-то время на почту.

Нейронка ничем особенным не выделяется, более того она работает хуже остальных представителей этого списка. Главная особенность нейросети — это ее алгоритм. Создатели пользуются нейронкой от компании NCSoft. Разработчики работают над онлайн-игрой Lineage II. Правда, до конца не понятно, что именно в игре делает нейросеть.

Судя по всему, разработчики игры уделяли больше внимания женским персонажам, потому что мужчин она иногда обрабатывает странно. А если загрузить фотографию какого-нибудь объекта, можно получить ночные кошмары.

5. Different Dimension Me

Китайская нейросеть Different Dimension Me — одна из лучших на данный момент. Она не просто переделывает фото в аниме, но стилизует их под настоящий ai art. Алгоритм берет основные атрибуты человека (характерные черты, аксессуары и прочее) и делает изображение с похожими чертами. Фон и другие объекты она подбирает по цветовой гамме.

С недавних пор Different Dimension научилась переделывать фотографии котов, собак и других животных. И даже делать пейзажи в аниме-стилистике. В общем, список применения у нее довольно широк.

Чтобы воспользоваться сервисом, нужно зайти на сайт qq.com и нажать на огромную красную кнопку (интерфейс на китайском, но он интуитивно понятен). Загружаете фотографию и вуаля — вы в мире аниме.