13 июля 2023, 9:50 810
Сбер представил новую версию нейросети Kandinsky 2.2. Теперь с её помощью можно создавать не только фотореалистичные изображения, но и стикеры в Telegram.
В новой версии генеративной модели удалось добиться более высокого разрешения изображений. Также появилась возможность изменять соотношение сторон при генерации.
Значительного прироста качества удалось достигнуть при создании портретов. Для дообучения нейросети использовался датасет в размере 1,5 млрд пар «текст — изображение». Это на 300 млн больше, чем в предыдущей версии — Kandinsky 2.1.
Кроме этого, новая версия модели научилась генерировать стикеры, из которых можно собирать полноценные стикерпаки в Telegram.
Рисую Pixel Art с помощью нейросети Stable Diffusion
Ещё бот Kandinsky 2.2 способен изменять по текстовому описанию отдельные объекты или элементы на изображениях, сохраняя композицию исходной иллюстрации.
Kandinsky 2.2 понимает запросы на русском и английском языках, умеет рисовать более чем в 20 стилях, смешивать несколько рисунков, стилизовать изображение по текстовому описанию, генерировать изображения, похожие на заданные, дорисовывать недостающие части картинки (inpainting), создавать картины в режиме бесконечного полотна (outpainting).
Весной 2023 года мы опубликовали подборку изображений дореволюционной Самары глазами нейросети Stable Diffusion.
Попробуйте отличить реальные фото старой Самары от работы этой нейросети в нашем тесте.
Иллюстрации от Сбера
Следите за нашими публикациями в Telegram на канале «Другой город» и ВКонтакте
Источник: drugoigorod.ru
9 сервисов, где нейросети рисуют картинку по описанию
Это увлекательно: описываете, что хотите видеть, а нейросеть предлагает вам готовые картинки. Хотите попробовать? Читайте, как это сделать.
Современные технологии развиваются так стремительно, что нейросети, совсем недавно бывшие лишь нелепой забавой, сегодня стали серьезными и эффективными помощниками человека. Причем не только в механической работе, требующей точности в изучении огромного массива данных, но и в творческих задачах. Уже сейчас нейросеть рисует. Нейросеть рисует картины, нейросеть рисует портреты и нейросеть рисует по словам. И нет, это не шутка.
Подпишитесь на наши каналы, чтобы не пропустить интересные новости и полезные статьи
Что такое нейросеть
Прежде чем разбираться с художественными навыками нейросетей, стоит для начала понять, что же это такое — нейронная сеть (она же artificial neural network в английском наименовании). Термин нейросеть своими корнями уходит к исследованиям работы мозга человека и в наши дни применяется к свободно связанному семейству моделей, которые характеризуются большим параметрическим пространством и гибкой структурой. Непонятно? Ничего удивительного, ведь и работа самих нейросетей не самая простая для человека неподготовленного.
Но, кроме шуток, нейросеть работает по принципу человеческого мозга — он состоит из нейронов, которые связаны передающими электрохимические импульсы синапсами — а в нейросети роль нейронов играют вычислительные элементы, которые имитируют мозг человека.
Правда, несмотря на все достижения науки, пока нейросети требуют большого количества технических ресурсов, включая мощнейшие компьютеры, а также не могут соперничать с мозгом человека, где и синапсов больше, и работать они могут параллельно друг с другом. А нейросети пока функционируют лишь через разделение любой, даже самой простой задачи, на череду последовательных шагов к её выполнению. Но уже сейчас нейронные сети способны существенно помогать человеку в повседневных задачах.
Нейросетям доверено распознавать лица в системах видеонаблюдения, диагностировать болезни при анализе данных пациентов, заменять человека в колл-центрах в роли голосовых помощников да даже привычные всем чат-боты тоже используют в своей основе принцип нейронных сетей. Сервисы по имитации голосов и созданию изображений-дипфейков построены также на нейросетях. А в последнее время нейронным сетям доверили даже творческие задачи — написание стихов и рекламных слоганов, сочинение музыки и сценариев для фильмов, разработку и визуализацию промышленного дизайна, а кроме того — превращение слов в изображение.
Kandinsky 2.1 — нейросеть, которая понимает русский
Kandinsky 2.1 не зря стал самым быстрорастущим сервисом искусственного интеллекта в мире, всего за 6 дней добравшись до отметки в миллион уникальных пользователей. За считанные секунды нейросеть способна сгенерировать изображение по текстовому описанию на одном из 101 поддерживаемых языков мира, включая и русский.
Она умеет создавать картину в режиме бесконечного полотна, смешивать изображения и дорисовывать их. Разработкой и обучением нейросети занимались специалисты Sber AI при партнёрской поддержке учёных из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices.
По сути, она стала улучшенной версией предыдущей Kandinsky, дообученной на 170 млн пар «текст — изображение» и специально собранном датасете из двух миллионов пар качественных изображений. Сильно помогло в улучшении генерации изображений и использование новой обученной модели автоэнкодера. Ну а сгенерировать изображения можно, как в Telegram-боте нейросети, так и на ее официальной странице или в приложении Салют.
Шедевриум — перспективный прототип с ограниченными возможностями
Новая нейросеть от команды Яндекса пока находится только в начале своего пути, но уже доступна для бета-тестирования пользователями в виде приложений для Android и iOS. Она умеет рисовать картины по текстовому описанию на русском и английском языках, но, как и все подобные сервисы, очень любит конкретику — чем более полным окажется описание изображения, тем точнее будет итоговый результат.
Нейросеть может подражать стилю известных художников и их полотен, работает в заданных стилях и поддерживает, в том числе, и фотореализм, когда изображение будет почти неотличимо от обычной фотографии.
Главный минус Шедевриума в том, что возможности работы с сервисом пока сильно ограничены. Скачав приложение, вы сможете без проблем посмотреть уже имеющиеся работы, а вот создать собственное изображение получится только после одобрения составленной заявки. Впрочем, учитывая бета-статус сервиса, это неудивительно.
Stable Diffusion — нейросеть на вашем компьютере
После того, как бесплатный доступ к Midjourney оказался закрыт, популярность Stable Diffusion… ну не возросла до небес, но все-таки достаточно ощутимо увеличилась. Оно и неудивительно. Нейросеть не только построена на открытом исходном коде, полностью бесплатна и предлагает множество вариантов доступа.
Чего только стоит возможность установить ее на собственный компьютер. Причем особо мощный ПК для этого не нужен — достаточно, чтобы он имел видеокарту Nvidia 10XX или свежее с 4 Гбайт видеопамяти. Поддержать разработчиков деньгами вы, конечно, можете, но это совсем необязательно — сервис полностью бесплатен.
Stable Diffusion немного уступает тому же Midjourney по выразительности рисовки, но и результаты, выдаваемые нейросетью, более предсказуемы и точнее отвечают введенным запросам.
DALL-E 2 — нейросеть, которая рисует по словам
В 2021 году одно из детищ Илона Маска, занимающаяся разработкой и лицензированием технологий на основе машинного обучения американская компания OpenAI, представила нейросеть DALL-E, способную создавать изображение по его текстовому описанию. Опыт был признан удачным и в 2022 году анонсировали DALL-E 2 — дальнейшее развитие своего прародителя.
Источник: ichip.ru