Инструменты и ресурсы для AI искусства

Хотите начать работу с ИИ, создающим настоящее цифровое искусство? Хорошим началом будет одно из популярные приложений  как DreamStudioMidjourneyWombo , или NightCafe . Вы cможете быстро понять, как можно использовать слова и фразы для создания изображений. Посмотрите публикации в разделе Подсказки  чтобы улучшить свои результаты. Затем перейдите к использованию блокнотов Google Colab.  Если у вас есть собственная хорошая видеокарта от nVidia, стоит попробовать Visions of Chaos на вашем локальном ПК. Если вы хотите обучить свои собственные модели ИИ, прочитайте раздел Обучение модели ИИ.

Нейросеть онлайн приложения (No code)

  • Artbreeder –  модель StyleGAN 
  • Artbreeder Collage — диффузия под управлением CLIP
  • CogView — текст в изображение, китайская модель типа DALL-E
  • conjure.art – новый сайт с текстом для изображения, который в настоящее время находится в стадии бета-тестирования
  • craiyon – ранее известный как dall-e mini, бесплатный и быстрый
  • Dall-e 2 — запишитесь в список ожидания, чтобы получить доступ к бета-версии  
  • DeepDreamGenerator – разработчики называют свое творение “генератор глубоких снов”. По стилю похож на Midjourney
  • Midjourney – самай хайповай нейросеть текст в изображение через бот Discord  
  • murf.ai – преобразование текста в речь голосом AI
  • neuro.love image-upscale – платный сервис масштабирования изображений
  • NightCafe – возможность создавать картины в нескольких стилях, VQGAN, генерация диффузией
  • Nebula41 – в разработке, видео VQGAN из текста
  • Ostagram – передача стиля между изображениями
  • Playform – передача стилей, обучение, преобразование изображений
  • pollinations.ai — еще один преобразователь текста в изображения
  • ProsePainter – еще один преобразователь текста в изображения
  • runwayml — редактирование видео на основе искусственного интеллекта
  • snowpixel – преобразовает текст в изображения, несколько вариантов
  • Stability.ai — новая модель Stable Diffusion 
  • StarryAI — преобразование текста в изображение с простым выбором стилей
  • synth.run — приложение преобразования текста в изображение для iOS, Android и в браузере
  • tokkingheads — анимированные портреты с ИИ
  • uberduck.ai – преобразование текста в речь с множеством разных голосов
  • Chaos vision– преобразователь текста в изображения на Windows (см. шаги по настройке машинного обучения)
  • Wombo –  Супер быстро и бесплатно
  • wzrd.ai — преобразование музыкального файла в анимацию из большого набора обученных GAN

Дискорд серверы про нейросети и искусство

  • Ai NFT Discord  – платформа для обсуждений, много полезных учебных статей и ресурсов StyleGAN
  • Disco Diffusion Discord – чат и техподдержка Disco
  • EleutherAI Discord — платформа для обсуждений
  • Jukebox Community Discord — сервер для пользователей OpenAI Jukebox, AI для создания музыки
  • LAION Discord — группа для участников, создающих реплику DALLE-E
  • Prompt Sharing Discord – сообщество для обмена текстовыми подсказками и их выходными изображениями
  • VQGAN+CLIP Discord – домашний сервер разработчиков

Нейросети для создания музыки

Создайте музыку с помощью ИИ, используя Jukebox от OpenAI . Выберете исполнителя, музыкальный жанр – ИИ сгенерирует для вас новую музыку. Для начала работы ознакомьтесь с инструментом colab.research.google.com

  • aiva — ИИ композиция из саундтреков и музыки
  • amper — бесплатное создание музыки с использованием искусственного интеллекта
  • boomy — создайте и опубликовать музыку с помощью ИИ , НО авторские права будут принадлежать им
  • D3Net-MSS — разделение музыки на отдельные слои для барабанов, вокала и т.д. 
  • Dance Diffusion – создание звуков на основе диффузии (инструкция)  
  • Dance Diffusion Finetuning — настройка вашего собственного набора звуков
  • Easy One Click Jukebox — генерирует музыку, включая пение, в различных жанрах и стилях
  • Jukebox Community Build — загрузите этот ipynb и поместите его в папку Colab Notebooks на Google Диске для использования.
  • lalal.ai — создание коммерческой музыки
  • Moises.ai — ИИ для удаления вокала или инструментов из любой песни
  • mubert — ИИ для создание музыкальных ремиксов
  • Official OpenAI Jukebox — официальный блокнот от OpenAI
  • Spleeter colab — разделяйте музыку на стэмы
  • Zags Jukebox v3.7 — ( мануал на YouTube )

Промты (подсказки) для нейросетей

Чтобы получить хорошие результаты с Stable Diffusion CLIP и VQGAN+CLIP, нужно найти правильные слова и фразы, которые направят нейронную сеть к нужным образам и стилистике.

Гиды по подсказкам

Нейросети для генерации текста

  • Goose.ai Playground — генерация текста с помощью GPT-Neo
  • OpenAI GPT3 Playground — генерация текста с помощью GPT-3 (требуется бесплатная учетная запись)
  • Textsynth Playground — генерация текста с использованием больших языковых моделей

Нейросети для перевода текста в изображение

Существует множество блокнотов Google Colab с инструкциями для text to image с предварительно обученными моделями GAN и Stable diffusion. 

Чтобы запустить скрипт блокнота на исполнение, воспользуйтесь кнопкой “Среда выполнения->выполнить все”.

Deforum Stable Diffusion 0.6 

Huemin Jax Diffusion 2.7 

pytti-tools v0.10 

VQGAN+CLIP 

All-in-one Private Diffusions Colab 

Fast Dreambooth 

Stable Worlds 

MathRockDiffusion 

robo_diffusion_v1 

Video Killed The Radio Star Diffusion 

Doohickey Diffusion 

optimized colab

Stable Diffusion Batch

Easy Diffusion 

NMKD Stable Diffusion GUI 

Simple Stable Diffusion 

Stable Diffusion WebUi 

Prompt Parrot v2.0 

Stable Diffusion Interpolation 

Deforum Stable Diffusion

FunkyHorses Stable Diffusion

NOP’s Stable Diffusion Colab v0.19 

Stable Diffusion Lite 

Interactive notebook for Stable Diffusion  

Stable Diffusion HuggingFace space 

Stable Diffusion notebook 

Official Stable Diffusion notebook 

DiscoStream v1.1 

Disco Diffusion v5.6 with Inpainting

DiscoArt [Batch Prompts + GPT3 generator] 

WAS’s Disco Diffusion v5.6-9 

Paint Pour Diffusion 

CLIP Prior + VQGAN

Textile Diffusion 

Floral Diffusion 

Liminal Diffusion v1 

DifNESfusion 1.35 

Medieval Diffusion 

FeiArt_Handpainted CG Diffusion 

Fantasy Diffusion 

Ukiyo-e Portrait Diffusion 

Lithography Diffusion 

Disco v5.2 Dynamic Prompting

Watercolor Diffusion 

EnzymeZoo edits to Huemin Jax Diffusion 

Liminal Diffusion beta

Pulp Sci-fi Diffusion v1 

Pixel Art Diffusion v3 

CogView 2 colab 

Latent Majesty Diffusion v1.6 

Centipede Diffusion v3.2 

Disco Diffusion v5.3 

Pixel Art Diffusion v2.01 

Disco Diffusion v5.2 + extra symmetry 

Pixel Art Diffusion v1.0 

Latent Majesty Diffusion v1.3 

Huemin Jax Diffusion 2.7 

V-Majesty Diffusion 

Modified ruDalle 

Latent Princess Generator 

DALL-E Flow 

Centipede Diffusion V3 

Improved Multi-Perceptor VQGAN+CLIP 

Simplified Disco Diffusion 

pytti-tools v0.10 

DALL-E Mini 

Looking Glass v1.5 

Disco v5.2 + optical flow warping for init videos 

ruDalle Aspect Ratio 

2D Animation Enabled JAX CLIP Guided Diffusion v2.7 

Latent Diffusion LAION 400M 

CompVis Latent Diffusion text to image 

CLOOB conditioned latent diffusion 

Disco Diffusion v5.1 with NLP prompt generation 

Disco Diffusion v5.1 

GLID-3 

CLOOB Guided Diffusion 

MindsEye beta 

Multi-Perceptor VQGAN + CLIP 

AudioCLIP+Disco v5 Turbo+Smooth 

Disco Diffusion v5 (Turbo+Smooth)

JAX CLIP Guided Diffusion v2.7 with mods 

JAX CLIP Guided Diffusion v2.7 

Disco Diffusion v5 with Turbo mod 

Disco Diffusion v5 

Laionide v3 

JAX 2.6 Neuralism Edit 

pytti-tools (fork of pytti 5 beta) 

Text to Image (CC12M Diffusion) 

JAX 2.5 Edit 

JAX CLIP Guided Diffusion v2.6 

Zooming VQGAN+CLIP 

Simplified CC12m 

Dango’s Princess Generator 

Disco Diffusion v4.1 

Looking Glass v1.4 –

360Diffusion 

nshepperd’s JAX CLIP Guided Diffusion v2.6 

Text to Image (CC12M Diffusion) 

Disco Diffusion v4 

Dango’s Princess Generator  

OpenAI GLIDE notebook 

nshepperd’s JAX CLIP Guided Diffusion v2.5 

Looking Glass v1.3 

v-diffusion-pytorch 

ruDALLE arbitrary resolution v2.0 

IllusTrip3D 

nshepperd’s JAX CLIP Guided Diffusion v2.3 

Disco Diffusion v3.1 [w/ SLIP & DangoCutn] 

QoL MP Diffusion v2 

CLIP Guided Deep Image Prior 

Mse regularized Modified_VQGANCLIP_zquantize 

EleutherAI VQGAN+CLIP 

VQGAN+CLIP z-quantize with augmentation 

Disco Diffusion v5.6 

 

 

Нейросети улучшения качества фото

  • GigaPixel AI от Topaz Labs (стоимость 99 долларов)  – лучший на сегодняшний день
  • Real-ESRGAN – (github) хороший инструмент с открытым исходным кодом
  • Real-ESRGAN Sber – хорошая отлаженная модель ESRGAN
  • chaiNNer — может выполнять пакетную обработку ESRGAN upscale и многое другое.
  • Cupscale — интерфейс для ESRGAN
  • Latent-SR — преобразование в супервысокое разрешение с диффузией Nightmare Ai
  • Neural Love – платный сервис апскейлинга
  • SuperRes Diffusion– Пакетное масштабирование и сверхвысокое разрешение с диффузией
  • Upscale Model Database — большой набор обученных моделей для масштабирования различных типов контента.
  • Waifu2x  (github) — предназначен для аниме/манги
  • WaifuXL – новее и превосходит Waifu2x по качеству
  • LetsEnhance.io – платный веб-сервис для апскейлинга изображений
  •  

Нейросети для улучшения качества видео

  • Video Enhance AI – инструмент для масштабирования и интерполяции видео
  • AnimationKit AI– инструмент для масштабирования и интерполяции видео
  • 3D-эффект Кена Бернса из одного изображения – создание анимированного видео из 2D изображения
  • 3D Photo Inpainting – крутые 3D эффекты для 2D изображений
  • DAIN colab — интерполяция с учетом глубины
  • EbSynth – стилизует видео, добавляя к нему ИИ обработку
  • ESRGAN video– увеличит разрешение видео с помощью ESRGAN
  • FILM: frame interpolation – плавная интерполяция/морфинг видео
  • Flowframes– бесплатный инструмент для Windows, использует RIFE и другие модели
  • RIFE– плавная интерполяция видео для увеличения частоты кадров
  • Super Slomo — увеличит частоту кадров видео
  • VIDEO art and styling tools – перенос стиля видео, интерполяция, высокое разрешение и многое другое