Волшебный мир локальных нейросетей

Помните пару-тройку лет назад появились Stable Diffusion и Midjourney с возможностью делать картинки по текстовому описанию? Технология привлекала внимание, но надо признать, картинки были так себе — можно было состряпать необычную композицию, но практически по любой картинке было видно, что она сгенерирована нейросетью. Такие изображения быстро набили оскомину и их использование вызывало больше жалость к автору (неужели тебе больше нечем проиллюстрировать статью???), чем вау-эффект.

Так вот, теперь это история и те модели устарели.

Теперь существуют десятки современных моделей первого тайера которые делают намного лучшие картинки — некоторые из которых непросто отличить от фотографий.

Посмотрите на эту картинку, можете ли однозначно сказать, что это не фотография?

На самом деле — да, можно с высокой степенью точности определять, является ли картинка фотографией или сгенерирована. Я имею ввиду в целом впечатление от картинки и её качество — в целом выглядит очень правдоподобно. По крайней мере с точки зрения обычного человека, у которого не намётан глаз на нейросетевую генерёнку.

А что скажите насчёт этого видео — реальное или генерёнка?

Вот ещё пара картинок сгенерированных с помощью ИИ:

А это полностью сгенерированные видео:

Примечание: вы только не думайте, что такой убого-озабоченный сюжет это единственное на что способны ИИ. Нет, эти примеры больше характеризуют их автора, чем современные возможности нейросетей.

Погружаясь в мир новых нейросетей для генерации картинок, я выяснил для себя, что генерация высококачественного видео с помощью ИИ оказывается тоже доступна всем желающим.

Существует много сайтов где можно совершенно бесплатно сгенерировать картинку с помощью ИИ используя ту или иную современную модель. Но оказалось что там или ограничения на наготу или нужно платить деньги за платные пакеты.

Но также оказалось, что многие современные модели ИИ можно запускать прямо у себя на компьютере. Без ограничений на количество генерируемых картинок и на их содержимое.

Кроме ожидаемого варианта запуска на Python оказалось, что существует графический интерфейс, который: 1) упрощает запуск; 2) собрал много открытых моделей в одном месте. И вот тут понеслось!

Современных генераторов картинок оказалось много и многие из них хорошие.

Оказалось, что прямо у себя на компьютере можно генерировать видео — из текстовых запросов и из картинок.

В общем, если вам тоже захотелось это попробовать, то вот первые главы бесплатной онлайн книги по генерации картинок и видео на своём компьютере:

0. Нужен ли курс статей по генерации изображений и видео с помощью нейросетей на своём компьютере?
1. Как использовать нейросети для создания изображений, видео и музыки на своём компьютере — что для этого нужно и какой результат можно получить
2. Как установить ComfyUI в Windows и Linux
3. Виды ИИ (нейросетей) для генерации картинок и видео. Основные термины
4. Лучшие ИИ (нейросети) для генерации картинок, видео, музыки и 3D моделей (краткое описание готовых шаблонов ComfyUI для генерации фото и видео на своём компьютере)
5. Знакомство с ComfyUI
6. Основы генерации изображений из текстовых запросов на своём компьютере
7. Расширение области видимости изображений с помощью нейросетей (расширение кадра, изменение соотношения сторон с добавлением новой информации — outpainting)
8. Замена, удаление и добавление объектов на изображение с помощью ИИ — редактирование по маске (inpainting)

Глав будет больше — книга находится в процессе написания.