Колонка AI Painting: HAI Up~Stablediffusion|Wensheng Video|Controlnet|SDXL|Плагин Comfyui
Колонка AI Painting: HAI Up~Stablediffusion|Wensheng Video|Controlnet|SDXL|Плагин Comfyui

В этой статье продолжает обновляться список людей, на которых стоит подписаться. Это колонка, посвященная искусству рисования, которую читают 1500 человек. Добавьте ее в избранное или в колонку избранного.

Горячие сведения: Лайки бесплатны, но они могут радовать несколько дней;

Три последовательных раунда бесценны, но комментарии могут помочь вам быстрее стать боссом 6-го уровня;

Компания «три в одном» священна, пожалуйста, отдайте свою священную компанию «три в одном»!

Пожалуйста, помогите маленькой милашке, которой посчастливилось расчистить кисть, и спасти растерянного ребенка.

Зона обмена информацией👇👇👇

Язык кода:actionscript
копировать
Локальный установочный пакет SD
https://pan.quark.cn/s/8e66ada8a434
1. Слово подсказки по умолчанию: https://pan.quark.cn/s/5a0d7d9d784d 
2. скелетонная диаграмма openpose: https://pan.quark.cn/s/b73b2531675f 
31 000 штриховых рисунков: https://pan.quark.cn/s/51eaee9a5ea7. 
4. Экология SDXL: https://pan.quark.cn/s/2952bf68e0b0 
5. Коллекция рабочих процессов comfyui: https://pan.quark.cn/s/320387279505 
6. Вся экология контрольной сети: https://pan.quark.cn/s/217f482da2e4.
7. Коллекция плагинов Comfyui: https://pan.quark.cn/s/0aef558217fe.
8.Stable diffusionплагин Энциклопедия:https://pan.quark.cn/s/2ae2f155be8b

Все материалы по рисованию с помощью искусственного интеллекта — Список для чтения — Сообщество разработчиков Tencent Cloud — Tencent Cloud

OpenAI Sora Реальность создания 1-минутного видео больше не существует!

Ожидается, что руководство по шрифтам, созданным CCTV AI, будет обновлено (пожалуйста, следите за обновлениями в долгосрочной перспективе)

1. Введение

  • Краткое описание ИИ Предпосылки возникновения живописи
  • Представляем стабильную версию Диффузионная технология и ее применение. Приложения в живописи
  • Упомяните технологию ControlNet и ее влияние на Влияние живописи

2. Обзор технологии стабильной диффузии.

  • Дайте определение стабильной диффузии и тому, как она работает.

3. Подробное объяснение технологии ControlNet.

  • Объяснить основные концепции технологии ControlNet.
  • Проанализируйте, как ControlNet повышает контроль и точность рисования.
  • Демонстрация случаев применения технологии ControlNet в реальной покраске.

4. Подготовительные работы

  • Описывает необходимую конфигурацию аппаратного и программного обеспечения.
  • Рекомендуемые учебные ресурсы и сообщества
  • Обсудите, как ставить подходящие цели обучения

5. Практическое руководство по устойчивой диффузии.

  • Шаг 1. Установите и настройте необходимую программную среду.
  • Шаг 2. Понимайте и используйте основные команды Stable Diffusion.
  • Шаг 3. Попробуйте разные настройки параметров для достижения наилучших результатов.

6. Навыки применения ControlNet

  • Совет 1: Как использовать ControlNet для детального управления
  • Совет 2. Используйте ControlNet для миграции стилей
  • Совет 3: Объедините ControlNet для творческого синтеза

7. Анализ случая

  • Случай 1: Создайте пейзажную картину на определенную тему.
  • Случай 2. Создайте аниме-персонажа в уникальном стиле.
  • Кейс 3: Воссоздание стиля классических произведений искусства

8. Часто задаваемые вопросы и решения

  • Вопрос 1: Как улучшить качество создаваемых изображений?
  • Вопрос 2. Как бороться с нерелевантным или неточным контентом, создаваемым моделью?
  • Вопрос 3: Как оптимизировать рабочий процесс, чтобы повысить эффективность?

9. Обмен новейшими технологиями и ссылки на ресурсы для обучения и исследований.

Sora、StableForge、StableCasecade、Stable3.0、SDXLLighting、PlaygroundV2.5,Stable webui1.8ждать

Рабочий дисплей

возможность писать

Эта статья шаг за шагом проведет вас от знакомства с рисованием ИИ до фактической работы. Затем мы также шаг за шагом разберем наиболее важные части видео Controlnet и Vincent, используя графические методы и определенные параметры для воспроизведения текста CCTV, генерируемого ИИ. даря вам визуальный праздник живописи с помощью искусственного интеллекта.

1. Введение

  • Краткое описание ИИ Предпосылки возникновения живописи На самом деле, когда дело доходит до предыстории, нам больше всего следует знать наших партнеров в области дизайна, игр, электронной коммерции и рекламы. Однако специалистам, связанным с нашими программами, легче начать, столкнувшись с большим их количеством. параметров всем легче понять и следовать им. В области компьютерного оборудования, искусства и дизайна всем требуется не только утонченность, но и эффективность представления изображений, поэтому ИИ. Появилась живопись, и Stablediffusion с открытым исходным кодом является наиболее широко доступным для общественности и с ним проще всего начать. живописьприложение。
  • Stable Диффузионная технология и ее применение. Приложения в живописи Stable Почему Diffusion можно использовать во многих ИИ Продукция живописи выделяется? Самое главное, что это открытый исходный код.,Имеет богатые плагины,Огромное сообщество и на данный момент очень полная экология, включая большие модели.,Lora,плагин,Винсентианская картина,Видео Винсента и многое другое,Недавно популярные Sora и Stablediffusion3 имеют одинаковую архитектуру.,Стабильная диффузия также снова оказалась в центре внимания.
  • Технология ControlNet и ее применение Влияние живописи Если Stablediffusion решает проблему превращения воображения людей в реальность, то ControlNet внедряет воображение людей в их души. Как следует из названия, ControlNet — это управляющая сеть, то есть все можно контролировать. Линии, контуры, граффити и жесты — все можно контролировать. . из.

2. Обзор технологии стабильной диффузии.

  • Дайте определение стабильной диффузии и тому, как она работает. Stable Diffusion это модель скрытой диффузии текста в изображение (LDM) глубокого обучения, выпущенная в 2022 году. / Latent Diffusion Модель), автор CompVis、Stability AI и LAION Создано исследователями и инженерами. Он использует от LAION-5B Изображения размером 512x512 подмножества базы данных с открытым исходным кодом обучаются и решаются путем введения скрытого векторного пространства. Diffusion Помимо использования для задач Вэньшэнту, узкое место в скорости также можно использовать для задач Вэньшэнту, определенных характеристик персонажей и даже задач супер-счета или раскраски.

Одна картинка для пониманияSDПроцесс рисования:декодирование текста-->большая модель(Lora)Определить стиль--->CLIPИнверсия изображения--->Случайный шум семплера--->U-NETгенерация изображения--->VAEЦвет---->finish

3. Подробное объяснение технологии ControlNet.

  • Основные концепции технологии ControlNet Введение в модель ControlNet (1) OpenPose-поза действия Введение: Включая кости туловища, конечностей и лица.

(2) Глубина-глубина

Введение: Определите чисто черно-белую инфографику на основе предоставленных изображений.

(3) Обнаружение канни-края

Введение. Эта модель используется для определения краевых элементов на изображениях.

(4) Линейный эскиз

Введение: Основанная на модели Canny, Lineart представляет собой комбинацию препроцессора и модели, которая специально реализует функции раскраски на основе линейных рисунков в стиле аниме.

(5)SoftEdge-мягкий край

Введение: Эта модель похожа на Canny, поскольку она описывает края изображения.

(6)Каракули-граффити

Введение: Scribble — это более свободный и неограниченный инструмент для рисования, чем SoftEdge, который дает ИИ большую свободу творчества.

(7) Блокировка плитки

Введение. Основным элементом управления этой модели является активная идентификация содержимого каждой части в процессе разделения изображения на небольшие части, тем самым сохраняя содержимое изображения неизменным.

  • Как ControlNet повышает управляемость и точность ИИ-живописи

4. Подготовительные работы

  • Описывает необходимую конфигурацию аппаратного и программного обеспечения.
  • Рекомендуемые учебные ресурсы и сообщества
  • Обсудите, как ставить подходящие цели обучения

Поэтому, чтобы лучше изучить SD, я рекомендую, чтобы ваша местная видеокарта была выше 16G. Если вы студент или не связанный с этим специалист и пока не хотите покупать дорогие видеокарты, то я рекомендую. HAI-платформа Tencent Cloud, Pengpai Computing Power, готова к использованию и использует высокопроизводительный графический процессор для обслуживания HAI и быстрого развертывания LLM, ИИ. живопись,Видеопамять 24 ГБ и более высокая версия видеопамяти 32 ГБ,Маме больше не придется беспокоиться о том, что я взорву видеопамять! ! !

Сейчас действуют весенние акции, вы можете получить ваучеры на сумму до 200 юаней.

Богатая предустановленная среда

Множество сценариев развертывания AIGC, легко реализуемых

Сравнение производительности пакета вычислительной мощности

Несколько высокопроизводительных вычислительных пакетов, высокая производительность с первого взгляда

На основе Tencent CloudОблачный сервер графического процессораБазовая вычислительная мощность,Обеспечить высокопроизводительное облако по принципу «включай и работай». Гибкое использование.,Развертывание в один клик

Также вас ждет большое количество видеокурсов.

5. Практическое руководство по устойчивой диффузии.

  • Шаг 1. Установите и настройте необходимую программную среду. Нажмите Создать
    Выбирайте подходящую вычислительную мощность
    Подключить экземпляр

Выберите метод входа в Gradio WebUI, чтобы войти в визуальный интерактивный интерфейс контрольной точки Stable Diffusion.

  • Шаг 2. Понимайте и используйте основные команды Stable Diffusion. Перезапуск WebUI

Если вы обнаружите, что интерфейс WebUI не может быть нормально открыт во время использования, вы можете войти в Терминал и перезапустить службу WebUI, выполнив следующие инструкции.

Язык кода:shell
копировать
cd stable-diffusion-webui
(python3 -u launch.py --skip-prepare-environment --xformers --listen --enable-insecure-extension-access --port=6889 >> /var/log/sd_service.log 2>&1  &) && tail -f /var/log/sd_service.log

Просмотр журнала запуска WebUI

Если вы хотите просмотреть WebUI Можно ввести статус работы, включая загрузку модели, создание изображений, ход загрузки плагина и т. д. Терминал с помощью следующей команды Просмотр журнала запуска WebUI。

Язык кода:shell
копировать
cd stable-diffusion-webui
tail -f /var/log/sd_service.log

Установить китайский плагин

Выберите расширения

Введите следующий путь, нажмите «Установить» и перезапустите webui.

Язык кода:shell
копировать
https://gitcode.net/overbill1683/stable-diffusion-webui-localization-zh_Hans
  • Шаг 3. Познакомьтесь с webui

Древние стихи: Небо темное, ночь еще молода, зеленые облака танцуют в сказочных одеждах, в небе слышна нефритовая флейта, луна полная, дорога во дворец Лишань длинная.

Заполняем позитивными словами-подсказками

Язык кода:shell
копировать
1 celestial maiden gazing up at the full moon over a mountain range,
pausing in her celestial dance. (mythological illustration, fantasy art, spiritual art),
dramatic night sky illuminated by a large silver moon,
pastel clouds drifting across the starry sky, mountain silhouettes in the distance, 
the maiden's flowing robes and long sleeves swaying gently, 
limited color palette with shades of blue, pink and purple
(concept art, romantic art, poetic art), serene yet wistful mood.

обратное слово-подсказка

Язык кода:shell
копировать
(low quality, worst quality:1.4), negativeXL_D, cgi, text, signature, watermark, extra limbs, 

Вы можете создавать картинки~~

6. Навыки применения ControlNet

  • Совет 1: Как использовать ControlNet для детального управления Например, мы контролируем конкретную позу персонажа.

Все то же самое слово-подсказка

  • Совет 2. Используйте ControlNet для миграции стилей

Говоря о передаче стилей, мы должны упомянуть самый важный компонент в сети управления, IPadapter, созданный Tencent AI Lab, который представляет собой эффективный и легкий адаптер, который может реализовать предварительно обученную функцию подсказки модели диффузии текста в изображение.

Выберите понравившуюся картинку и загрузите ее в controlnet.

Он может создавать изображения очень похожих стилей, а также может использоваться для поддержания единообразия символов.

  • Совет 3: Объедините ControlNet для творческого синтеза

Создание обложки красного конверта. Прежде чем приступить к дизайну, вам необходимо определить тему и стиль обложки красного конверта. Вы можете выбрать тему в соответствии с вашими предпочтениями или атмосферой праздника, например, Праздник Весны, День святого Валентина и т. д. В то же время вам также необходимо определить стиль, например простой, мультяшный, абстрактный и т. д.

1. Создайте текст обложки

Для начала вам необходимо выбрать подходящую модель SD и Lora. На рынке представлено множество программ для рисования с использованием искусственного интеллекта. Вот демонстрация, основанная на SD.

В качестве базовой модели я использую настоящую большую модель majic_v7 от Maiju.

Лора выбери любую Лору на тему дракона.

Создайте сопроводительный вопрос в красном конверте и откройте PS.

Выбор длины и ширины 512*768

Черный фон, белый шрифт.

Например, с Новым 2024 годом.

При написании слов-подсказок старайтесь соответствовать стилю Лоры и добавляйте мои собственные слова-подсказки.

Язык кода:javascript
копировать
Masterpiece, best quality, 4k, Chinese New Year, red background, festive atmosphere, dragon illustration, Chinese Dragon Year Spring Festival Gala mascot, cartoon, cute,

Увеличьте дважды, в качестве метода выборки я выбираю DPM++ 2M Karras

Зайдите в controlnet unit1 и выберите qrcode.

Перейдите в controlnet unit2 и выберите brit.

Параметры показаны на рисунке, выбор партии — 4, изображение может быть изменено.

7. Анализ случая

  • Случай 1: Создайте пейзажную картину на определенную тему.

Лепестки яйца-пашот

Закат

  • Случай 2. Создайте аниме-персонажа в уникальном стиле.
  • Кейс 3: Воссоздание стиля классических произведений искусства

Ван Гог

8. Часто задаваемые вопросы и решения

  • Вопрос 1: Как улучшить качество создаваемых изображений?

1. Включите восстановление HD.

2. Увеличить разрешение

3. Выберите подходящую большую модель.

  • Вопрос 2. Как бороться с нерелевантным или неточным контентом, создаваемым моделью?

Ненужное содержание появляется в обратном слове-подсказке, а вес нужных элементов усиливается позитивными словами-подсказками.

  • Вопрос 3: Как оптимизировать рабочий процесс, чтобы повысить эффективность?

Может использоваться с LCM для эффективного повышения эффективности.

9. Обмен новейшими технологиями и ссылки на ресурсы для обучения и исследований.

SoraМожно ссылатьсяOpenAI Sora Реальность создания 1-минутного видео больше не существует!

Stableforge

SVD, которым мы делились ранее, будь то видео Wensheng, длинное видео или видео Tusheng, все было реализовано в Comfyui, но большинство пользователей все еще используют его в webui, так что подделайте его здесь, A111 нравится реализация интегрированного подхода SVD.

Функции

меньше видеопамяти

более высокая скорость

большее разрешение изображения

Поддержка СВД

StableCascade

Обновленная модель Cascade от Stability. Эта модель улучшает качество изображения на 40% по сравнению с SDXL, и теперь официальная версия поддерживает рабочий процесс Comfyui.

Обзор модели

Стабильный каскад состоит из трех моделей: Stage A, Stage B и Stage C, которые представляют собой каскад сгенерированных изображений, отсюда и название «Стабильный каскад». Уровни A и B используются для сжатия изображений, аналогично тому, как VAE работает при стабилизации диффузии. Однако с помощью этой настройки можно добиться более высокого сжатия изображения. В то время как модель Stable Diffusion использует коэффициент пространственного сжатия 8 и кодирует изображения с разрешением от 1024 x 1024 до 128 x 128, Stable Cascade реализует коэффициент сжатия 42. При этом изображение размером 1024 x 1024 кодируется в 24 x 24 при точном декодировании изображения. Это приносит огромные преимущества в виде более дешевого обучения и умозаключений. Кроме того, этап C отвечает за создание небольшого подсказки 24 x 24 для заданной текстовой подсказки. На изображении ниже это наглядно показано

Для локальной версии нажмите локальное обновление.

существоватьHAIиспользуется на платформеcomfyuiПеретащите этот рабочий процессПросто введите слово-подсказку~

Язык кода:cs
копировать
transparent cube suspended, volcanic landscape within, 
molten lava rivers flowing, night sky canvas, 
twinkling stars speckled above, moon's glow soft, 
juxtaposition of icy chill against fiery eruptions, 
glacial formations bordering the inferno,
 slow dance of ash and vapor, 
 lunar reflection on icy surfaces, 
 cube edges catching the celestial light,
  dynamic contrast of elements, 
 primeval earth forces encased,
  (best quality, 4k, 8k, highres, masterpiece:1.2), ultra-detailed, 
  (photorealistic:1.37), frozen and fiery, harmonious duality, (nature photography), volcanic activity vibrant, (environmental art), 
  (digital painting), atmospheric effects, 
mystical emanation, elemental balance, serene, sublime geology,

Все о рисовании с помощью искусственного интеллекта — список для чтения — сообщество разработчиков Tencent Cloud Developer

Зона обмена информацией👇👇👇

Язык кода:javascript
копировать
Локальный установочный пакет SD
https://pan.quark.cn/s/8e66ada8a434
1. Слово подсказки по умолчанию: https://pan.quark.cn/s/5a0d7d9d784d 
2. скелетонная диаграмма openpose: https://pan.quark.cn/s/b73b2531675f 
31 000 штриховых рисунков: https://pan.quark.cn/s/51eaee9a5ea7. 
4. Экология SDXL: https://pan.quark.cn/s/2952bf68e0b0 
5. Коллекция рабочих процессов comfyui: https://pan.quark.cn/s/320387279505 
6. Вся экология контрольной сети: https://pan.quark.cn/s/217f482da2e4.
7.Коллекция плагинов Comfyui:
8.Stable diffusionплагин Энциклопедия:https://pan.quark.cn/s/2ae2f155be8b
boy illustration
Углубленный анализ переполнения памяти CUDA: OutOfMemoryError: CUDA не хватает памяти. Попыталась выделить 3,21 Ги Б (GPU 0; всего 8,00 Ги Б).
boy illustration
[Решено] ошибка установки conda. Среда решения: не удалось выполнить первоначальное зависание. Повторная попытка с помощью файла (графическое руководство).
boy illustration
Прочитайте нейросетевую модель Трансформера в одной статье
boy illustration
.ART Теплые зимние предложения уже открыты
boy illustration
Сравнительная таблица описания кодов ошибок Amap
boy illustration
Уведомление о последних правилах Points Mall в декабре 2022 года.
boy illustration
Даже новички могут быстро приступить к работе с легким сервером приложений.
boy illustration
Взгляд на RSAC 2024|Защита конфиденциальности в эпоху больших моделей
boy illustration
Вы используете ИИ каждый день и до сих пор не знаете, как ИИ дает обратную связь? Одна статья для понимания реализации в коде Python общих функций потерь генеративных моделей + анализ принципов расчета.
boy illustration
Используйте (внутренний) почтовый ящик для образовательных учреждений, чтобы использовать Microsoft Family Bucket (1T дискового пространства на одном диске и версию Office 365 для образовательных учреждений)
boy illustration
Руководство по началу работы с оперативным проектом (7) Практическое сочетание оперативного письма — оперативного письма на основе интеллектуальной системы вопросов и ответов службы поддержки клиентов
boy illustration
[docker] Версия сервера «Чтение 3» — создайте свою собственную программу чтения веб-текста
boy illustration
Обзор Cloud-init и этапы создания в рамках PVE
boy illustration
Корпоративные пользователи используют пакет регистрационных ресурсов для регистрации ICP для веб-сайта и активации оплаты WeChat H5 (с кодом платежного узла версии API V3)
boy illustration
Подробное объяснение таких показателей производительности с высоким уровнем параллелизма, как QPS, TPS, RT и пропускная способность.
boy illustration
Удачи в конкурсе Python Essay Challenge, станьте первым, кто испытает новую функцию сообщества [Запускать блоки кода онлайн] и выиграйте множество изысканных подарков!
boy illustration
[Техническая посадка травы] Кровавая рвота и отделка позволяют вам необычным образом ощипывать гусиные перья! Не распространяйте информацию! ! !
boy illustration
[Официальное ограниченное по времени мероприятие] Сейчас ноябрь, напишите и получите приз
boy illustration
Прочтите это в одной статье: Учебник для няни по созданию сервера Huanshou Parlu на базе CVM-сервера.
boy illustration
Cloud Native | Что такое CRD (настраиваемые определения ресурсов) в K8s?
boy illustration
Как использовать Cloudflare CDN для настройки узла (CF самостоятельно выбирает IP) Гонконг, Китай/Азия узел/сводка и рекомендации внутреннего высокоскоростного IP-сегмента
boy illustration
Дополнительные правила вознаграждения амбассадоров акции в марте 2023 г.
boy illustration
Можно ли открыть частный сервер Phantom Beast Palu одним щелчком мыши? Супер простой урок для начинающих! (Прилагается метод обновления сервера)
boy illustration
[Играйте с Phantom Beast Palu] Обновите игровой сервер Phantom Beast Pallu одним щелчком мыши
boy illustration
Maotouhu делится: последний доступный внутри страны адрес склада исходного образа Docker 2024 года (обновлено 1 декабря)
boy illustration
Кодирование Base64 в MultipartFile
boy illustration
5 точек расширения SpringBoot, супер практично!
boy illustration
Глубокое понимание сопоставления индексов Elasticsearch.
boy illustration
15 рекомендуемых платформ разработки с нулевым кодом корпоративного уровня. Всегда найдется та, которая вам понравится.
boy illustration
Аннотация EasyExcel позволяет экспортировать с сохранением двух десятичных знаков.