LoRA становится необходимой, когда стандартного промта уже недостаточно. Промтом можно описать сцену: кто присутствует, где располагается, какое освещение, в чем одет и какой стиль. Однако промт не всегда способен поддерживать последовательность. Сегодня нейросеть создаст одного персонажа, а завтра — схожего, но с другим лицом.
LoRA подходит к этой проблеме по-другому. Она не требует от модели «стараться», а добавляет к ней небольшой обученный файл. Это помогает поддерживать нужный стиль, персонажа, лицо, объект или тип изображения.
В этой статье мы рассмотрим, что такое LoRA, как она функционирует, какие нейросети её поддерживают, где можно скачать готовые модели и как обучить свою — под конкретного персонажа, стиль, лицо или видео.
Читайте также: 25 нейросетей для генерации изображений
Что такое LoRA в нейросетях и как она работает
LoRA представляет собой дополнительный файл с обученными параметрами, который подключается к основной модели. Он не заменяет модель, а работает вместе с ней.
Основная модель отвечает за общую генерацию. Например, Stable Diffusion, Flux, Qwen Image, Wan 2.2, LTX 2.3 или Z Image уже способны создавать изображения или видео. LoRA добавляет к ним узкий навык: узнаваемое лицо, конкретного персонажа, иллюстрационный стиль, тип освещения, позу, ракурс, одежду, объект или ускоренный режим генерации.
Проще всего представить так:
- промт указывает модели, что нужно выполнить в данный момент;
- LoRA изменяет метод, которым модель это делает.
Если в промте указать «реалистичный портрет мужчины в деловом костюме», модель создаст новый образ. Если подключить LoRA, обученную на конкретном человеке, модель будет стремиться сохранить именно его черты. Если применить LoRA для стиля, она будет корректировать изображение в соответствии с этой визуальной манерой. Если включить LoRA для ускорения, процесс генерации сможет происходить за меньшее количество шагов.
Главное отличие от полного обучения модели заключается в размере и сложности. Полная переобучение большой модели требует больших затрат времени и ресурсов. LoRA обучает лишь небольшую часть дополнительных параметров, благодаря чему файл получается легче, его проще скачать, хранить, подключать и заменять.
Однако у LoRA есть важное ограничение: она должна соответствовать базовой модели. LoRA, созданная для Stable Diffusion, не обязательно будет работать с Flux. LoRA для Flux 1 не станет автоматически LoRA для Flux 2. LoRA для Qwen Image Edit не равна LoRA для Wan 2.2.
Если файл обучен под одну архитектуру, а его подключают к другой, результат может либо не появиться вовсе, либо быть некачественным: лица могут «плыть», стиль станет нечетким, видео начнет артефактить, а ComfyUI выдаст ошибку.
Статья в тему: 19 промтов для обработки фото в ChatGPT
Какие нейросети поддерживают LoRA
LoRA чаще всего применяется в открытых и полуоткрытых экосистемах, где возможно подключение внешних весов, изменение рабочего процесса и запуск моделей локально или через облачные сервисы.
1. Stable Diffusion
Stable Diffusion — наиболее развитая экосистема для LoRA. Под неё доступно огромное количество готовых файлов: для персонажей, лиц, стилей, одежды, поз, аниме, фотореализма, товаров, интерфейсов и иллюстраций.
LoRA для Stable Diffusion используется в Automatic1111, Forge, ComfyUI и других интерфейсах. В старых версиях LoRA часто подключают прямо в промте через конструкцию с указанием файла и силы эффекта. В ComfyUI чаще применяют отдельную ноду LoRA Loader.
Важно учитывать версию модели. LoRA для Stable Diffusion 1.5, SDXL и других баз не следует смешивать. В названии файла и описании обычно указано, для какой модели он предназначен.
2. Flux LoRA: Flux 1, Flux 2, Dev, Turbo и Klein
Flux используется для генерации реалистичных изображений, портретов, стилей, рекламных визуалов и сложных задач в ComfyUI.
У Flux есть различные версии и ветви: Flux 1, Flux Dev, Flux 2, Flux 2 Dev, Turbo, Klein. Для LoRA это критично. Файл должен соответствовать не просто «Flux», а конкретной версии модели.
Flux LoRA применяется для фотореализма, портретов, стилизации, ускорения генерации, работы с персонажами и отдельными визуальными эффектами. Часто вместе с файлом LoRA нужен готовый workflow для ComfyUI, так как новые версии Flux могут требовать конкретных нод, настроек и дополнительных файлов.
Если LoRA называется «Flux», но в описании не указана версия, это риск. Перед загрузкой нужно проверить, для какой базовой модели она была обучена.
3. Qwen LoRA: Image, Edit, consistency и multiple angles
Qwen Image и Qwen Image Edit используются для генерации и редактирования изображений. В этой ветке LoRA часто необходима не только для стиля, но и для сохранения персонажа, нескольких ракурсов, редактирования и последовательности.
Qwen Image — это генерация изображений с нуля. Qwen Image Edit — изменение уже существующего изображения. Поэтому LoRA для одной ветки не следует автоматически переносить в другую.
В Qwen LoRA применяется для сохранения лица, повторения персонажа, работы с несколькими ракурсами, правки деталей и ускорения генерации. Отдельно есть LoRA, которые помогают удерживать один и тот же объект или персонажа в разных сценах.
4. Wan 2.2 LoRA для видео
Wan 2.2 — это видеогенерация. Здесь LoRA применяется для image-to-video, text-to-video, relight, ускоренных режимов, анимации и отдельных видеоэффектов.
В видео LoRA функционирует сложнее, чем в статичных изображениях. Нужно учитывать не только стиль кадра, но и движение, освещение, последовательность, модель, рабочий процесс и настройки генерации. Поэтому для Wan 2.2 особенно важно использовать не просто файл, а совместимую схему запуска.
Если LoRA создана для image-to-video, ее не следует без проверки применять в другом сценарии. Если файл предназначен для ускорения или relight, он решает именно эту задачу, а не любую задачу видео.
5. LTX 2.3 LoRA
LTX 2.3 относится к видеомоделям. Вокруг неё используют LoRA для distilled-версий, управления движением, входным контекстом, идентичностью и video workflow.
В названиях файлов для LTX часто встречаются технические пометки: 22B, distilled, 384, IC-LoRA, ID-LoRA, safetensors. Их нельзя игнорировать. Они указывают, для какой версии модели и какого сценария создан файл.
LTX LoRA чаще требует аккуратного рабочего процесса. Это не тот случай, когда достаточно поместить файл в папку и ждать стабильного результата на любой схеме.
6. Z-Image и Z-Image Turbo LoRA
Z-Image и Z-Image Turbo используются для генерации изображений. Z-Image Turbo ориентирована на быстрый инференс, а базовая Z-Image может быть более удобной как основа для обучения LoRA.
Это важное различие. Turbo-модель может хорошо подходить для быстрого запуска, но не всегда является лучшей базой для обучения. Если требуется создать свою LoRA, необходимо обратить внимание на версию, рекомендуемую конкретным тренером или автором модели.
Для Z Image уже существуют облачные тренеры и готовые рабочие процессы. LoRA применяются для стилей, персонажей, фотореализма и отдельных визуальных задач.
Где брать и как использовать LoRA
LoRA можно скачать готовой или создать самостоятельно. Начать лучше с готовых файлов: это поможет лучше понять механику, возможности LoRA, совместимость и типичные ошибки.
Создание своей LoRA необходимо позже — когда готовые варианты не решают поставленную задачу. Например, нужно стабильно воспроизводить конкретное лицо, персонажа, товар, фирменный стиль или визуальный формат.
Где скачать готовые LoRA
Готовые LoRA можно найти на CivitAI и Hugging Face.
— На CivitAI доступны LoRA для Stable Diffusion, SDXL, Flux, персонажей, стилей, фотореализма, NSFW и ComfyUI. На странице модели обычно указывается совместимый checkpoint и предоставляется файл .safetensors.
— На Hugging Face есть Flux, Qwen Image, Wan 2.2, LTX 2.3, Z Image, distilled-модели, Lightning-LoRA, video-LoRA, training scripts и workflow.
— На GitHub можно найти workflow, инструменты для тренеров, ноды и инструкции для ComfyUI, Flux, Wan 2.2, LTX 2.3 и других моделей.
LoRA также доступна на ModelScope, LibLib, Tensor.art, fal.ai и других платформах.
Как подключить LoRA в ComfyUI
В ComfyUI LoRA обычно подключается через отдельную ноду.
Базовый порядок действий таков:
- Скачайте файл LoRA в формате .safetensors.
- Переместите его в папку ComfyUI/models/loras.
- Перезапустите ComfyUI или обновите список моделей.
- Добавьте ноду LoRA Loader.
- Выберите базовую модель.
- Выберите нужную LoRA.
- Установите силу LoRA.
- Запустите генерацию.
Сила LoRA оказывает влияние на результат. Если установить слишком низкое значение, эффект может практически не проявиться. Если значение слишком высокое — LoRA начнёт доминировать в генерации: могут появиться артефакты, нарушенная анатомия, нечеткий стиль, одинаковые лица или конфликты с промтом.
Для простых изображений этого часто бывает достаточно. Для Flux, Wan 2.2, LTX 2.3, Qwen и Z Image лучше использовать готовый workflow, особенно если модель новая или требует дополнительных нод.
В видео это практически обязательное условие. Там LoRA функционирует внутри цепочки, где важны не только веса, но и порядок нод, модель, разрешение, количество шагов, режим генерации и входные изображения.
Как обучить свою LoRA
Собственная LoRA необходима, когда модель должна стабильно воспроизводить конкретные характеристики: лицо человека, персонажа, стиль, одежду, товар, объект, тип света или сценарий движения для видео.
Процесс обучения выглядит следующим образом:
- Выберите базовую модель.
- Подготовьте набор изображений.
- Очистите данные: уберите размазанные кадры, дубликаты, случайные фоны, плохие ракурсы.
- Присвойте изображениям теги или описания.
- Выберите тренера.
- Настройте параметры обучения.
- Запустите процесс обучения.
- Получите файл LoRA.
- Подключите его к модели.
- Проверьте результат на разных промтах.
Качество LoRA зависит не только от инструмента. Главный фактор — это датасет.
Если в датасете только один ракурс, LoRA плохо поймёт объект с других сторон. Если на всех фото одинаковый фон, она может выучить фон вместе с персонажем. Если стиль смешан с конкретным героем, модель может перепутать стиль с персонажем. Если изображения низкого качества, LoRA перенесёт ошибки в генерацию.
Поэтому обучение LoRA — это не просто «загрузить папку и нажать кнопку». Это работа с данными: отбор, очистка, маркировка, проверка и переобучение, если результат неудовлетворительный.
LoRA для персонажа, лица и стиля
Для персонажа LoRA должна усвоить устойчивые характеристики: лицо, силуэт, одежду, цвета, детали внешности. При этом изображения должны быть достаточно разнообразными, чтобы модель не заучивала одну позу и один фон.
Для лица нужны четкие фотографии с различными ракурсами, освещением и выражениями. Плохие селфи, фильтры, закрытое лицо, сильная ретушь и однотипные кадры ухудшают результат.
Для стиля датасет должен действительно отражать стиль. Если на всех изображениях один и тот же персонаж, модель может решить, что стиль неразрывно связан с ним. Если повторяется один фон, она может начать переносить его в каждую генерацию.
Что важно знать про NSFW и uncensored LoRA
NSFW и uncensored LoRA встречаются на сторонних платформах для Stable Diffusion, Flux, Qwen, Wan, Z Image и других моделей.
Но у таких файлов есть свои ограничения и риски.
Во-первых, они могут нарушать правила сервиса, на котором вы запускаете генерацию. Даже если LoRA технически подключается, облачная платформа может заблокировать результат.
Во-вторых, такие LoRA часто связаны с чувствительными темами: реальными личностями, знаменитостями, персонажами, deepfake-контентом и несанкционированным использованием внешности.
В-третьих, качество может быть нестабильным. NSFW-LoRA часто конфликтуют с базовой моделью, нарушая анатомию, портя композицию и хуже работают вне примеров автора.
Поэтому перед загрузкой необходимо проверить источник, лицензию, совместимость, правила площадки и ограничения интерфейса, в котором вы собираетесь запускать файл.
Почему LoRA может не работать
Обычно проблема заключается в несовместимости или настройках. LoRA может быть создана под другую модель, другую версию Flux или SDXL, требовать другой рабочий процесс или нужные ноды в ComfyUI. Также ошибка может возникнуть из-за неправильного checkpoint, поврежденного файла или недостатка VRAM.
Если LoRA не дает ожидаемого эффекта — проверьте базовую модель и путь к файлу. Если генерация дает сбой — уменьшите силу LoRA или отключите конфликтующие адаптеры. Промт не исправит LoRA, подключенную к неподходящей модели.
Что дальше
Начните с готовой LoRA под вашу базовую модель.
Если вы работаете со Stable Diffusion — возьмите LoRA для нужной версии модели и проверьте её в ComfyUI, Forge или Automatic1111. Если используете Flux — обратите внимание на точную ветку: Flux 1, Flux 2, Dev, Turbo или Klein. Если работаете с Qwen, Wan, LTX или Z Image — берите не только файл, но и совместимый рабочий процесс.
Проведите несколько тестов с различной силой LoRA. Посмотрите, что именно она изменяет: лицо, стиль, свет, позу, детализацию, скорость или поведение модели. Тогда станет ясно, хватает ли готового файла или необходима своя LoRA.
Если вам нужна своя — начните с датасета. Подберите качественные изображения, удалите лишнее, промаркируйте данные и только потом запускайте обучение.
