Компания Decart представила LSD v2 — вторую итерацию модели, способной перерисовывать видео в реальном времени во время стримов или видеозвонков.
В отличие от традиционных фильтров в стримерских приложениях, здесь функционирует нейросеть: она анализирует сцену, движение и объекты, создавая стилизованный кадр без заметных задержек. Модель уже доступна для пользователей, и Postium изучил подробности.
Читайте также: 9 нейросетей для оживления фотографий
Возможности нейросети LSD v2 и принципы её работы
LSD v2 преобразует поступающий видеопоток в стилизованное «живое» видео. Нейросеть проводит анализ кадров в реальном времени и перерисовывает их в соответствии с выбранным стилем — от аниме до мультфильмов вроде «Симпсонов». Изображение обновляется мгновенно, при этом лицо и движения остаются узнаваемыми.
Во втором поколении улучшена стабильность: уменьшены рывки, стали менее заметными «плавающие» контуры и артефакты. Модель лучше фиксирует мимику и позу, более точно распознаёт происходящее в кадре и не искажает пространство вокруг. Это позволяет эффекту выглядеть как единый поток, а не как набор отдельных обработанных кадров.
Статья в тему: Промты для обработки фото в ChatGPT
Как использовать нейросеть LSD v2
Для начала стрима достаточно активировать LSD v2 в разделе «Mirage LSD» и выбрать подходящий стиль для трансляции. Модель будет обрабатывать видео в реальном времени, без необходимости в рендеринге и долгой подготовке. То же самое касается и видеозвонков. На каждую секунду расходуется 2 кредита, при регистрации пользователям предоставляют 1000 кредитов.
Почему это важно? Генеративное видео долгое время оставалось офлайн-технологией: эффектно, но не пригодным для прямых трансляций. LSD v2 переносит стилизацию в реальное время — это предоставит стримерам, ведущим и создателям контента новый инструмент, который ранее был доступен только на этапе постпродакшена.
Первая версия LSD продемонстрировала, что живую стилизацию можно реализовать с технической точки зрения. Теперь Decart укрепляет направление realtime-видео, повышая технологию до более стабильного уровня для продакшена.
Итог: стилизованные стримы больше не требуют монтажа — достаточно активировать LSD v2, и эфир можно провести в стиле аниме, «Симпсонов» или любого другого визуального направления.
Ранее была выпущена обновлённая ИИ-модель ImagineArt 1.5, которая акцентируется на фотореализме.
