Лучший способ заменить фон, свет и локацию в видео (полный гайд по SwitchX)

Обычно я снимаю выпуски в студии. А что если представить, что ничего нет? Ни студии, ни света, ни хромокея. Получается, теперь, стоя даже на улице, мы можем делать невероятные вещи. И это благодаря видеомодели Switch X от Bibl.

Но ведь нечто такое давно можно было делать склин, да, но там были проблемы с липсинком. И всё из-за того, что он вас полностью перегенерировал, в то время как свик вас полностью сохраняет, меняя лишь фон и адаптируя освещение. С недавнего времени мы активно им пользуемся. И, может быть, вы видели последние шорцы Нейронка или правда? — Так, секундочку, сейчас загружаю Никиту. Угу. А вот — мы были в восторге от Switch X, и теперь он доступен в Sнкс. И сейчас я покажу его фишки и функционал. И первое, самое простое - это полное изменение освещения. Модель свечик строго удерживает исходный кадр: лицо, мимика, локация, объекты в кадре и меняет их только если вы этого захотите. Это и есть главное отличие от обычных генеративных видеомоделей по типу Alif или клинк. Ведь они перерисовывают каждый кадр целиком. Вот один из моих тестов, где я думал убрать петличку в Cle-то масками смонтировать кадр, но это оказалось невозможным, ведь кадры не совпадают. А здесь в Switch X это, как видите, вышло прекрасно. Сейчас покажу

как всё устроено. Заходим в Synкс, переходим в раздел Видео, выбираем Bble Switch X. Затем у нас открывается вот такой вот интерфейс. И он может напоминать clean motion, ведь здесь вы тоже можете добавить одно видео, которое хотите изменить, и, собственно, референсное изображение на что вы хотите изменить или в кадре. Так, поскольку я сейчас покажу, как заменить день на ночь и как круто он это делает, я добавляю видео. После

добавления видео в меню справа у нас появляется ещё одна опция. Мы можем обрезать видео прямо в интерфейсе. Небольшие технические водные. Максимальная длина видео измеряется в кадрах, их 240. И если ваше видео имеет фреймреate 24 кадра в секунду, то вы можете сгенерировать видео 10 секунд. Если 25 кадров в секунду, то уже 9,6 секунд. В общем, здесь удобно. Вы сразу можете это посмотреть. Здесь всё сразу вот показывается, сколько кадров и сколько секунд будет занимать ваше видео. Если что, обрезать, скажем так, с обеих сторон. Нажимаем подтвердить. Итак, я добавил пляж, который снял в дневное время суток. И первый стоп-кадр я изменил в нанобана. просто сказал ему: "Замени мне день на ночь, добавь в луну, которая мм просвечивает сквозь ночное небо". И в целом этого достаточно. И

чтобы наша генерация сработала, в меню справа есть на первый взгляд страшное окно с масками, параметры генерации и несколько опций на выбор. Первая идёт автоматическая. Она, кстати, неплохо справляется, и, возможно, здесь бы она подошла, потому что нужно всего лишь сменить сделать релайт, то есть заменить день на ночь. М. Часто она может сработать неплохо и на человека. То есть неронка понимает, что в кадре есть человек, и, соответственно, она его выделяет. Но лучше пользоваться другими настройками, более ручными, не автоматическими, чтобы генерация ваша была более успешной. Дальше идёт опция Фил - это полная заливка. И здесь она как раз идеально подходит, потому что нам нужно просто сделать relлай, то есть чтобы э день был заменён на ночь. Его и берём. Что же касается промтов, нужно ли их писать или нет, для такой простой генерации я их не пишу обычно. То есть можно оставить как есть и просто отправить. Неронка всё сама поймёт. А теперь давайте разберём нечто поинтереснее. Работу с масками. И самое интересное, что здесь можно делать - это, конечно же, липсинг. На первом кадре я сделал скриншот и в нанобана поменял окружение и майку себе. Как вы можете видеть, моё лицо тоже немного исказилось, потому что, ну, любой генератор изображений немножко может исказить вам лицо. Но это ничего страшного. И это как раз-таки и есть фишка Switch X. Всё это я объединил, прописал очень простой промт. Если вы пишете промты, то здесь не нужно расписывать текста. Здесь просто человек сидит и смотрит в камеру. То есть то, что здесь я уже написал, это прямо уже много. Это уже практический перебор. В целом можно и не писать. Можно попробовать и так, и Нерон в целом всё прекрасно поймёт. Итак, я загрузил видео и референсное изображение. И у нас есть сбоку параметры генерации. И нам нужно выбрать первый кадр. И вот таким образом это работает. Открывается меню, мы закрашиваем только лицо и руки. Это то, что мы выделили. И не бойтесь, если ваша маска немножко кривая и где-то куда-то залазит, ничего страшного. Потом мы нажимаем инвертировать и нажимаем "Подтвердить". И справа у нас появляется вот такая маска. Помните, белое - это то, что мы хотим сохранить. Чёрное будет изменено. Здесь мы хотим сохранить моё лицо и руки, потому что если не выделить руки, то они начнут жить своей отдельной жизнью, либо будут не двигаться. Будет двигаться ваша голова, потому что она сохранена, а руки как повезёт. Нажимаем на замочек, чтобы маска сохранялась. Потому что, когда мы нажимаем сгенерировать, у нас всё сохраняется. И если что-то у нас вышло не очень, давайте попробуем что-нибудь сделать. Например, закрасим руки. Пускай будет только лицо останется. Нажимаем подтвердить и отправим ещё одну генерацию. И вот у нас получилось две генерации. Там, где я выделил и голову, лицо, руки. Это прекрасно. Здесь я не знаю, к чему докопаться. Всё идеально выглядит. То есть тени на столе, рот, липсинг, руки. Всё правильно. И дальше смотрим результат, где я выделил только лицо. У меня в руке какая-то расчёска появилась. То есть он как будто бы что-то примерно начинает повторять, как в референсном видео, но полностью руки он не сохраняет, потому что мы их не выделили. Здесь качество генерации по сути зависит от того, как круто вы сделаете референсное изображение, насколько реалистичным или соответствующим вашей идее оно получится. Но получается хорошо. Как мы видим, лицо не потеряно, и такое можно применять где угодно и воплощать в жизнь различные идеи. Вы только что видели, как я тащу самого себя, хотя изначальный кадр выглядит вот так. С помощью нанобана добавил себя в

кадр. И вот теперь я покажу лайфхак, который вам поможет. Изначально мои генерации выглядели вот так. Не обращайте внимание на свет. Смотрите на мои ноги, как я скольжу. Дело в том, что по логике я брал и выделял только себя. Но из-за того, что нейронке было сложно понять пространство, я как будто оставался на месте и скользил по асфальту. И что мы можем сделать? Нам необходимо маской выделить кусок заднего фона, чтобы у нейронки была привязка. Выделяем вот так. И всё работает. Ещё есть один наглядный пример, чтобы показать логику, как работают маски. У меня есть изначальное видео, где девушка идёт. Кстати, здесь, обратите внимание, сверху есть чёрные полоски. Мы делаем стоп-кадр, идём в нанобана. Я прописал, что добавь на асфальт снега и убери чёрные полоски. То есть как бы расширь кадр. Он это спокойно сделал. Неплохо. Потом я выделил только девушку. То есть, судя по маске, вот здесь вы можете зайти в меню и посмотреть параметры и увидеть маску. Как вы видите, я выделил только девушку. И что у меня получилось? Она идёт, но она как будто бы провалилась в текстурку, застряла. То есть она идёт с трудом и окружающий фон, асфальт не двигается. Я подумал: "Ну как так-то? " И что я сделал? Я помимо девушки, я выделил ещё и задний фон, то есть где есть асфальт, чтобы нейронке было за что зацепиться. И вот что у меня получилось. Всё как на референсе. Девушка идёт правильно, и окружение также меняется, как она идёт. И чтобы не терять лицо во время замены фона было приятней, мы дарим скидку в 15% новым пользователям. Промокод у вас на экране и работает 24 часа, так что успейте активировать прямо сейчас. Касательно успешных генераций

как и везде, перед съёмкой вы должны понимать, как должен выглядеть ваш кадр в итоге. Но без некоторых технических знаний и тестов это не всегда получается. Например, моя генерация из начала видео. Результатом я доволен, но если присмотреться, то можно увидеть тряску. — Обычно я снимаю выпуски в студии. А что — это? Потому что на оригинальном видео я хоть и стою, камера стоит на штативе, но сам я стою, согнув ноги, делая вид, что я сижу. И вот эту микротряску нейронка считала как движение. Из-за этого всё двигается. Ну а если смотреть дальше, то вообще как бы я выхожу из-за стола. Я просто, ну не сижу, а стою. В общем, это забавно выглядит. В целом, это тоже можно использовать как какой-то эффект, но здесь он неуместен. Ну и я подумал по той же логике, значит, нужно выделить немного фона. Беру, выделяю себя, обязательно выделяю руки. И давайте выделим, ну, вот здесь что-нибудь и здесь что-нибудь. Нужно инвертировать маску. Вот так. Ну и нажимаем, допустим, пропишем пром, да, человек сидит и разговаривает со статичной камерой. А что, если представить, что ничего нет? Ни студии, ни света, ни хромокея. Так, с одной стороны у нас никакой тряски больше нет, и я реально сижу за столом. Это прямо как будто бы ощущается. Но на заднем фоне всё пропало прям абсолютно. То есть почему здесь это не получается, если в прошлых кадрах так получалось? Дело в том, что, ну, я так думаю, что мы сильно здесь сильно изменён фон. То есть изначально он, по сути, просто белый, как будто бы, ну, минималистичный, а здесь прямо сильное изменение цветов, максимально всё перенасыщено. И из-за этого нейронка думает, что она пытается как-то совместить это и получается плохо. Соответственно, здесь вам как раз-таки и нужно быть как режиссёрами, которые продумывают кадры изначально. И в моём случае, что мне нужно было сделать, и теперь я буду так делать. Если я захочу сгенерировать себя, что я где-то сижу, не знаю, где-то в космосе, то в кадре, в изначальном кадре мне тоже нужно сидеть и уже менять всё вокруг. Вот. Но здесь в целом сработало неплохо. Ну, не здесь конкретно, а в моей генерации изначальной. Есть ещё вот такие сложные примеры, где тоже нужно продумать до конца. У меня был такой тест, где я с каким-то чехлом, ещё и на зелёном фоне. Сейчас мы понимаем, что зелёный фон в целом не нужен. Нейронка всё и так прекрасно выделяет. И здесь я заменил чехол на планшет. Вот такое у меня получилось изображение. Но результаты получались не очень. Я заменяюсь идеально, руки работают классно, но смотрите, я бью по планшету, и неронка не понимает, что планшет нужно перевернуть. То есть здесь тоже нужно это учитывать. В данном случае мне, скорее всего, бы следовало держать планшет сразу в том положении, в котором он должен показываться, потому что изначально нейронка его считывает как такой плоский объект, а я его поворачиваю другой гранью, то есть экраном вперёд, и она это не смогла понять. Причём я сделал несколько генераций. Там, где я выделял планшет, не выделял планшет. Там, где выделял, она понимает, его поворачивают, но она его не превращает в планшет. Поэтому некоторые ограничения есть, но в целом всё работает прекрасно. И это прям, ну, это замечательно. Мне очень нравится. Что ж

я, например, очень рад, что появился Switch и его можно использовать в профессиональных целях, собственно, как он уже используется, но также и для разных крутых приколов. Так что максимально рекомендую. Победители из прошлого выпуска у вас на экране. Если вы себя увидели, то пишите в нашу службу заботы, чтобы активировать свой приз. А мы запускаем новый на триви подписки в Synнтакс. Нужно выполнить всего три простых шага. подписаться на канал, поставить лайк этому видео и написать в комментариях ответ на вопрос: для чего вы будете использовать Switch X. Побеждают самые креативные ответы, а результаты уже в следующем выпуске. С вами был Артур. Всем пока. M.