VEO 2 В SYNTX! КАК РАБОТАЕТ НОВАЯ МОДЕЛЬ ГЕНЕРАЦИИ ВИДЕО?

Сегодня поговорим о молодой видео модели voo 2 от Google которая начинает набирать обороты в нише и уже заслуживает Доверие у пользователей Мы хотим убедиться что рекламный ролик от Google не обманывает сравнить эту модель с Сора опробовать заявленную физику у модели и дать свою честную оценку Меня зовут Павел погнали если раньше подобные технологии казались чем-то из разряда научной фантастики то теперь это уже часть нашей реальности я думаю что киношники маркетологи блогеры и просто энтузиасты будут удивлены узнав как интересно vo2 обыгрывает физику и учитывает детали запроса если коротко то это новая диффузионная модель от Google которая генерирует видео по тексту и V2 делает это действительно неплохо одна из её главных особенностей - это чёткое понимание текстового запроса и реалистичная физика насколько нам известно vo2 используют сложные алгоритмы позволяющие анализировать текстовой запрос как целостную концепцию То есть если вы напишите например Эпичная битва роботов в разрушенном Мегаполисе модель создаст сцену в которой всё логично выстроено это необычный подход к созданию визуального контента после многочисленных тестов Мы решили внедрить только генерации по тексту потому что не уверены в оригинальности модели у поставщика Но мы уже ведём переговоры с Google и Надеемся в ближайшее время стать их официальными партнёрами и внедрить обе модели а также предоставить доступ ещё дешевле Давайте поговорим о технических возможностях vo2 во-первых разрешение модель генерирует видео в качестве 720p Что даёт чёткую картинку с хорошей детализации Хотя уже на сегодняшний день есть модели которые генерируют в 4К результат всё равно неплохой длительность роликов от 5 до 8 секунд при 24 кадрах в секунду этого вполне хватает чтобы создать короткую но качественную анимацию или динамичную сцену форматы поддерживаются в 16х 9 - это горизонтальный и 9 на 16 это вертикальный вариант это значит что можно делать видео как для классических экранов так и для мобильных платформ или соцсетей Ну и система безопасности vo2 оснащена фильтрами к сожалению которые предотвращает генерацию нежелательного контента Что делает процесс создания видео безопасным и предсказуемым чтобы объективно оценить возможности модели команда Google решила провести сравнительные тесты и сравнила vo2 с другими ведущими моделями генерации видео в рамках исследования участники оценивали ты ИТ пром и видео которые на этих пром получались и с вали с несколькими популярными моделями результаты оказались однозначными vo2 показал лучшие показатели как по точности следованию текстовым инструкциям так и по общей предпочтительности среди пользователей все сравнения проводились в разрешении 720p Так что условия для всех моделей были одинаковыми что касается длительности видео тут есть важные различия генерации созданные в vo2 длились 8 секунд тогда как у видео Ген 10 секунд а у других моделей всего 5 секунд Это означает что vo2 смогла передать больше деталей в более длинной сцене чем её конкурент но и самое главное почему пользователи выбирали именно vo2 всё просто лучшая детализация больше естественных движений и высокая точность в передаче сцен то есть модель не только правильно интерпретирует запрос но и делает это других Давайте посмотрим как vo2 работает в реальных условиях и что нужно делать чтобы получить крутой результат Заходим в Синкс открываем главное меню выбираем раздел видео будущего далее vo2 и нажимаем на настройки модели Где мы можем выбрать как длительность видео так и соотношение сторон когда всё настроено приступаем непосредственно к генерации и всё что нужно сделать - это отправить в чатбот текстовой запрос время обработки зависит от сложности сцены и может занять от нескольких минут до примерно 10 Ну и конечно финальный шаг - это анализ и доработка Хотя V2 уже выдаёт впечатляющий результат иногда для идеального кадра может потребоваться несколько попыток Поэтому чем детальнее запрос тем более точные и реалистичные кадры вы получите в итоге мы выяснили как правильно составлять запросы в модели 2 чтобы получить действительно на качественные результаты и там есть

некоторая правильная последовательность и конечно же чёткость и детализация пронта чем подробнее вы Опишите сцену тем лучше модель поймёт ваш запрос для этого в промтек ключевые элементы и желательно последовательно Первое - это объект кого или что вы хотите увидеть в кадре это может быть человек животно предмет или даже целый город дальше контекст где происходит действие Это лес городской пейзаж футуристическая станция или Уютное кафе после этого следует действие Что именно делает этот объект бежит танцует разговаривает поднимается по лестнице после этого мы указываем стиль То есть если вы хотите задать атмосферу Используйте ключевые слова Например Нуар Хоррор мультфильм ретро футуризм и так далее после этого движение камеры если нужно А например вид сверху трекинговый кадр динамичная погоня и так далее после этого композиция тоже по желанию широкий кадр с большим обзором или крупный план сосредоточенный на деталях Атмосфера если важно например мягкий вечерний свет контрастные неоновые оттенки мрачный серый туман если не уверены Как лучше сформировать запрос можно воспользоваться любой языковой моделью и просто попросить её сгенерировать детальный промт описав свою идею Ну и конечно сказать ему Какая должна быть последовательность Чем точнее запрос тем лучше результат А давайте теперь протестируем и сравним vo2 с её конкурентом S от Open ai Ведь они заявляют что эта модель лучше всего работает с реализм мы провели несколько тестов чтобы понять В чём разница между этими моделями и где vo2 действительно выигрывает А в случае С2 мы делали тесты в качестве 720p продолжительностью 8 секунд а со 80 пи и продолжительность в 10 секунд начнём с детализации изображения насколько хорошо модели справляются с проработкой текстур светотени и мельчайшие детали в кадре чтобы проверить это мы взяли следующий промт стая волков бежит по заснеженному лесу Лунный свет отражается от снежинок динамичная камера что же в итоге получилось в Сора движение в целом передано неплохо но резкий поворот выглядит неестественно и выбивает из общего ритма сцены К тому же снег в некоторых местах размыт и теряет чёткость что портит общую картину vo2 на первый взгляд справилась неплохо но если присмотреться детализация оставляет желать лучшего анимация кажется излишнее зацикленный что делает сцену менее естественной Ну а стилистика будто это мультфильм В общем результат меня Не впечатлил Ладно двигаемся дальше следующий тест проверя как модели справляются с передачей физики объектов и их движения в пространстве здесь мы использовали такой промт гонщик на мотоцикле входит в крутой поворот колёса поднимают облака пыли закатное солнце бликует на металлических деталях ссора в этом тесте показала действительно Плохой результат хаотичная анимация нелогичные движения какие-то И вообще общее восприятие сцены остав желать лучшего всё настолько не согласовано что даже разрешение 1080p никак не спасает ситуацию А вот vo2 напротив правильно симулирует физику пыль рассеивается плавно а Отражение на металле меняются в зависимости от угла освещения это делает сцену гораздо правдоподобные Ну и последний тест посвящён созданию масштабных сцен с большим количеством объектов и динамичными движениями камеры Мы выбрали промт массовая сцена сотни воздушных шаров поднимаются в небо во время фестиваля камера показывает толпу затем движется вверх Сора явно столкнулась с проблемами при генерации этой сцены модель даже не смогла корректно интерпретировать вообще о каких воздушных шарах идёт речь в результате получились резкие несогласованные смены кадров Ну короче сцена вышла неубедительно а вот справилась отлично воздушные шары детализированы их действительно Много Они реалистично поднимаются в небо создавая ощущение масштаба более того кадр наполнен людьми Что делает сцену живой и динамичной как мы видим vo2 выигрывает в детализации и реалистичности это ещё раз подтверждает что модель серьёзный Шаг вперёд в ai генерации видео все мы знаем как разработчики любят демонстрировать на своих сайтах просто идеальный приме

ра своих моделей особенно кани Пика они выглядят так будто их подготавливали вручную чтобы всё выглядело максимально впечатляюще Но насколько эти примеры соответствуют реальным генерация Мы решили это проверить мы взяли несколько промто которые были использованы в демонстрационных роликах на сайте V2 и попробовали сгенерировать такие же сцены в реальных условиях никаких сюрпризов на сайте и в реальной генерации всё получилось практически одинаково детализация на высоте вода выглядит естественно мягкие блики Света добавляют реализма видно что vo2 отлично справляется с подобными сценами и здесь разница с демонстрацией практически нет этот тест оказался интересным на сайте машина выглядела динамично неоновые огни отражались от мокрого асфальта А сам автомобиль двигался плавно с правильно тенями и отражениями А вот в нашей генерации освещение и детализация оказалось гораздо проще неоновые огни выглядели менее реалистично а движение машин машины было немного зациклены визуально сцена получилась похожей но ощущение кинематографического эффекта потерялось А вот здесь всё получилось действительно круто и на сайте и в реальной генерации V 2 справилась отлично пчёлы летели хаотично но естественно Пчеловод выглядел правдоподобно а сама сцена передавала ощущение природы и движени тут vo2 действительно порадовало видимо чем детальнее промт тем лучше результат как мы видим в некоторых случаях результаты генерации совпадают с демонстрационным примерами но бывают и моменты где модель изменяет стилистику или упрощает сцены Особенно это заметно на примере с автомобилем в реальности генерация была хорошей но не такой кинематографично как на сайте Однако если результат получился не таким как ожидалось это не повод расстраиваться иногда достаточно переформулировать свой запрос добавить больше деталей или попробовать сгенерировать видео Ещё раз чтобы получить более точный и реалистичный результат что ж теперь когда мы протестировали vo2 на деле Давайте подведём итог в целом модель действительно впечатлила качество генерации более чем достойное да vo2 стоит недёшево но если смотреть на результат становится понятно за что мы платим Это довольно мощный инструмент который уже сейчас позволяет создавать реалистичный кинематографичные сцены конечно 720p - это не так уж и много особенно если хочется получать по-настоящему чёткое изображение но это не проблема мы взяли несколько сгенерированных видео и пропустили их через чтобы улучшить качество И что в итоге теперь это реально крутой результат чёткая картинка проработанные детали полное ощущение профессиональной видеосъёмки Мне вот интересно А почему вот эти все видео модели не прогоняют через топа сами Они же могут так сделать в целом Ссора на этом фоне явно отдыхает особенно если говорить о качестве картинки Однако у неё есть функциями которая может быть полезной Например можно сгенерировать видео два а затем в Сора заменить конкретный объект это может быть персонаж машина одежда или даже выражение лица таким образом эти инструменты можно комбинировать чтобы добиться идеального результата только лицо поменяется А так всё норм На экране примеры которые мы улучшили с помощью topas ai И теперь они выглядят действительно достойно Так что если подытожить vo2 - Это довольно мощный инструмент который оправдывает свою стоимость качеством генерации А в паре с другими решениями может стать настоящей студией по созданию видео прямо у вас дома семейный блог syn Family - это наш блог который уже насчитывает около 70 сся читателей и это место где можно почерпнуть полезные лайфхаки увидеть закулисье познакомиться с людьми которые создают экосистему и найти эксклюзивные коды стиля или экспериментально руководство регу выкладываем тем что готовим к релизу и даже показываем ранние прототипы новых функций Если хотите быть в центре событий и не пропускать свежи лайфхаки просто перейдите по QR коду или ссылке в описании и присоединяйтесь к нам vo2 - это ещё один прекрасный рабочий инструмент для генерации видео который обходит многие популярные модели и имеет прекрасную физику Я бы даже сказал лучше чем в остальных моделях конкурентов Ну и конечно уже внедрена в наш чатбот Что делает её максимально доступной

залетайте тестируйте делитесь своими генерация и пишите Какие ещё а инструменты хотите видеть в синтекс С вами был Павел До встречи в новых выпусках пока