Hedra в SYNTX: цифровые аватары, которые чувствуют

Сегодня будет выпуск, за которым стоит внимательно следить от начала и до самого конца, потому что мы не просто обсудим технологии, мы расскажем, как одна модель может сначала поразить, а потом разочаровать, а затем как другая приходит ей на смену и ставит новую планку качества. Мы поговорим о Heйндen, которая внезапно изменилась буквально за пару часов после запуска. и Ахедра модели, которая не просто оживляет персонажей, а делает это с эмоциями, движениями и настоящей выразительностью. И всё это уже работает в синтакс. А в конце выпуска покажем, как с помощью хедра и клонирования голоса можно собрать полноценную сцену. Но прежде не забудьте подписаться на наш канал. Меня зовут Павел, и погнали разбираться. Перед тем, как мы перейдём к истории о

Хейджен и Хедра, давайте вообще разберёмся, зачем всё это. Аватары сегодня используются повсюду. В обучающих видео, где они помогают объяснять сложные темы в маркетинге для создания коротких рекламных роликов без съёмок в YouTube и соцсетях, как виртуальные ведущие или вставки, в бизнесе для озвучки инструкции и презентации, даже автоматических приветствий. Это быстрый способ создавать понятный и живой контент без актёров, камер и долгого монтажа.

История сйн началась довольно оптимистично. Как только новую модель анонсировали, мы сразу же поняли, что такого функционала не хватает в Синтакс. Она показывала хороший липсинг, адекватную мимику, выглядела как достойный инструмент для оживления аватаров. И даже во время тестов всё действительно выглядело убедительно. Мы решили, добавляем в синтакс. Первые отклики были позитивные, мы сами были довольны, но буквально через несколько часов после релиза всё резко поменялась. В нашу техподдержку и в комментариях под анонсом посыпались сообщения о том, что модель стала работать иначе. Появились артефакты, губы начали двигаться несинхронно, а лица стали вообще какими-то пустыми. Было ощущение, будто перед нами уже не та модель, которую мы тестировали. Мы, честно говоря, удивились подобному раскладу. Ну, потому что не каждый день наблюдаешь, как за несколько часов модель настолько теряет качество генераций. И, честно говоря, лично моё мнение, что из-за того, что они сделали бесплатные тарифы, точнее без лимитов тарифы, у них просто резко упало качество, и они не смогли обрабатывать такое большое количество запросов. Когда стало понятно, что с

Hinко, как хотелось бы, мы начали искать решение. хотелось найти модель, которая не просто повторяет движение губ, а действительно оживляет персонажа. Так мы вышли на Хедра, и уже после первых тестов стало ясно, что это то, что нужно. Хедра работает иначе. Она точно управляет эмоциями в голосе и передаёт их в лице, в глазах, бровях, мимике. Появляется ощущение, что персонаж действительно слушает и говорит, а не просто двигает ртом под звук. Это сразу ощущается, особенно если в голосе есть хоть немного интонаций. Всё передаётся аккуратно, хотя моментами, может быть, с перегибами эмоций и жестикуляции. И для сравнения, посмотрите на одного и того же аватара с одинаковыми аудиодорожками, но сгенерированного в разных моделях. Пишите в комментариях, какая модель, на ваш взгляд, выглядит лучше всего. Интересно почитать ваше мнение. А если вы, например, загружаете песню, Хедр умеет работать и с этим. Главное, чтобы звук был чистым. А слова понятными. В этом случае анимация получается неожиданно живой и выразительной. Мало того, если персонаж будет играть на гитаре на картинке, то он тоже это отобразит. Ещё один мощный плюс Хедра. Работы с нестандартными персонажами. Мультяшные герои, рисованные стили, даже антропоморфные звери. Даже потому что раньше модели отказывались работать такого рода аватарами. А Хедра справляется. если вы, конечно, чётко прорисовали губы в изначальном персонаже. Более того, модель оживляет не только лицо, но и тело. Двигается голова, плечи, появляются жесты. На экране один из примеров такого персонажа - это лис в деловом костюме. И посмотрите, насколько живо он двигается. И при этом всё выглядит гармонично, без ощущения маски на лице. Такое признаться раньше было сложно представить в нейросетях. Из нюансов. Модель хуже справляется с лицами в очках, с бородой, усами или закрытым освещением. Всё это может повлиять на результат. Но если у вас качественное изображение, результат будет просто топовый. Прежде чем мы приступим к генерациям в хедрадеро, хотел бы рассказать одну важную вещь. Вообще, если хотите быть в курсе всего, что мы делаем, не только релизов, но и реально полезных штук, обязательно загляните в Synнx Family. Там уже более 100.000 читателей, и это по-настоящему активное сообщество. Мы делимся гайдами, лайфхаками, разбором кейсов, фишками, в том числе и по Хедра, и по другим моделям. Там можно найти советы, примеры, идеи и просто вдохновение. И да, иногда туда попадает немного закулисье, чтобы вы видели, как всё устроено изнутри Синтакс в реальном времени. Так что переходите по QR-коду или по ссылке в описании и присоединяйтесь к нашему Syntax Family.

Рассказываю про ещё один бомбический инструмент, без которого генерации аватаров не будут такими интересными, а именно функция клонирования голоса. Мы долго не выпускали эту функцию, потому что, честно, не хотели внедрять что-то просто, чтобы был или абы что. Нам нужна была модель, которая реально будет работать качественно и быстро. В главном меню нашего чатбота заходим в раздел audios и далее клонирование голоса. Во-первых, вы можете использовать наши голоса из общего списка, а во-вторых, вы можете создать свой личный приватный голос самостоятельно, записав всего несколько минут голосового сообщения и отправив его в наш чатбот. Главная фишка инструмента в том, что создав голос один раз, вы можете на постоянной основе использовать его снова и снова без повторных клонирований. Просто отправьте нужно нужное текстовое сообщение в бот, выберите ваш голос и через несколько секунд получите готовый результат, который можно дальше использовать где угодно, в том числе в хедро. Для создания вашего аватара особо полезно при создании серии кадров или целых мультиков, а таких, поверьте, через наш агрегатор создают очень много именно в этой связке. работает на двадцатичетырёх языках с автоматическим распознаванием акцента. И что лично нравится мне, можно всё подстроить под себя. А если часто используете какие-то голоса, просто отмечайте их, чтобы не искать каждый раз заново. То есть у вас есть личный список лайков, так называемых, где сохраняются ваши голоса. И вот когда у вас есть и голос, и анимация в хедра, получается действительно профессиональная сцена. В этом и есть сила этой комбинации.

Давайте покажу, как на практике работает связка хедра и клонирование голоса. Всё происходит прямо здесь, в боте Synнтакс. Заходим в главном меню в раздел видео будущего и далее нажимаем на хедра. Сначала загружаем изображение, и это будет наш будущий аватар. Лучше выбрать чёткое фото без искажений, а с ровным светом и без лишних деталей на фоне. И, конечно, лучше всего загружать как файл, а не как фото. То есть в Telegram есть две возможности отправить фотографию, то есть медиа. Либо вы отправляете как фото, либо как файл. Второй вариант наилучший, потому что тогда Telegram не режет качество. Дальше аудиодорожка. Это может быть ваша речь, музыка, фраза, записанная в микрофон или любой файл. Ну а если вы сделали голос через функцию клонирования голоса, вообще отлично. После загрузки в настройках модели выбираем необходимое соотношение сторон и просто начинаем генерацию. Через пару минут вы получаете видео, ваш аватар оживает, двигается, говорит, реагирует на голос. Это выглядит реально круто и живо. И главное, вы делаете это сами, без съёмок и монтажа. Просто загружаете файл и через пару минут получаете результат.

Кстати, если вы хотите пообщаться с нами вживую, есть отличный повод. Уже 28 и 29 мая мы участвуем в выставке в Москве. У Синтакс будет свой стенд. Мы будем рады каждому из вас. Я лично буду выступать на сцене, расскажу, над чем сейчас работаем, покажу интересные новые функции и просто пообщаемся с вами лично. Более 70 стендов, топовые спикеры и, конечно, отличная атмосфера. Так что, если будете в Москве, обязательно заглядывайте к нам. Как видите

инструменты вроде хедра и клонирования голоса - это уже не про будущее. Это про сейчас. Я бы не назвал это просто фишкой для поиграться. Это полноценный инструмент, который можно использовать в работе, в контенте, в коммуникации. И мы в Синкс стараемся, чтобы все инструменты были не просто доступны, но и реально удобны и полезны для всех, в том числе и хедра. Если вы ещё не сделали своего цифрового аватара, просто зайдите и попробуйте. Серьёзно, сгенерируйте персонажа, озвучьте его в свои фразы, добавьте немного эмоций. Посмотрите, как это будет работать. Возможно, это станет для вас началом чего-то нового, проекта, какого-то формата или идеи. Ну и как всегда, делитесь тем, что у вас получилось. Показывайте в Syntax Family, выкладывайте в соцсети, отмечайте нас. Нам правда интересно, что вы делаете с этими возможностями. Увидимся в следующих выпусках. Пока. У