0:00 Этот ИИ может создавать сверхреалистичные видеоролики с любым входным диалогом. Он называется Hunyen Video Avatar от Tencent. И это абсолютно бесплатно и с открытым исходным кодом, так что вы можете запускать его в автономном режиме на своем компьютере неограниченное количество раз. Он даже может обрабатывать различные эмоции, пение и различные стили анимации. Итак, в этом видео я расскажу, как им пользоваться. Плюс, я собираюсь протестировать его на различных сценах и аудиоклипах. Плюс, конечно, я покажу вам, как установить его на свой компьютер, чтобы вы могли использовать его бесплатно неограниченное количество раз офлайн. Приятно то, что это работает даже если у вас мало видеопамяти. Я расскажу об этом подробнее через секунду. Возможно, вы слышали о версии V3 от Google, которая была выпущена несколько недель назад. Он стал довольно вирусным, потому что с его помощью можно было
0:45 напрямую создавать видео со звуком. Таким образом, вы можете заставить людей свободно говорить в видео, используя всего одну подсказку. Ну, этот новый видеоаватар Хуньяна чем-то похож на VO3, но он бесплатный и с открытым исходным кодом. И я думаю, это даже лучше, потому что вы вводите звук. Таким образом, это дает вам полный контроль над тем, как должен звучать звук. Прежде всего, вот некоторые из их официальных демо-записей. Пошли, пора идти. Я забронировал столик на 8 человек и не знаю точно, где находится ресторан. Эй, Элли, расслабься. Это не работа. Это вечеринка. Итак, как вы видите, это работает не только с одним персонажем, но и с несколькими персонажами. Вот еще один пример.
1:35 Обратите внимание, что это не просто инструмент синхронизации губ или аниматор лица, который просто двигает ртом или лицом человека. Вы можете ввести любую сцену, и она будет анимирована целиком, включая тело человека. Итак, вот пример сцены в полный рост и поющего человека. Гладкий зеленый. Итак, как вы видите, он не только двигает ее ртом, но и оживляет все ее тело, заставляет ее играть на гитаре, а также оживляет костер на переднем плане. Единственный недостаток здесь в том, что ноты, которые она играет, на самом деле не соответствуют песне. Но я имею в виду, что даже VO3 не может
2:20 этого сделать. Я был бы шокирован, если бы это действительно было синхронно. Вот еще один пример. [Музыка] Вот еще один пример разговора. Опять же, двигаются не только ее голова и рот, но и все ее тело, а вместе с ним и камера. Кроме того, он также может работать с различными художественными стилями. Итак, вот несколько примеров. Ну ладно, хватит демонстраций. Если вы хотите увидеть больше демонстраций, вы можете посетить эту официальную страницу. Но сейчас давайте попробуем это на самом деле. Итак, есть два способа его использования. Вы можете попробовать это через их онлайн-платформу. И как только вы окажетесь
3:06 там, вы сможете зарегистрироваться бесплатно. На данный момент все на китайском языке, но если вы используете Google Chrome, вы можете просто щелкнуть правой кнопкой мыши и выбрать « Перевести на английский». Все в порядке. Итак , прежде всего, это по сути преобразование текста в речь, где вы можете ввести расшифровку и выбрать голос. Теперь вы можете выбирать из разных голосов. Например, позвольте мне просто ввести эту расшифровку здесь, а затем выбрать этот голос и нажать «Воспроизвести». Вот пример голоса. Все в порядке. А теперь давайте попробуем темпераментно и грациозно. Вот простой голос. Хорошо. Обратите внимание, что в нем есть китайский акцент. Поэтому я обычно не преобразую текст в речь. Я бы загрузил свой собственный аудиоклип. Давайте попробуем это сделать. Я собираюсь загрузить этот аудиоклип с
3:51 речью Дженсена Хуанга. Продолжительность 14 секунд . Позвольте мне сначала проиграть это для вас. Как это возможно, что Nvidia стала такой крупной компанией, производящей графические процессоры? И вот складывается впечатление, что именно так выглядит графический процессор. Вот это графический процессор. Это один из самых передовых графических процессоров в мире. Но это игровой графический процессор. Все в порядке. А теперь давайте загрузим фотографию Дженсена Хуанга. Обратите внимание, что здесь вы не можете ввести подсказку, чтобы направить эту генерацию дальше. Это ограничение онлайн- платформы, но вы можете ввести подсказку в офлайн-версии, которую я вам покажу через секунду. В любом случае, давайте нажмем « Сгенерировать». Хорошо, вот что мы получаем. Позвольте мне включить это для вас. Как это возможно, что Nvidia стала такой крупной компанией, производящей графические процессоры? И вот складывается
4:38 впечатление, что именно так выглядит графический процессор . Итак, это графический процессор. Это один из самых передовых графических процессоров в мире. Но это геймерский ГП. Как видите, это было очень реалистично. Он даже определил, где в аудиозаписи был сделан акцент, и заставил Дженсена произнести его с большей выразительностью. Так, например, здесь, когда он говорит: «Это графический процессор». Итак, это графический процессор. Это один из самых. А потом он говорит: «Но это же игровой графический процессор». Но это геймерский ГП. Опять же, он знает, что нужно делать ударение, когда произносит эти слова. Очень реалистично. Я выбрал эту сцену, потому что она довольно сложная. В другой руке он держит графический процессор и ноутбук, но ему удаётся анимировать всю эту сцену очень последовательно и с минимальными ошибками. Все в порядке. Далее я собираюсь загрузить
5:25 эту фотографию мужчины, выступающего на TED, которую я сгенерировал с помощью Imagine от Google. А затем для аудио я загружу случайный разговор. Вот как это звучит. Общим для этих создателей является независимость от традиционных посредников и агрегаторов. Возьмем, к примеру, Кэролайн Чемберс. Когда издатели отвергли ее предложение о выпуске кулинарной книги , она взяла дело в свои руки. Хорошо, давайте нажмем « Сгенерировать» и посмотрим, что это нам даст. Хорошо, вот что мы получаем. Общим для этих создателей является независимость от традиционных посредников и агрегаторов. Возьмем, к примеру, Кэролайн Чемберс. Когда издатели отвергли ее предложение о выпуске кулинарной книги, она взяла дело в свои руки. Очень хорошо. Обратите внимание, что в середине сцены был своего рода монтаж, что является недостатком, но на самом деле в оригинальном
6:10 аудиоклипе это также был жесткий монтаж. Поэтому довольно интересно, как удалось это обнаружить. И снова обратите внимание, что он двигается очень реалистично. Движется все его тело, плюс камера тоже немного движется. На обеих его руках по пять пальцев. Все очень реалистично. Все в порядке. Далее я хотел проверить, сможет ли он работать с разными языками. Итак, вот аудиозапись на испанском языке. А вот и моя загруженная фотография. Опять же, это довольно сложная сцена. На заднем плане ходит много людей. Давайте посмотрим, получится ли это оживить. Все в порядке. Вот что я получаю. Ну
7:02 ладно, это неплохо. Вы можете видеть, что он явно справляется с испанским языком. Однако есть явные недостатки в изображении людей на заднем плане. Например, этот чувак, кажется, идет задом наперед, а потом, знаете, круто, что добавили еще одного человека, идущего слева, но каким-то образом он просто исчезает. Теперь они утверждают, что таким образом можно также управлять различными эмоциями. Итак, давайте проверим это . Я собираюсь использовать этот аудиоклип. Пожалуйста, просто выслушайте меня хоть раз. Почему это всегда происходит? И теперь фокус в том, что вам нужно сначала создать образ человека, уже испытывающего эту эмоцию. Итак, предположим, у нас есть очень злая девушка, которая ест рамен. Давайте нажмем «Сгенерировать» и посмотрим, что это нам даст. Хорошо, наше поколение готово. Давайте поиграем в это. Пожалуйста, просто выслушайте меня хоть раз. Почему
7:50 это всегда происходит? И как вы видите, это очень реалистично. Она действительно в ярости. Как будто она на самом деле кричит этот звук. Плюс ко всему, все остальное движется очень реалистично, включая необработанных мужчин. Очень хорошо. Давайте также рассмотрим смешной пример. Итак, вот аудио. Боже мой , это было слишком смешно. И чтобы это сработало, нам нужно ввести фотографию человека, который уже смеется. Итак, я сделал это с помощью Imagine от Google . Давайте нажмем «Сгенерировать». Хорошо, вот что мы получаем. Давайте поиграем в это. Боже мой, это было слишком смешно. Ладно, это неплохо. Синхронизация губ не
8:37 идеальна, но на 80% она верна. Теперь вместо гнева или смеха приведем грустный пример. Может, уже продолжим? Мое тело начинает сдавать позиции. А вот это выглядит очень реалистично. Обратите внимание, что этот человек также делает вдох и принюхивается, судя по аудиозаписи. Синхронизация действительно хорошая. Далее я хотел проверить, работает ли это с животными. Итак, вот пример. Я не выбирала пушистую жизнь. Пушистая жизнь выбрала меня. Итак, как вы видите, даже у животных движения губ идеально синхронизируются со звуком. Это действительно хорошо. Далее мне хотелось проверить, справится ли он с пением. Итак, позвольте мне загрузить эту акустическую
9:22 песню. Позвольте мне сначала проиграть вам, как это звучит . Может быть, ты тоже обо мне думаешь . Может быть, я просто так делаю. Кстати, я сгенерировал это с помощью Refusion, который легко стал одним из моих любимых музыкальных генераторов. Вы можете использовать его бесплатно, так что проверьте . Ну ладно, вернемся сюда. Я собираюсь загрузить это изображение женщины, играющей на гитаре. Хорошо, вот что мы получаем. думая обо мне. [Музыка] Хорошо, во-первых, синхронизация губ идеальна. На самом деле она поет текст песни. Кроме того, все это видео
10:08 выглядит очень плавным и естественным. Все ее тело движется. Она даже гитару переставляет. Камера также слегка движется. Освещение и отражения просто идеальны. Единственный недостаток в том, что она на самом деле не берет ноты из песни. Но опять же, я не ожидаю, что это произойдет . Так что в целом это все еще очень впечатляющее поколение. Я также хотел посмотреть, насколько хорошо он работает с разными стилями искусства. Вот пример Disney Pixar . Да, вот его позиция в двух словах. Некоторое время назад он получил прекрасное предложение о работе за границей от своего богатого родственника и сделал все возможное, чтобы его принять. Опять же, это очень хорошо. Он даже уловил дыхание и заставил ее остановиться и сделать вдох в начале клипа. Два слова. Плюс ко всему, ее
10:54 глаза моргают, и она разговаривает очень реалистично. Синхронизация губ близка к идеальной. Теперь, вместо 3D-стиля Disney Pixar , давайте также посмотрим, можно ли синхронизировать губы в аниме. Итак, вот пример из аниме. Конечно, рот мог бы быть и получше, но в целом неплохо. Он определенно справится со стилем аниме. И снова это заставляет ее тело слегка двигаться. Плюс ко всему, она моргает глазами, так что это не так роботизировано и жестко, как некоторые старые инструменты. Хорошо, давайте поговорим об этом в сравнении с VO3. Если вы хотите создать видео с
11:39 говорящим человеком, я бы предпочел этот инструмент, а не V3. Прежде всего, в случае с VO3, хотя вы и можете загрузить изображение в качестве начального или конечного кадра видео, вы не сможете заставить этого человека говорить. Вероятно, это связано с опасениями по поводу подделок и авторских прав. Еще одним ограничением V3 является то, что вы не можете контролировать голос человека. Единственный способ создать звук — использовать подсказку. Поэтому невозможно создать последовательного персонажа с последовательным голосом. В то время как при использовании этого метода вы можете загрузить любое аудио, которое захотите. Таким образом, вы можете сгенерировать голос, используя любой существующий генератор голосовых клонов и текстовых спецэффектов. Я
12:26 уже осветил множество из них на своем канале, например, F5TS или Zonos, или этот очень популярный, который называется RVC или преобразование голоса на основе поиска, которое может делать voicetooice. Это дает вам еще больше контроля. Таким образом, вы можете проговорить аудиозапись, а затем преобразовать свой голос в любой желаемый вами голос. Кстати, если вам интересно узнать больше об этих голосовых инструментах, посмотрите эти видео, ссылки на которые я дам в описании ниже. Итак, после того, как вы научитесь генерировать аудиоклип, вы можете легко вставить его в видеоаватар Hunen, а также загрузить эталонное изображение вашего персонажа, чтобы сгенерировать из него видео. Это действительно позволяет создавать видеоролики с единообразными персонажами и единообразными голосами, чего вы не сможете сделать с помощью Google V3. Также обратите внимание,
13:12 что ранее на моем канале я уже указывал множество других аниматоров лиц и инструментов синхронизации губ . Например, очень популярен живой портрет, при котором можно загрузить аудиоклип, и он оживит лицо. Или «привет» — еще один вариант, но эти инструменты ограничены только головой или ртом человека. Я также представил Echomimic V3, но этот инструмент также ограничен только верхней частью тела человека. Это первый доступный ИИ с открытым исходным кодом, который может анимировать любую сцену, даже сцену в полный рост , используя только аудиоклип. Вот что делает Hunyan Video Avatar таким мощным. Спасибо VidU за спонсорство этого видео. VidU — один из лучших видеогенераторов на базе искусственного интеллекта с массой возможностей. Их последняя модель Q1
13:59 еще лучше. Он отличается повышенной ясностью, детализацией и семантической точностью, что делает его мощным инструментом для создателей контента и режиссеров. Он действительно хорош для создания всех типов видео. Например, вот генерация текста в видео. Как видите, все очень реалистично и последовательно. Теперь вместо текста в видео вы также можете преобразовать изображение в видео, загрузив начальный или конечный кадр. И как вы видите, все очень последовательно. Плюс, у них есть масса других функций, таких как ссылка на видео, где вы можете загружать изображения объектов или персонажей, которых хотите вставить в видео. VU только что выпустил новую функцию для ссылок на видео. Теперь вы можете добавлять собственные справочные изображения в общедоступную библиотеку справочных изображений или просматривать и использовать ссылки, предоставленные другими, для
14:46 создания своих видеороликов. Например, предположим, я хочу использовать этот символ. Ну, я могу просто выбрать его из этой справочной библиотеки и создать видео этого персонажа всего за несколько кликов. Это может сэкономить вам массу времени, особенно если вам нужно создать определенных персонажей или объекты. Vido устанавливает новый стандарт создания видео с использованием искусственного интеллекта. Попробуйте бесплатно по ссылке в описании ниже. Это лишь некоторые из моих примеров на этой онлайн-платформе. Далее давайте рассмотрим, как можно установить его и запускать локально на вашем компьютере бесплатно и неограниченное количество раз без водяного знака. Итак, если вы зайдете на официальную страницу видеоаватара Hunyan и прокрутите ее до середины , то увидите, что минимальный объем видеопамяти составляет 24 ГБ, но это
15:35 будет очень медленно. И они рекомендуют использовать графический процессор с 96 ГБ видеопамяти. Ну, у кого, черт возьми, есть 96 ГБ? Но самое приятное, что вам на самом деле не нужно 24 ГБ. Итак, вы можете видеть здесь их последнее обновление: теперь оно поддерживает GPU всего с 10 ГБ видеопамяти с включенным TC. Это инструмент, который еще больше ускоряет генерацию благодаря W2GP. Вот это мы и собираемся установить сегодня. Давайте нажмем на эту ссылку, и это будет козел, дип-бип- мип. Респект этому парню за создание этого действительно простого интерфейса. Теперь, хотя там и указано одно, обратите внимание, что на самом деле они объединили в этот интерфейс видеоаватар Hunyan, а также LTV. Кстати, аббревиатура GP расшифровывается как GPU-бедный, что само по себе звучит
16:22 довольно грубо. Означает ли это, что вы слишком бедны, чтобы позволить себе более качественный графический процессор? Я не знаю. В любом случае, если вы прокрутите страницу вниз, то увидите два способа установки Want 12GP. Один из способов — установить приложение под названием Pinocchio. И после этого они предоставляют установщик Want 12GP в один клик. Итак, если вам нужен простой способ установки в один клик, воспользуйтесь этим вариантом. Но это может быть немного медленнее. Он может быть более раздутым и менее настраиваемым. Поэтому я предпочитаю устанавливать это вручную, и именно это мы сегодня и рассмотрим. Итак, это всего лишь несколько кратких инструкций. Итак, давайте прокрутим немного вниз и посмотрим на полное руководство по установке. Обратите внимание, что здесь требуется Python, и не волнуйтесь, я покажу вам, как установить его, если у вас его нет и
17:07 требуется совместимый графический процессор, который должен быть как минимум этого уровня или новее. Итак, вот инструкции для этих типов графических процессоров, или, если у вас 50-е поколение, вот инструкции по установке. Итак, я собираюсь рассказать, как установить это, используя эти инструкции. Теперь первым шагом нам нужно клонировать этот репозиторий, для чего на вашем компьютере должен быть установлен git. Если у вас его нет, вот как его установить. Если у вас уже установлен git, смело переходите к следующему разделу. Поэтому все, что нам нужно сделать, это загрузить последнюю версию для любой используемой вами операционной системы. Я использую Windows, поэтому я просто нажму «Загрузить для Windows». У меня 64-битная версия, поэтому я нажму здесь, чтобы загрузить. И сейчас он загружает этот .exe-файл. Итак, как только это будет завершено, все, что нам нужно сделать, это открыть этот exe-файл и следовать
17:54 инструкциям. Итак, я нажму « Далее». Я просто воспользуюсь местом установки по умолчанию — program files/get. Итак, я нажму «Далее» для этого, а затем оставлю все по умолчанию, а затем снова нажму «Далее» и нажму «Далее» здесь. Мы просто будем использовать настройки по умолчанию для всех этих параметров. Вам придется пройти множество настроек . Поэтому я просто нажму « Далее» для всех этих действий. Все в порядке. И затем он должен продолжить установку всех файлов. Так что это может занять несколько минут. Идеальный. Итак, теперь у нас установлен git. Все в порядке. Предположим, что у вас установлен git, следующим шагом будет выбор места на моем компьютере, куда я хочу его установить. Допустим, я просто хочу скопировать это на свой рабочий стол. Ну, мне просто нужно открыть рабочий стол, а затем в верхней части ввести cmd, чтобы открыть рабочий стол в командной строке, как вы можете здесь видеть.
18:41 Теперь следующий шаг — скопировать эту строку и вставить ее сюда. По сути, это приведет к клонированию всех файлов и папок, которые вы здесь видите, в папку на рабочем столе. Позвольте мне просто перенести это сюда. И если я открою это, то заметьте, что там есть те же файлы и папки, которые вы видите в этом репозитории GitHub. Хорошо, следующим шагом нам нужно сменить каталог на эту новую папку, поскольку сейчас мы все еще находимся на рабочем столе. Нам нужно перейти в одну папку в этой папке 12GP. Позвольте мне скопировать эту строку и вставить ее сюда. Итак, сейчас мы находимся в этой новой папке W2GP. Следующим шагом нам необходимо создать виртуальную среду под названием W2GP. И здесь будет использоваться Python 3.10.9. Теперь это
19:26 требует установки на ваш компьютер. Если у вас его нет, вот как его установить. Если у вас уже установлено это приложение, смело переходите к следующему разделу. Сейчас я просто нахожусь на anaconda.com и собираюсь установить Minionda. Это минималистичная версия Anaconda. Если вы устанавливаете полную версию Anaconda, она установит множество пакетов и зависимостей, которые вам могут не понадобиться. Это просто займет больше места на вашем компьютере. И, конечно, время установки немного больше. Но в случае с Minionda это всего лишь базовый пакет, и вы всегда можете установить дополнительные пакеты и зависимости впоследствии. Итак, я собираюсь перейти по ссылкам на последние версии установщика Minionda по версии Python. Я использую Windows,
20:12 поэтому собираюсь установить одну из них. Бесплатные и открытые инструменты искусственного интеллекта обычно не поддерживают Python 3.12. Поэтому лучше установить версию Python 3.11. Итак, я нажму на эту ссылку, и на ваш компьютер загрузится файл .exe. После завершения загрузки просто дважды щелкните по нему и следуйте инструкциям для завершения установки. Итак, я нажму « Далее» и соглашусь. А затем давайте установим это для всех пользователей. Я собираюсь использовать папку назначения по умолчанию. А потом я проверю и это. По завершении очистите кэш пакета. Это просто освободит вам немного места на диске, не влияя на функциональность. Все в порядке. Как только это будет сделано,
20:57 нажимаем «Далее», и на этом все готово. Но мы еще не закончили. Итак, если вы откроете командную строку и введете in- version, вы все равно увидите, что она не распознана. Это потому, что мы еще не добавили Anaconda в наш путь. Итак, давайте выйдем из этого. А затем, чтобы добавить его в наш путь, мы просто ищем эту функцию, редактируем системные переменные среды. Нажмем на это, затем нажмем на переменные среды, затем на ту, где написано path, и нажмем на « Изменить». И вот тут вы добавляете путь Анаконды. Так что все зависит от того, где вы установили Anaconda. Я установил его в данные программы. Итак, это будет в программных данных/мин. А затем, если я дважды щелкну по скриптам,
21:44 вы увидите, что они здесь. Итак, это папка, в которую мы хотим вставить данные. Итак, я щелкну по ней правой кнопкой мыши, скопирую как путь, а затем вернусь в окно переменных среды, нажму «Создать», вставлю сюда путь, нажму «ОК», затем «ОК» и еще раз «ОК». Теперь, если вы снова откроете командную строку и введете in- version, вы увидите, что мы работаем под управлением 24.5.0. Итак, это показывает, что мы успешно установили Anaconda. Хорошо, предположим, что вы установили его на свой компьютер, давайте скопируем эту строку и вставим ее сюда. Итак, еще раз, это просто создание новой виртуальной среды под названием W2GP, которая использует Python 3.10. Суть создания виртуальной среды заключается в том, чтобы
22:29 представить ее как отдельный жесткий диск, на котором размещены все пакеты и зависимости, необходимые для работы этого инструмента ИИ. И это важно, поскольку вы не хотите, чтобы что-либо из этого конфликтовало с существующими пакетами или зависимостями, которые есть на вашем компьютере. Все в порядке. Давайте нажмем Y, чтобы продолжить. Все в порядке. После этого следующим шагом нам необходимо активировать виртуальную среду, которую мы назвали 12GP. Давайте скопируем это и вставим сюда. Теперь вы видите, что мы находимся в нашей виртуальной среде, поскольку в начале строки в скобках указано имя . Хорошо, следующим шагом нам нужно установить PyTorch. Для этого вам потребуется наличие в вашей системе CUDA 12.4 или более поздней версии,
23:15 поскольку она обратно совместима. Итак, чтобы проверить, какая у вас версия CUDA, просто откройте еще одно окно командной строки и введите NVCC- version. И обратите внимание, здесь написано: у меня CUDA 12.4. Итак, идеально. Если у вас версия ниже CUDA 12.4, то эта строка может не работать. и вам нужно будет перейти на страницу PyTorch и выбрать соответствующую CUDA, которая у вас есть . Например, предположим, что вы используете Windows и у вас есть CUDA 11.8, тогда вам нужно будет использовать CU118 вместо CU24. В любом случае, у меня 12.4, поэтому я скопирую эту строку и вставлю ее сюда. Все в порядке. Итак, это приведет к установке Torch, Torch Vision и Torch
24:01 Audio, что займет более 2 ГБ. Все в порядке. Теперь, после установки всего необходимого, вы снова увидите эту строку без сообщения об ошибке. Итак, следующим шагом будет установка всех требований, перечисленных в этом файле requirements.ext. Итак, позвольте мне очень быстро это открыть . И обратите внимание, что это действительно длинный список зависимостей, которые необходимы для запуска. Давайте скопируем эту строку и вставим ее сюда. Опять же, поскольку список очень длинный, загрузка всего материала займет некоторое время . Все в порядке. Итак, начнется установка очень длинного списка пакетов. Но если все пойдет хорошо, вы должны увидеть эту строку без сообщений об ошибках. Теперь мы можем уже закончить это и начать работать. Но вот некоторые дополнительные оптимизации производительности. Если мы установим Sage 2
24:49 , мы сможем генерировать видео на 40% быстрее. Итак, давайте продолжим и сделаем это. Сначала нам нужно установить Triton для Windows с помощью pip. Итак, позвольте мне скопировать эту строку и вставить ее сюда. Все в порядке. Итак, там написано, что Triton успешно установлен. Идеальный. Следующим шагом нам необходимо установить Колесо внимания Sage. Теперь, несмотря на то, что там написано CUDA 12.6, обратите внимание, что CUDA имеет обратную совместимость. Таким образом, он все равно работает, даже если у меня CUDA 12.4. В любом случае, позвольте мне скопировать это и вставить сюда. Идеальный. Итак, Sage Attention успешно установлен. И это, в общем-то, всё. На этом установка завершена. Итак, позвольте мне выйти из этого окна и показать вам, как вы можете начать все с нуля на следующий день. Итак,
25:34 давайте дважды щелкнем по нашей папке 2GP. А затем в самом верху введите cmd, чтобы открыть эту папку в командной строке. И затем нам нужно использовать cond для активации созданной нами виртуальной среды, которая называется togp. И после того, как это будет сделано, если вы посмотрите на этот репозиторий GitHub, если вы хотите только преобразовать текст в видео, вы можете запустить эту строку. Но для нас, для аватара Хунань, лучше всего загрузить изображение в качестве ссылки. Итак, мы собираемся использовать преобразование изображения в видео, в этом случае нам нужно запустить эту строку. Позвольте мне скопировать это и вставить сюда. Теперь, когда вы запустите это в первый раз, вам придется подождать еще несколько минут, пока оно загрузится. Но после этого вы должны увидеть этот URL. Так что
26:20 просто удерживайте клавишу Control и нажмите на эту ссылку, и в вашем браузере откроется интерфейс 1GP. Несмотря на то, что вы используете интернет- браузер, на самом деле это не онлайн. Так что это полностью офлайн. Это локальный URL-адрес. На самом деле здесь есть масса опций, например, одно изображение в видео, а также фантомный первый кадр и последний кадр. Также есть ролики Sky и видео LTX, все это я уже рассматривал на своем канале. Плюс, у нас тут есть этот видеоаватар Хуньяна. Итак, позвольте мне нажать на это. Прежде чем приступить к работе, вам следует настроить несколько параметров . Итак, давайте рассмотрим конфигурацию. Здесь есть масса различных настроек, с которыми можно поиграться, но мы перейдем на вкладку «Производительность». И вы можете изменить
27:05 это в зависимости от того, сколько у вас видеопамяти . Например, если включить эту функцию, то она будет работать медленнее, но при этом снизятся требования к VRAMm. Я отключу эту функцию, поскольку у меня достаточно видеопамяти. А еще у нас есть опция ускорения, которая дает вам примерно 10% ускорения без потери качества. Итак, да, давайте начнем с этого. А здесь для профиля вы можете выбрать массу таких профилей. Таким образом, если у вас мало оперативной памяти и мало видеопамяти, то по умолчанию используется этот вариант. А здесь указана минимальная сумма, которая вам необходима. Так что если у вас не менее 32 ГБ оперативной памяти и 12 ГБ видеопамяти, вам следует выбрать этот вариант. Если у вас 24 ГБ видеопамяти, например, если у вас 4090, то вам следует выбрать профиль 3. И
27:52 наоборот, если у вас много оперативной памяти, но мало видеопамяти, например, если у вас не менее 48 ГБ оперативной памяти и только 12 ГБ видеопамяти, то вам следует выбрать этот профиль и так далее и тому подобное. Они вполне говорят сами за себя. А затем, выбрав наилучшие параметры для своего устройства, вы можете нажать «Применить изменения». Все в порядке. Итак, возвращаясь к видеогенератору, мы снова будем использовать видеоаватар Хунена. А вот здесь мы загружаем эталонное изображение. А вот сюда мы загружаем аудио для синхронизации. И здесь мы введем подсказку для более подробного описания сцены. Вот соотношение сторон. Таким образом, вы можете выбирать из множества различных соотношений сторон. Самое приятное в видеоаватаре Hunyan то, что он, кажется, поддерживает разрешение до 1080p. А вот
28:39 здесь, по сути, указана продолжительность вашего видео. То есть, это примерно 25 кадров в секунду. Так что если вы хотите установить его на 5 секунд, то это будет примерно 125. И это может доходить до 41 кадра, что составит примерно 16 секунд, что более чем достаточно. А вот здесь указано количество шагов вывода. По сути, это количество шагов, которые должна пройти модель ИИ при создании вашего видео. В целом, чем больше шагов вы сделаете, тем более качественным и последовательным будет ваше видео. Он также будет содержать меньше ошибок. Однако в определенный момент, например, если вы увеличите это значение до 100 шагов, это будет уже слишком много. Вы получите убывающую отдачу где-то через 30–40 шагов. А если установить это значение ниже, то он будет работать быстрее, но за счет
29:26 некоторого снижения качества. Все в порядке. А здесь у нас также есть переключатель расширенного режима. И если мы посмотрим на это, то именно здесь вы можете выбрать семя или, по сути, отправную точку вашего поколения. Вот количество видео на одну подсказку. Вот шкала ориентиров. Так как же буквально он должен следовать вашим подсказкам. А затем вы также можете добавить сюда люры, если захотите. Если вы не знакомы с термином «Лора», то по сути это своего рода точно настроенные модели или специальные эффекты, которые вы можете добавить поверх своего видеогенератора, если хотите создать, например, определенный эффект, движение или персонажа. Самая важная вкладка в настройках расширенного режима — это вкладка «Скорость». Итак, здесь вы можете включить или выключить tcash. Это сделает ваше поколение еще быстрее. Так,
30:12 например, вы можете включить эту функцию, чтобы ускорить генерацию видео в 2,5 раза, но при этом пострадает качество. Поэтому я думаю, что примерно двукратное ускорение было бы правильным балансом между скоростью и качеством. Итак, давайте выберем это. Обратите внимание, что это также потребляет видеопамять. Поэтому, прежде чем включать эту функцию, убедитесь, что у вас достаточно видеопамяти. И у нас также есть некоторые настройки повышения частоты дискретизации , качества и прочего. Не стесняйтесь экспериментировать и играть с ними. И это, в общем-то, всё. Итак, давайте начнем создавать видео прямо сейчас. Например, я собираюсь загрузить это изображение. А для звука давайте воспользуемся вот этим простым вариантом. Вы это слышали? Я боюсь. Послышался звук, похожий на движение в темноте. Для подсказки я просто напишу, что она
30:58 говорит. Давайте нажмем «Сгенерировать» и посмотрим, что это нам даст. Теперь, когда вы запустите это в первый раз, обратите внимание, что также необходимо загрузить эту модель видеоаватара на венгерском языке, которую вы можете увидеть здесь. Итак, это будет довольно большой файл. Опять же, это несколько гигабайт, так что это займет некоторое время. И вот что мы получаем. Обратите внимание, что этот локальный инструмент не содержит водяного знака. Вы это слышали? Я боюсь. Послышался звук, похожий на движение в темноте. Не самый быстрый видеогенератор из существующих, но это потому, что он включает в себя аудио и ему также необходимо синхронизировать видео с губами. Итак, в этом процессе есть несколько дополнительных шагов . Вкратце, вот как вы можете установить и запустить Hunyan Video Avatar локально на своем компьютере, даже если у вас мало видеопамяти. Итак, вот что я хотел сказать по поводу
31:45 обзора и руководства по установке Hunyan Video Avatar. Это первый доступный инструмент с открытым исходным кодом, который может анимировать любую сцену, включая тело человека в полный рост, с помощью аудиоклипа. Он даже может обрабатывать эмоции, различные выражения и различные стили анимации. Итак, это супермощный инструмент. И что самое приятное, вы можете запустить игру, используя всего 10 ГБ видеопамяти. Так что обязательно попробуйте это. Я дам ссылки на все в описании ниже. Дайте мне знать, что вы об этом думаете. Если во время установки у вас возникнут какие-либо ошибки, пожалуйста, вставьте сообщение об ошибке в комментарии ниже, и я постараюсь помочь вам устранить неполадки, насколько это возможно. Как всегда, я буду следить за новостями и инструментами в сфере ИИ, чтобы поделиться с вами. Так что если вам понравилось это видео, не забудьте поставить
32:31 лайк, поделиться, подписаться и следить за новостями, чтобы увидеть больше контента. Кроме того, каждую неделю в мире ИИ происходит так много событий, что я просто не могу охватить все на своем канале YouTube. Поэтому, чтобы быть в курсе всего, что происходит в сфере искусственного интеллекта, обязательно подпишитесь на мою бесплатную еженедельную рассылку. Ссылка на нее будет в описании ниже. Спасибо за просмотр, увидимся в следующем выпуске.
