В видео-инструментах с искусственным интеллектом произошли масштабные обновления, я рассказываю обо всех наиболее важных релизах и обновлениях существующих инструментов. Появилась возможность захвата движения, согласованные персонажи, сложные движения, изменение голоса, передача стиля и многое другое. Я также создаю полноценную сцену с постоянными персонажами на протяжении всего видео и прослеживаю весь процесс.

——————————————————————————

 

Видео с искусственным интеллектом продолжает улучшаться – 8 важных обновлений

00:01 Введение

• Инструменты для обработки видео с ИИ претерпели значительные изменения.
• Новое поколение захвата движения и управления персонажами.
• Возможность создания реалистичных персонажей и сцен.

00:27 Runways E2

• Изменение стиля видео во время речи.
• Синхронизация губ и движений рук.
• Перенос выступления на персонажа или сложные сцены.
• Добавление голосового редактора.
• Улучшенная обработка движений рук и кистей.
• Изменение соотношения сторон видео.

01:55 V3

• Генерация видео и аудио с звуковыми эффектами, диалогами и музыкой.
• Преобразование текста в видео.
• Использование быстрой модели для экономии средств.
• Пример генерации видео с Шреком.

02:22 Преобразование изображения в видео

• Загрузка изображения и генерация видео.
• Контроль начального кадра для последовательных персонажей.
• Функция амни референс для размещения персонажа в разных сценах.

04:13 Контекст от Flag

• Генерация новых изображений на основе эталонного.
• Сохранение стиля и эстетики исходного изображения.
• Примеры генерации изображений с разными углами обзора.

06:36 NVIDIA A-Twin

• Создание цифровых аватаров для видео.
• Загрузка шестисекундного видео для создания аватара.
• Возможность клонирования продуктов для рекламы.
• Редактирование видео с помощью естественного языка.

09:35 Генеративный план

• Бесплатное создание A-аватаров.
• Рекомендация перейти на генеративный план для постоянного использования.
• Стоимость генеративного плана начинается от 100 долларов в месяц.

09:51 Введение и Хиллу О2

• Хиллу О2 предлагает сложные движения, включая боевые сцены и акробатику.
• Модель работает с текстом и изображениями, генерируя вирусные видео.
• Примеры использования: Олимпийские игры, животные, дайвинг, скалолазание.

10:51 Инструмент для звуковых эффектов

• Инструмент на Хаген Фейс добавляет звуковые эффекты к видео.
• Быстро генерирует синхронизированные звуковые эффекты.
• Полезен для быстрых постов в социальных сетях.

11:31 Мид Джорни

• Мид Джорни генерирует видео в четырёх режимах: автоматическом, ручном, с низкой и высокой скоростью движения.
• Быстро генерирует четыре видео.
• Хорошо справляется с абстрактными изображениями и загруженными изображениями.

12:30 Расширение и повторение запросов

• Возможность расширять и повторять запросы для создания длинных последовательностей.
• Плавное генерирование сцен без видимых переходов.
• Возможность зацикливания и добавления начальных и конечных кадров.

13:03 Аста Тосс

• Аста Тосс увеличивает разрешение видео и добавляет детали.
• Два варианта увеличения: тонкий и смелый.
• Предварительный просмотр за меньшее количество кредитов помогает выбрать лучший вариант.

14:27 Работа с голосовыми описаниями

• Использование одного голосового описания для каждого поколения видео.
• Проблема с изменением голоса мужчины от поколения к поколению.
• Применение Adobe Podcast для очистки диалога.

16:02 Изменение голоса

• Клонирование и изменение голоса с сохранением времени и интонации оригинала.
• Перенос изменённых голосов в видео для идеальной синхронизации губ.
• Переделка звуковых эффектов с нуля.

17:24 Финальная версия

• Использование различных инструментов: Мид Джорни, Флаг Контекст, Ву Три, Adobe Podcast, ЛПС.
• Сборка финальной сцены в Adobe.

18:25 Заключение

• Приглашение к изучению искусственного интеллекта на платформе Фоторпеди.
• Более 500 уроков по 20 курсам.
• Возможность получить семидневную бесплатную пробную версию.