Создатели TikTok представили ИИ-инструмент для создания видео

Компания ByteDance, владелец TikTok, представила OmniHuman — новый ИИ-инструмент для создания реалистичных видео на основе одной фотографии. OmniHuman способен заставить изображение петь, говорить и двигаться, точно имитируя жесты, мимику и даже полноценные телесные движения.

Об этом пишет Tech Radar.

Как работает OmniHuman

Разработчики натренировали модель на более 18 700 часах видео, что позволило ей максимально точно передавать человеческую пластику. Технология позволяет создавать полноценные видеоролики, а не просто анимацию лица или верхней части тела. Обычная фотография может превратиться в видео с выступлением, танцем или даже игрой на музыкальном инструменте.

Благодаря OmniHuman возможно "оживить" не только реальные снимки, но и стилизованные портреты, получая реалистичные видео с высоким уровнем детализации.

Как только такая технология станет общедоступной, она сразу может получить немалую популярность на TikTok. Платформа уже имеет ИИ-видеогенератор Jimeng, хотя OmniHuman может стать способным привлечь внимание большего количества пользователей.

Среди конкурентов OmniHuman есть и другие видеогенераторы, например, OpenAI Sora, Pika, Runway, Pollo и Luma Labs Dream Machine.

Новую технологию можно использовать для:

• восстановления образов исторических фигур в учебных целях;
• создания цифровых аватаров для соцсетей и игр;
• использования в кино для воспроизведения актеров прошлого.

Сейчас OmniHuman остается исследовательским проектом с впечатляющими возможностями.

Напомним, в ChatGPT появилась новая функция Deep Research, которая позволяет осуществлять глубокие исследования. Искусственный интеллект при этом может работать автономно, проводя планирование и многоэтапные исследования.

Также мы писали, что в приложении NVIDIA Broadcast доработали функционал, который позволяет пользователям улучшать качество аудио и видео в реальном времени. Любой дешевый микрофон или встроенный в веб-камеру может получить студийное звучание.