ByteDance, tek görselden 5 dakikaya kadar video üreten OmniHuman 2.0’ı kullanıma sundu

TikTok’un çatı şirketi ByteDance, yapay zeka destekli video üretim modeli OmniHuman‘ın yeni sürümü OmniHuman 2.0’ı kullanıma sundu. Şirketin kurumsal yapay zeka platformu BytePlus üzerinden sunulan model, tek bir görsel ve ses kaydından 5 dakikaya kadar video oluşturabiliyor. OmniHuman 2.0, karakterlerin konuşmalarını, mimiklerini ve vücut hareketlerini ses içeriğiyle eşleştirerek gerçekçi dijital karakter videoları üretiyor.

Kullanıcılar isteğe bağlı olarak metin komutlarıyla sahnedeki hareketleri ve kamera davranışını da yönlendirebiliyor. OmniHuman 2.0’ın öne çıkan yeniliklerinden biri, yalnızca dudak senkronizasyonuna odaklanmak yerine sesin ritmini, tonlamasını ve anlamını da karakter hareketlerine yansıtması. BytePlus’a göre model, ses içeriğini analiz ederek detaylı ⇒

Alıntının kaynağı: Webrazzi