TikTok’un çatı şirketi ByteDance, OmniHuman video üretim modelinin 2.0 sürümünü BytePlus üzerinden kullanıma açtı. Model, bir görsel ile ses kaydını kullanarak 30 saniyeden 5 dakikaya kadar video oluşturabiliyor. Konuşma, mimik ve vücut hareketlerini sesle eşleştiren sistem; insan görsellerinin yanı sıra hayvanları, 3D karakterleri ve farklı görsel stillerdeki karakterleri de hareketlendirebiliyor.
Kullanıcılar metin komutlarıyla sahnedeki hareketleri ve kamera davranışını yönlendirebiliyor. Komutlarla sahneye referans görselde bulunmayan öğeler eklemek ve birden fazla karakterin yer aldığı videolar oluşturmak da mümkün. BytePlus’a göre OmniHuman 2.0, yalnızca dudak hareketlerini eşleştirmiyor; sesin ritmini, tonunu ve anlamını analiz ederek jest ve duygusal tepkiler üretmeye çalışıyor.
Fiyatı ve kullanım alanları
BytePlus, yeni sürümde hareket kalitesinin iyileştirildiğini ve maliyetin yüzde 40 azaltıldığını söylüyor; ancak bu düşüşün hangi sürüm ya da maliyet kalemiyle karşılaştırıldığı açıklanmıyor. Açıklanan kullanım fiyatı, üretilen video süresinin saniyesi başına 0,07 dolar. Bu birim fiyatla 300 saniyelik bir video 21 dolara karşılık geliyor; ek ücretler veya fiyatın hangi koşullarda değişebileceği kaynakta belirtilmiyor.
BytePlus, modeli reklam ve marka içerikleri, kısa videolar, film ve televizyon prodüksiyonları, müzik videoları ve kullanıcı içerikleri için konumlandırıyor. Geliştiriciler OmniHuman 2.0’a API üzerinden erişebiliyor; böylece modeli kendi içerik üretim araçlarına veya dijital karakter uygulamalarına ekleyebiliyor. Ancak API erişiminin koşulları ve bireysel kullanıcıların modele doğrudan erişip erişemeyeceği açıklanmamış.
Neden önemli
Video üreticileri ve geliştiriciler, tek bir görselden sesle eşleşen, beş dakikaya kadar dijital karakter videoları hazırlayabilir; API de bu özelliği kendi araçlarına eklemeyi mümkün kılıyor. Ancak 300 saniyelik çıktı belirtilen birim fiyatla 21 dolar ve bireysel erişim koşulları açıklanmadı. Bu nedenle modelin küçük içerik üreticileri için ne kadar kolay ve uygun fiyatlı olacağı henüz belli değil.