Cyberpunk 2077'nin diyaloğu AI tarafından dudak senkronizasyonu

CD Projekt Red,birçok dilde diyaloğu dudak senkronizasyonu için yapay zeka kullanarak oyunculara daha derin bir daldırma katmanı eklemeyi hedefliyor.

Oyunun baş karakter teknik direktörü Mateusz Popławski bir sunumda ( Twitter'da @ shinobi602 aracılığıyla ) CDPR'nin The Witcher 3'ten daha iyi dudak senkronizasyon kalitesini hedeflediğini söyledi . Bunu 10 dilde yapmak istedi: İngilizce, Almanca, İspanyolca, Fransızca, İtalyanca, Lehçe, Brezilya Portekizcesi, Rusça, Mandarin ve Japonca.

Amaç, tüm bunları açık dünyadaki her karakter için yapmaktı. Oyunun muazzam kapsamı nedeniyle, CDPR'nin hepsini sıfır yüz hareketi yakalama ile yapması gerekiyordu. Bunu yapmak için stüdyo , karakterlerin yüzlerinin nasıl hareket ettiğini prosedürel olarak oluşturmak için Jali Research’ün dudak senkronizasyonu ve yüz animasyonu teknolojisinden yararlandı.

Cyberpunk 2077'deki bazı karakterler birden çok dil konuşur, bazen aynı cümle içinde aralarında geçiş yapar. Bunu hesaba katmak için, transkript etiketleme kullanıldı. Etiketler ayrıca, duygusal durumları bir diyalog satırı içinde değiştiğinde bir karakterin yüz ifadelerinin ayarlanmasına yardımcı oldu. Sistem ayrıca, animasyonlarda bir vokal performansının duygularını kopyalamak için ses analizi kullandı.

CDPR , The Witcher 3'teki ara sahneleri canlandırmasına yardımcı olmak için algoritmalar kullandı ve bu, bu yaklaşımın bir evrimi. Çoğu oyun, tek bir dilde dudak senkronizasyonu yapmak için hareket yakalama özelliğini kullanır ve bu, farklı bir dile geçiş yapan oyuncular için daldırma deneyimini biraz bozabilir.

Cyberpunk 2077'de prosedürel olarak oluşturulan animasyonlar, diğer bazı AAA oyunlarında olduğu kadar ayrıntılı veya anlamlı olmayabilir , ancak farklı dillerde oynamayı tercih eden birçok oyuncu için deneyime katkıda bulunabilir. Oyun 19 Kasım'da çıktığında bunun pratikte nasıl çalıştığına daha yakından bakabileceksiniz .