PRIME VIDEO’DAN DUBLAJ İÇİN YAPAY ZEKÂ HAMLESİ

İlk olarak Almanca çekilen Maxton Hall dizisinde kullanılan teknoloji, oyuncuların dudak hareketlerini İngilizce dublajdaki konuşmalara uyacak şekilde görsel olarak değiştiriyor.

Amazon, Prime Video içeriklerinin farklı dillere uyarlanmasında yapay zekâ teknolojilerinin kullanımını genişletiyor. Şirket daha önce bazı içeriklere otomatik dublaj eklemek amacıyla yapay zekâdan yararlanmıştı. Yeni sistem ise doğrudan seslendirme yapmak yerine dublaj sırasında ortaya çıkan görüntü ve ses uyumsuzluğunu gidermeye odaklanıyor.

Geleneksel dublajlarda oyuncunun orijinal dilde söylediği kelimeler ile başka bir dilde duyulan cümleler farklı olduğu için ağız hareketleri sesle tam olarak eşleşmeyebiliyor. Prime Video’nun yeni sistemi, görüntü üzerinde değişiklik yaparak oyuncunun dudaklarını izleyicinin duyduğu dile daha uygun hale getiriyor.

İLK OLARAK MAXTON HALL’DA KULLANILDI

Teknolojinin ilk uygulandığı yapım Almanca çekilen Maxton Hall dizisi oldu. Dizinin İngilizce dublajı yapay zekâ tarafından değil, insan seslendirme sanatçıları tarafından hazırlandı. Seslendirme işleminin ardından yapay zekâ ve görsel efekt araçları kullanılarak oyuncuların dudak hareketleri İngilizce konuşmalara uygun biçimde düzenlendi.

Böylece ekrandaki oyuncunun ağız hareketleri ile izleyicinin İngilizce olarak duyduğu diyalogların birbirine daha yakın görünmesi sağlandı. Amazon’un sistemi bu yönüyle insan seslendirme sanatçılarının yerini almak yerine mevcut dublajın görüntüyle daha uyumlu hale getirilmesi için kullanılıyor.

YAPAY ZEKÂ VE GÖRSEL EFEKTLER BİRLİKTE ÇALIŞIYOR

Amazon, yeni sistemin teknik ayrıntılarını henüz paylaşmadı. Şirket, işlemlerin ne kadarının tamamen otomatik gerçekleştirildiğini veya dudak hareketlerini değiştirmek için hangi yapay zekâ modellerinin kullanıldığını açıklamadı.

Prime Video tarafından verilen bilgilere göre sistem, yapay zekâ teknolojileri ile görsel efekt araçlarının birlikte kullanılmasına dayanıyor. Süreç aynı zamanda yaratıcı ekiplerin gözetimi altında yürütülüyor. Böylece yapay zekânın oluşturduğu görsel değişiklikler yapım sürecinde kontrol edilebiliyor.

İLK İKİ SEZONDA KULLANIMA SUNULDU

Yapay zekâ destekli dudak senkronizasyonu şu anda yalnızca Maxton Hall dizisinde kullanılıyor. Teknoloji dizinin ilk iki sezonunda dünya genelinde kullanıma sunuldu. Aralık ayında yayınlanacak üçüncü ve final sezonda da aynı teknolojiden yararlanılacak.

Amazon, Maxton Hall ile başlayan uygulamanın gelecekte Prime Video’daki başka yapımlara da taşınmasını planlıyor. Teknolojinin daha fazla içerikte kullanılması halinde farklı dillerde hazırlanan dublajlarda oyuncuların ağız hareketlerinin seslendirmeye göre yeniden düzenlenmesi mümkün olacak.

DUBLAJIN EN ESKİ SORUNLARINDAN BİRİNE YAPAY ZEKÂ ÇÖZÜMÜ

Yeni sistemle birlikte Prime Video, dublajlı yapımlarda yıllardır karşılaşılan ses ve dudak senkronizasyonu sorununa görüntü tarafında müdahale ediyor. İnsan seslendirme sanatçıları tarafından hazırlanan dublaj korunurken yapay zekâ, oyuncunun ekrandaki ağız hareketlerini çevrilen dile göre yeniden şekillendiriyor.

Amazon’un teknolojiyi diğer Prime Video yapımlarına da genişletme planı, yöntemin Maxton Hall ile sınırlı kalmayacağını gösteriyor. Şirket, yapay zekâ ve görsel efektlerin birlikte kullanıldığı sistemi farklı dillerdeki içeriklerin yerelleştirilmesinde kullanmayı planlıyor.