Yapay Zeka Oyuncuları Değiştirebilir mi? Digital Double Tech Nasıl Çalışır?

Kürenin içinde, dünya beyaz bir ışık küresine indirgenir ve yanıp söner. Kürenin metalik, iskelet çerçevesinin dışında karanlık var. Bu düzeneğin içinde bir sandalyeye bağlı olduğunuzu hayal edin. Karanlıktan gelen bir ses ifadeler önerir: ağzınızı ve kaşlarınızı poz vermenin yolları, tepki göstermeniz için senaryolar, söylemeniz gereken sözler ve somutlaştırmanız gereken duygular. Düzensiz aralıklarla ses ayrıca endişelenmemenizi söyler ve yakında daha fazla flaşın geleceği konusunda uyarır.

diye soran bir aktör, “Korktuğumu sanmıyorum, ama çok ezici bir alandı,” diyor. Bilimsel amerikalı gizlilik nedenleriyle adını saklamak. 2022’de büyük bir video oyununun yapımı sırasında benzerliğini yakalamak için kullandığı fotogrametri kabini için kullandığı terim olan “küre” ile yaşadığı deneyimi anlatıyor. [a magnetic resonance imaging machine],” diyor. “Gerçekten çok bilimkurguydu.” Bu aktörün deneyimi, medya prodüksiyon stüdyolarının çeşitli pozisyonlardaki oyuncuların fotoğraflarını çekmesine ve daha sonra gerçekçi bir video dizisinde hemen hemen her eylemi veya hareketi gerçekleştirmek için canlandırılabilen hareketli, şekillendirilebilir dijital avatarlar oluşturmasına olanak tanıyan tarama sürecinin bir parçasıydı.

Yapay zekadaki ilerlemeler, kürede yoğun bir seans olmadan bile bunun gibi dijital çiftler üretmeyi artık giderek daha kolay hale getiriyor. Bazı aktörler, stüdyoların kendilerine benzerlerini imzalamaları için baskı yapacağı ve dijital kopyalarının işlerini ellerinden alacağı olası bir gelecekten korkuyor. Bu, SAG-AFTRA (Screen Actors Guild–Amerikan Televizyon ve Radyo Sanatçıları Federasyonu) sendikasının üyelerini greve gitmeye motive eden faktörlerden biridir. Sendika, “İnsan performanslarının yapay zeka teknolojisiyle değiştirilmesini önlemek için sanatçıların görüntülerimizin ve performanslarımızın korunmasına ihtiyacı var” dedi. grevin duyurulmasından birkaç gün sonra yapılan açıklama Temmuz ortasında.

AI değişimi rahatsız edici bir olasılık olsa da, günümüzün medya prodüksiyonlarında görülen dijital çiftler hala insan sanatçılara ve özel efekt sanatçılarına güveniyor. İşte teknolojinin nasıl çalıştığı ve yapay zekanın yerleşik süreci nasıl sarstığı.

Digital Double Tech Nasıl Çalışır?

Yaklaşık son 25 yılda, büyük bütçeli medya prodüksiyonlarının en azından bazı oyuncuların yüz ve vücutlarının dijital kopyalarını yaratması giderek daha yaygın hale geldi. Bu teknoloji, kapsamlı dijital efektler, ayrıntılı aksiyon sahneleri veya bir oyuncunun birden çok yaştaki bir karakteri canlandırmasını içeren herhangi bir filmde, TV şovunda veya video oyununda neredeyse kesin olarak rol oynar. Kendi şirketi MacLean VFX’te görsel efekt süpervizörü olan Chris MacLean, “Bir tür endüstri standardı haline geldi” diyor.

Fotogrametri kabini, bazen küre bazen de kare bir oda etrafında düzenlenmiş yüzlerce kameranın çevrelediği bir alandır. Kameralar, bir kişinin yüzünün kasıtlı olarak üst üste binen iki boyutlu görüntüsünü yüksek çözünürlükte yakalar. Bir oyuncunun rolü konuşmayı veya duygu göstermeyi içeriyorsa, birçok farklı yüz hareketinin resimlerine ihtiyaç vardır. Bu nedenle, başrol oyuncuları, ikincil veya arka plandaki oyunculardan daha kapsamlı taramalar gerektirir. Benzer şekilde, gövdeleri taramak için daha büyük kurulumlar kullanılır.

Bu verilerle, görsel efekt (VFX) sanatçıları modeli iki boyutludan üç boyutluya taşır. Fotoğrafların üst üste binmesi önemlidir. Kamera koordinatlarına ve bu gereksiz üst üste binen bölümlere bağlı olarak, görüntüler dijital origamiye benzer bir süreçte eşlenir ve birbirine göre katlanır. Sanatçılar daha sonra ortaya çıkan 3 boyutlu dijital çifti sanal bir “iskelete” donatabilir ve canlandırabilir – ya bir oyuncunun gerçek dünyadaki hareket yakalama performansını doğrudan takip ederek ya da bu performansı bilgisayar tarafından üretilen bir dizi hareketle birleştirerek. Animasyonlu figür daha sonra dijital bir manzaraya yerleştirilebilir ve diyalog verilebilir – teknik olarak, bir kişinin taramalarını, oyuncunun asla yapmadığı veya söylemediği şeyleri yaptığı ve söylediği şeyleri fotogerçekçi video görüntüleri oluşturmak için kullanmak mümkündür.

Özel efekt sanatçıları, bir oyuncunun dijital performansını insandan tamamen farklı görünen sanal bir avatara da uygulayabilir. Örneğin, yukarıda bahsedilen video oyunu aktörü, kürede suratlar yaptığını ve repliklerini bir kayıt kabininde kaydettiğini söylüyor. Ayrıca, fotogrametriye benzer ancak vücudun hareketlerini kaydetmek için tasarlanmış bir süreç olan hareket yakalama için oyuncu arkadaşlarıyla birlikte ayrı bir stüdyoda birçok sahneyi fiziksel olarak canlandırdı. Ancak oyuncular nihai ürünle etkileşime geçtiklerinde bu oyuncuyu ekranda görmeyecekler. Bunun yerine, dijital kopyası, belirli bir görünüme sahip bir kötü adam gibi görünecek şekilde değiştirildi. Son animasyon karakteri böylece hem oyuncunun işini hem de video oyunu karakterinin özelliklerini ortaya koydu.

Tarihsel olarak hem emek yoğun hem de pahalı olmasına rağmen, film ve televizyon yapımları bu süreci on yıllardır kullanıyor. Zorluğa rağmen, dijital çiftler yaygındır. Prodüksiyon ekipleri, bunları diyalog ve eylem içeren küçük ayarlamalar yapmak için sıklıkla kullanır. Bu teknoloji aynı zamanda 100 kişilik bir arka plan aktörü grubunu alıp bunları binlerce kişilik bir dijital kalabalığa dönüştürmek ve çoğaltmak gibi daha büyük düzenlemeler için de kullanılıyor. Ancak, orijinal görüntü istenen nihai çıktıya yakınsa, bu tür başarıları ikna edici bir şekilde gerçekleştirmek daha kolaydır. MacLean, örneğin, 19. yüzyıl Avrupa’sında giyilen bir giysiyi taklit eden bir kostümle taranan bir arka plan aktörünün, dijital dublörlerinin bir uzay giysisi giydiği distopik bir geleceğe kurgulanmasının zor olacağını söylüyor. “Stüdyoların bu kadar sabırlı olmasının hiçbir yolu olmadığını düşünüyorum” diye ekliyor.

Yine de, ChatGPT’nin arkasındaki makine öğrenimi teknolojisinin aynısı olan üretken yapay zeka, dijital ikili sürecin bazı yönlerini daha hızlı ve daha basit hale getirmeye başlıyor.

AI Saldırıyor

MacLean, bazı VFX şirketlerinin dijital bir dublörün görünümünü değiştirme sürecini hızlandırmak için zaten üretken yapay zekayı kullandığını belirtiyor. Bu, aşağıdakiler gibi filmlerde ünlü bir aktörün “yaşını küçültmeyi” kolaylaştırır: Indiana Jones ve Kader Kadranı, şu anda 81 yaşında olan Harrison Ford’un daha genç görünen bir versiyonuyla bir geri dönüşü içeren. Bir mobil fotogrametri şirketi olan Scan Truck’ın baş teknoloji sorumlusu Vladimir Galat’a göre yapay zeka, bir aktörün benzerliğinin bir dublörün (aslında onaylı bir deepfake) üzerine bindirildiği yüz değiştirme için de kullanışlı oluyor.

Galat, AI’daki ilerlemelerin bazı fotogrametri taramalarını gereksiz hale getirdiğini söylüyor: Üretken bir model, artık yaşamamış birinin bile mevcut fotoğrafları ve çekimleri üzerinde eğitilebilir. Digital Domain, üzerinde çalışmış bir VFX prodüksiyon şirketi Yenilmezler: Oyunsonu, tarihsel figürler tarafından sahte dijital performanslar yaratmanın da mümkün olduğunu söylüyor. Digital Domain’in baş teknoloji sorumlusu Hanno Basse, “Bu çok yeni bir teknoloji ancak işimizin büyüyen bir parçası” diyor.

Şimdiye kadar yaşayan insanlar, merhumun “tarafından” performansların işlenmesine hâlâ dahil oldular. Gerçek bir oyuncu bir sahneyi canlandırır ve ardından efekt sanatçıları yüzlerini tarihi kişinin yüzüyle değiştirir. Basse, bazen insan gibi görünen ama tam olarak olmayan bir şeyin neden olduğu ürkütücü duyguya atıfta bulunarak, “Yapay zeka ve makine öğrenimi araç setlerimizle birlikte bir oyuncunun performansındaki nüansların, bir izleyiciyi büyüleyebilecek ve tekinsiz vadiyi aşabilecek fotogerçekçi sonuçlara ulaşmak için kritik önem taşıdığını düşünüyoruz” diyor.

Robot Değiştirme Korkuları

Bilgisayar mühendisi, dijital bir çifti ayarlamakla bir kişinin performansını tamamen AI ile değiştirmek arasında bir fark olduğunu söylüyor Jeong Joon “JJ” ParkıŞu anda Stanford Üniversitesi’nde bilgisayar görüntüsü ve grafikleri araştıran ve bu sonbaharda Michigan Üniversitesi’nde bir pozisyona başlayacak olan Dr. Tekinsiz vadi geniş ve sıfırdan eksiksiz, fotogerçekçi, hareketli bir sahne oluşturabilen üretken bir yapay zeka modeli henüz yok – bu teknoloji yakın bile değil, diye belirtiyor Park. Oraya ulaşmak için, “geliştirmekte olduğumuz zekada büyük bir sıçrama olması gerekiyor” diyor. (Yapay zeka tarafından oluşturulan görüntülerin gerçeğinden ayırt edilmesi zor olabilir, ancak gerçekçi durağan görüntüler oluşturmak, 3 boyutlu alanı temsil etmesi amaçlanan video oluşturmaktan çok daha kolaydır.)

Yine de, aktörlerin benzerliğinin kötüye kullanılması tehdidi beliriyor. Bir kişinin yüzü kolayca diğerinin yüzüyle değiştirilebiliyorsa, o zaman film yapımcılarının her aksiyon filminin her karesine Tom Cruise’u koymasını ne engelleyebilir? Stüdyoların 100 arka plan oyuncusunu tek bir oyuncuyla değiştirmesini ve birçok kişinin yanılsamasını yaratmak için yapay zekayı kullanmasını ne engelleyecek? A devlet yasalarının yama çalışması Bir telif hakkı ve ticari marka avukatı olan Eleanor Lackman, çoğu yerde insanların kendi benzerlikleri üzerinde yasal mülkiyete sahip olduğu anlamına geldiğini söylüyor. Ancak sanatsal ve ifade edici kullanım için geniş istisnalar olduğunu ve film yapımının kolayca bu atama kapsamına girebileceğini belirtiyor. Medya ve teknoloji alanında uzmanlaşmış bir avukat olan Jonathan Blavin, yasalar ne olursa olsun, bir kişinin kendi benzerlik haklarını bir yapım şirketine devredecek bir sözleşmeyi yasal olarak imzalayabileceğini açıklıyor. Birinin dijital benzerliğini korumaya gelince, her şey sözleşmenin ayrıntılarına iner – SAG-AFTRA’nın gayet iyi bildiği bir durum.

Video oyununun kötü adamını canlandıran aktör, geçen yıl rolü için taranmaktan rahat hissetti. “Çalıştığım şirket oldukça yukarıdaydı” diyor. Ancak gelecekte, anlaşmalara girmek için o kadar hızlı olmayabilir. “Yapay zekanın yüz yakalama ile yapabilecekleri ve uzaktan gördüklerimiz [prestrike negotiations], korkutucu ”diyor. Oyuncu, video oyunlarını sever; birinde oynayacağı için heyecanlıydı ve bunu tekrar yapmayı umuyor. Ama önce, “Evrak işlerini iki kez kontrol eder, ajansımla ve muhtemelen bir avukatla görüşürdüm” diyor.