Inteligență Artificială & LLM

Eduard Fernández, ce tânăr te văd: așa s-au făcut 250 de fotografii de deepfake „made in Spain” care uimesc în „30 de monede”

Eduard Fernández, ce tânăr te văd: așa s-au făcut 250 de fotografii de deepfake „made in Spain” care uimesc în „30 de monede”

Eduard Fernández se uită serios la aparatul de fotografiat, dar nu este Eduard Fernández de astăzi, ci unul de cu ani în urmă, întinerit. Este el, dar nu este el, pentru că în acea scenă Eduard Fernández este un deepfake al său. Unul care ne permite să intrăm în trecutul lui.

Aceasta este de fapt una dintre cele 250 de fotografii cu deepfake la care a lucrat Alejandro Pérez Blanco (@thehardmenpath) pentru producția „30 de monede', serialul HBO regizat de Álex de la Iglesia. Am vorbit cu el și ne-a spus cum funcționează o tehnică care are ceva magic, pentru că important, așa cum spune el, este că nimeni nu își dă seama că aceste deepfake-uri sunt deepfake-uri.

Efecte speciale invizibile

Alejandro Pérez Blanco a fost mușcat de bug-ul efectelor speciale foarte devreme: el era deja responsabil de acea parte în scurtmetrajele pe care le-a realizat în timpul diplomei în Comunicare Audiovizuală și de acolo a dezvoltat acea activitate în toate tipurile de producții, lucru demonstrat de hi.

Dacă vizionați #30Monedas, ați văzut deja 250 de fotografii deepfake. Le-ai observat? 👀 pic.twitter.com/YOWKq2u9BB

— thehardme (@thehardmenpath) 28 decembrie 2020

A colaborat cu „Cronocrímenes', „Extraterre-apartamento-para-tres-o-a> şi "Extraterrestre" href="https://www.espinof.com/criticas/open-windows-el-miron-del-panico">Open Windows” de Nacho Vigalondo și a lucrat, de asemenea, la producții precum „El fin de la comedia' și multe alte proiecte de peste un deceniu.

16 filme clasice cu efecte speciale mai bune decât orice film modern
În Espinof
16 filme clasice cu efecte speciale mai bune decât orice film modern

Totuși, cea mai recentă lucrare a lui este cea care a atras o atenție deosebită datorită unui thread pe care l-a publicat în aceste zile. În el a oferit câteva detalii despre munca sa în „30 Coins”, serialul lui Álex de la Iglesia care se difuzează pe HBO. În această producție Alejandro s-a ocupat de crearea a 250 de fotografii de deepfake în care i-a întinerit pe Eduard Fernández și Manolo Solo, doi dintre protagoniștii serialului, iar rezultatul este spectaculos.

Alejandro Perez Blanco

L-am contactat și, într-o o lungă și interesantă conversație telefonică, ne-a povestit puțin mai detaliat cum a ajuns aici și cum își desfășoară activitatea. Pentru început, ne-a spus, efectele speciale sunt mereu acolo chiar dacă nu par. Acestea vă permit să „plasați imagini în interiorul unui televizor, să remediați defecțiuni de conectare, să stabilizați camerele, adică să remediați micile erori care apar în timpul filmării, lucruri care nu pot fi văzute”.

Deși este interesat de subiect de multă vreme, adevărata lui muncă cu deepfake-urile a început când Manuel Bartual l-a contactat pentru că dorea să-și schimbe o față pentru al treilea mare thread de pe Twitter, celebra poveste a Nelei García ro #RedMonkey. Ceva mai târziu a explicat într-un thread pe Twitter cu „making of” cum a fost finalizat acel proces (nu ratați videoclipul), care desigur a ajuns să dea un rezultat spectaculos.

Pentru a da mai mult realism personajului, am vrut ca el să apară vorbind la camera. Pentru a face acest lucru, @thehardmenpath a amestecat fețele lui @nikkigarcia_es și href="https://twitter.com/posidonia?ref_src=twsrc%5Etfw">@posidonia în mișcare și @anadecastronow au oferit vocea. @thehardmenpath explică cum a fost făcut aici: pic.twitter.com/hwdDBjNhi4

— Manuel Bartual (@ManuelBartual) 28 august 2018

El însuși a spus ceva foarte important în acel videoclip: „în final este un proces foarte lent pentru că nu te poți obișnui cu el: dacă te uiți la o față mult timp, începe să pară natural, dar apoi te odihnești, îl vezi din nou și... ah! e ceva ciudat în asta. Publicul care o vede pentru prima dată ar simți exact asta."

Alejandro ne-a explicat cum ceea ce i-a cerut Bartual a fost o oportunitate grozavă de a investiga acest subiect pe care, după cum subliniază el, „. Începuseră deja să apară oameni care reușiseră să aplice inteligența artificială pentru a schimba fețele, iar după ce au investigat acest domeniu au înțeles că ar putea fi folosită „deși atunci trebuia să faci multă post-producție reală”.

Această muncă însemna că încetul cu încetul făceam din ce în ce mai multe teste care „de fiecare dată ieșeau puțin mai bune”. Lucrarea lui a ajuns să fie o vitrină grozavă pentru ca ei să ajungă să-l angajeze în „El intermedia” - a colaborat și cu Late Motiv, unde chiar face un cameo aici -, unde, de exemplu, este responsabil de secțiunea „Interviu” și recent transformat în „Pop” Francis cu rezultatul pe care îl puteți vedea în acel videoclip de la LaSexta. Nu este nimic.

De asemenea, a colaborat la acea reclamă virală Campofrío din 2019, cu acea producție excepțională numită „Fake Me” în care Alejandro Pérez era responsabil cu învierea lui Chiquito de la Calzada pentru a putea face o „moonwalk”.

A fost atunci când Álex de la Iglesia l-a contactat. „Îmi place munca ta, ce timp ai?” întrebă el. Pentru Alejandro a fost incredibil, iar dintre toate dovezile pe care i le-a arătat, „una nepublicată a unei încercări de a întineri cu calitatea filmului” a ieșit în evidență.

În ce constă munca unui artist de efecte vizuale, în cuvintele Carolinei Jiménez („Marvel”, „The Hobbit>…”)

Lucrul normal, ne-a spus el, era să găsești experimente pe YouTube cu rezoluție foarte mică pentru că este mult mai ușor, dar acel clip l-a convins pe de la Iglesia, care l-a semnat și împreună cu producătorul i-a schițat calea de urmat pentru participarea sa la acel proiect numit „30 de monede”.

Apropo: acest profesionist al efectelor speciale nu se dedică numai acestui lucru: este și pasionat de jocurile de societate și a lansat recent două, „Ladrillazo" (co-creator) și „

Acea primă oră din „Captain America: The First Avenger”

De mult timp au existat producții care l-au inspirat pe acest profesionist, dar, după cum ne-a spus el, „cele mai bune efecte speciale pe care le-am văzut sunt cele din prima jumătate de oră din „Captain America : actor și în prima jumătate de oră este o durere!”.

Când a cercetat subiectul, a citit cum unii s-au întrebat cum i-au pus atâția muşchi lui Chris Evans, protagonistul acestuia. „Nu le îmbrăcaseră, le scoseseră”, a explicat Alejandro Pérez, care a evidențiat modul în care au folosit zeci de tehnici diferite care i-au dezvăluit că aceasta este „o lume nebună și fascinantă” cu rezultate care până la urmă au ieșit foarte bine.

Animarea digitalului Will Smith din „Gemeni” a costat milioane de euro, dar Hollywood se apropie de utilizarea masivă a deepfake-urilor în cinema
Animarea digitalului Will Smith din „Geminis” a costat milioane, dar Hollywood vede folosirea masivă a cinematografului de aproapefakes

Pentru acest profesionist, existența efectelor speciale este o constantă în practic orice producție. „Știu că vor fi explozii”, a comentat el, „dar văzându-l pe Marty McFly scoțându-și pălăria fiului său în Back to the Future II este un exemplu că regizorul poate face tot ce vrea”.

Există companii spectaculoase în asta și ne vorbea, de exemplu, despre Lola Visual Effects (Lola VFX) — care, în ciuda numelui său popular, este atât de americană —, responsabilă pentru unele dintre cele mai cunoscute reîntineriri din istoria recentă a cinematografiei. Printre aceștia, Michael Douglas în „Ant-Man" sau Robert Downey Jr. în „site-ul său oficial.

Lista de proiecte a acestui studio este uimitoare, iar printre ele cu siguranță a uimit de modul în care s-a jucat cu procesele de îmbătrânire și întinerire din domeniul efectelor speciale: „Cazul curios al lui Benjamin Button'. În ciuda rezultatului, a subliniat Pérez, „totul este 3D”, nu există deepfake implicate în acea producție, deoarece a fost realizat înainte ca acest fenomen să iasă la lumină.

Să nu excludem că această scenă a fost filmată de M.H. se. și că ți-au tratat fața. Aceasta este ceea ce au făcut într-o colecție bună de filme Marvel, începând cu XMen 2, unde a fost puțin ciudat, dar l-au șlefuit de-a lungul timpului. pic.twitter.com/9WMnzeT3XP

— thehardme (@thehardmenpath) 19 decembrie 2020

Această companie a participat, de fapt, la aproape toate filmele în care Tom Cruise acționează din 2000 „fără să spună ce au făcut în ele, dar vor face ceva”, a declarat expertul nostru. Tom Cruise este grozav la 58 de ani și cu siguranță o arată în filmele sale, dar poate că există puțin ajutor digital în acele producții.

Deepfake-urile ne provoacă capacitatea de a recunoaște fețele

Influențele în domeniul întineririi digitale au venit din diferite domenii, dar, de exemplu, Alejandro ne-a spus cum „ce au făcut cu „>

Acolo, el a împărtășit ceva important când face deepfake-uri și despre ce am vorbit înainte: „Dacă iau o față și mișc un ochi doi pixeli la dreapta, nu observ asta pentru că o fac eu, dar cei de afară o fac. Este foarte periculos să te obișnuiești, este foarte important să dezvolți un mecanic pentru a o evita”.

În Espinof
Cele mai bune 70 de efecte vizuale din istoria cinematografiei, conform Visual Effects Society

Tocmai aceasta este una dintre provocările deepfake-urilor: a fi credibil, a nu ne face să facem acel „salt”. Alejandro Pérez ne-a povestit despre cum „recunoașterea fețelor este ceea ce fac ființele umane cel mai bine. Orice altceva este mai puțin înnăscut. Totul este artificial, se învață, dar recunoașterea fețelor este ceva pe care fiecare dintre noi îl face diferit”.

Tocmai din acest motiv, aceste tipuri de procese, ne-a spus el, sunt atât de delicate. „Dacă fac o greșeală manipulând un nas, s-ar putea să nu observi, dar vărul tău o va face. Provocarea este să faci ceva care să funcționeze pentru cât mai mulți oameni, cât mai mult timp posibil”.

De aceea, în producția de „30 de monede”, Alejandro Pérez s-a înconjurat de toate echipamentele care i-au permis să nu se obișnuiască. „Toți au văzut tot ce am făcut înainte ca Álex să-l vadăși împreună ne-am dat o părere despre ce ar putea fi îmbunătățit sau schimbat”. Rezultatul, indiferent dacă ați văzut serialul sau dacă vă uitați la capturile de ecran pe care le-a distribuit în firul său de Twitter, este spectaculos.

Ochii sunt oglinda sufletului (și a deepfake-urilor)

„De la vârsta de 45 de ani, ochii încep să arate diferit”, ne-a explicat Alejandro când vorbea despre una dintre cele mai mari provocări ale acestui proces. „Dacă vezi ce am făcut, ceea ce încercăm mai ales este ca actorii de 50 de ani să nu aibă ochi de 50 de ani”.

Eduard Fernandez 2

Pentru acest profesionist, în ochi „este o mare parte din ceea ce înțelegem prin vârstă”. În timpul muncii sale la aceste deepfake pentru „30 de monede”, el și echipa au încercat să știe „cât de mult din ochii originali putem păstra. De exemplu, strălucirea din ochi: dacă îl îndepărtezi, este rar și ori de câte ori pot, am păstrat caracteristicile originale. Mișcările sunt întotdeauna aceleași, AI-ul o face foarte bine, dar nu este oricând atât de bine să mă uit la controlul original. ochii, chiar dacă sunt doar pupilele”.

Am încercat să folosesc deepfakes pentru a mă transforma în Elon Musk și Eminem în apelurile mele video: nu merge bine
Am încercat să folosesc deepfakes pentru a mă transforma în Elon Musk și Eminem în apelurile mele video: nu merge bine

Acest lucru poate fi văzut, de exemplu, în acea imagine care conduce subiectul cu un Eduard Fernández al cărui alb al ochilor îi poate fi văzut în versiunea sa întinerită. In imaginea originala look-ul lui nu este acelasi, si desi mai sunt si alte aspecte care contribuie (fata mai subtire, mai putine riduri, aproape deloc pungi sub ochi), acesta este aspectul fundamental, iar aici a existat o incredere curioasa din partea acestui profesionist.

"Globul ocular este reconstruit. În Manolo [Solo, co-starul serialului] ochii sunt puțin albiți, dar această tehnică este folosită foarte mult în revistele de modă", ne-a explicat el. El însuși a mărturisit cu oarecare sarcasm că „a îndepărtat celulita și pungile de ochi în proiecte despre care nu va vorbi niciodată”.

În firul pe care l-am dedicat pe Twitter a existat o secțiune specială pentru a vorbi despre machiaj și despre cum acea parte coexistă cu efectele digitale. Am vrut să-l întrebăm care este acea relație.

Manolo Solo 2

„Primul deepfake pe care l-am făcut într-o serie este „Capítulo 0'”, a explicat el, „cu un Joaquín C. Reyes a devenit un moment în care s-a îmbrăcat în Nicolas Reyes. Cage pe care îl știm cu toții. Miguel Esteban i-a trecut prin cap să-i dea un aspect puțin mai asemănător cu cel al lui Cage: el este încă Joaquín Reyes, dar cu acel punct deranjant pe care îl are Nicolas Cage este un exemplu despre cum pot coexista machiajul și efectele speciale.”

Această lucrare a fost văzută și în „30 Coins”, unde „machiajul i-a ajutat să-i facă tineri, apoi am îmbunătățit-o și am lucrat la asta cu efecte digitale. Nu am atins partea veche, adică machiajul, și în ambele cazuri actorii trebuie să se comporte diferit, construcția pe care o fac personajului este diferită”.

În conformitate cu acest comentariu, l-am întrebat pe acest profesionist dacă a fost mai dificil să îmbătrânim sau să întineriți pe cineva cu efecte digitale. „Este total diferit și se aplică tehnici diferite”, a explicat el. „Nu m-am confruntat încă cu îmbătrânirea dincolo de Wyoming, devenind Papa, dar fac deja experimente foarte promițătoare”.

Hardware puternic și multă post-producție

Deepfake-urile sunt acum disponibile pentru aproape oricine și am dorit exact să știm ce echipamente și ce software au fost folosite în această producție.

Provocarea a inclus o mulțime de elemente care îngreunează întregul proces pentru inteligența artificială: mâini în față, fum, estompări, unghiuri imposibile, schimbări infinite de lumină... pic.twitter.com/EXGg5VgeIe"> (@themen—path) href="https://twitter.com/thehardmenpath/status/1343487902358056962?ref_src=twsrc%5Etfw">28 decembrie 2020

Deși Alejandro Pérez nu a împărtășit detalii specifice, el a indicat că „punctul de pornire este href="https://github.com/iperov/DeepFaceLab">DeepFaceLab

de acum un an, dar i-am făcut atât de multe modificări și, odată ce imaginea este luată, este post-procesată atât de mult încât rezultatele ei abia seamănă cu cele pe care le-ați obține dacă ați folosi doar acea aplicație".

Când tehnologia transformă cinema: 18 filme care au schimbat totul
În Espinof
Când tehnologia transformă cinema: 18 filme care au schimbat totul

De fapt, a explicat el, „fuziunea imaginilor CGI cu imaginile originale este o știință în sine. Cu „El Intermedio” nu au existat două deepfake-uri la fel (am făcut mai mult de 20). Este groaznic pentru că trebuie să faci multe de la zero, dar învăț și multe mai multe și îmi oferă 20 de instrumente diferite."

Nici el nu a oferit detalii despre hardware, deși în firul său a explicat că Pokeepsie Films (@pokeepsie_films) „mi-a oferit tot timpul și hardware-ul necesar”. El însuși a subliniat că întreg acest proces „într-o zi se va putea face făcând clic pe un buton, dar acum este foarte dificil de realizat în video, iar calitatea este foarte bună.

Cheia în acest domeniu, ne-a explicat el, este că „dacă vrei să faci ceva la o rezoluție mai mare decât ceea ce se vede de obicei pe YouTube trebuie să cumperi o placă grafică cu multă memorie, pentru că acea cerință crește exponențial. Cu o placă bună poți lucra în HD, pentru altceva ai nevoie de mult mai mult" și aici este necesar ca compania de producție să poată funcționa fără probleme.

Și moștenitorii lui Marlon Brando, fericiți

În 'Superman Returns' (Bryan Singer, 2006), există o apariție stelară: cea a lui Marlon Brando, care reapare cu rolul său inițial de Jor-El, tatăl super-eroului. O face digital și datorită imaginilor de arhivă, desigur, pentru că acest actor murise în 2004, cu doi ani înainte de lansarea filmului.

Așa cum se explică în FXGuide, au fost folosite înregistrări care au fost realizate în filmul „Superman” lansat în 1978, dar unele nici măcar nu erau video sau aveau un unghi inaplicabil. Altele erau doar înregistrări audio. „Pentru a rezolva acest lucru, gura lui Brando a fost modelată și încorporată în fața lui dintr-o altă fotografie”, au explicat ei în acel raport.

Rețelele sociale împotriva deepfakes: o revizuire a politicilor Facebook, Instagram, Twitter și LinkedIn
Rețelele sociale împotriva deepfakes: o revizuire a politicilor Facebook, Instagram, Twitter și LinkedIn

Rezultatul este foarte decent și toată lumea este fericită. În special moștenitorii lui Brando, care, după cum a explicat Alejandro Pérez, au primit plata din acea participare la film. Acest detaliu indică una dintre cele mai puțin considerate implicații ale deepfake-urilor: cele legale.

Pentru munca sa la „30 de monede”, expertul nostru s-a confruntat cu o situație unică. Când a fost vorba de întinerirea protagoniştilor, a avut probleme deosebite cu Manolo Solo. „A trebuit să folosesc o față a altei persoane care nu a lucrat la proiect”.

Motivul acestei resurse a fost curios. „Când mă gândeam cum să lucrez cu el, am descoperit că are foarte puține imagini cu el în tinerețe și toate sunt cu ochelari”. Mai mult, a adăugat el, „a făcut mult mai mult teatru decât cinema și înregistrările sunt de rezoluție și calitate mai scăzute, așa că a fost o provocare importantă”.

Manolo Solo 3

Din fericire, lui Alejandro a venit cu o idee curioasă. A descoperit că actorul și comediantul Julián Génisson (@canodrama) avea aceleași trăsături ca și Manolo Solo și i-a cerut să-și folosească imaginea pentru proiectul său. "A spus da, a vorbit cu producătorul și au ajuns la o înțelegere. Nu se făcuse niciodată în producție, cel puțin în Spania."

Alejandro a folosit acele imagini și le-a folosit „ca punct de plecare pentru a reconstrui structura osoasă și de acolo a folosit Manolo”. Rezultatul, după cum se vede în imaginile serialului, vorbește de la sine.

Deepfake-urile și dispariția vedetelor (moderne).

Implicațiile juridice în acest caz au fost rezolvate, dar toate acestea generează o dezbatere enormă și ridică un viitor despre care am vrut să-l întrebăm pe Alejandro Pérez. Ne îndreptăm spre un viitor de actori complet recreați cu deepfake-uri și care nu trebuie să filmeze o singură imagine? Ce se va întâmpla cu lumea cinematografiei?

La această dificultate trebuie să adăugăm nivelul de cerere al @alexdelaIglesia adăugat la cel al @hbo_es și, bineînțeles, regulile stricte de siguranță în cele mai critice momente ale pandemiei. 28 decembrie 2020

Pentru acest profesionist, deepfake-urile au avantaje importante. „Cascaderii nu vor trebui să stea pe spate toată ziua – nu toată lumea va trebui să fie Tom Cruise”, ne-a spus el, indicând că nu ar exista un risc atât de mare pentru cascadorii în scenele de acțiune.

Dincolo de porno: spaniolii care folosesc deepfakes pentru satira politică
Dincolo de porno: spaniolii care folosesc deepfakes pentru satira politică

Nu numai atât, pentru că ceea ce era cu adevărat important pentru el era altceva: „În momentul în care poți să iei un actor și să-i dai orice vârstă poți să mai spui multe povești, există o limitare pe care nu o mai ai. Asta este frumos și îți va deschide multe căi.”

Dar desigur, există anumite pericole. Printre ele, a explicat el: "Am senzația că s-ar putea întâmpla ca vedetele de cinema să dispară. Dacă poți să-l iei pe Paul Newman, de ce ai nevoie de mai mult? Stetele pot mai exista, dar sunt cele de acum o sută de ani. Trebuie să așteptăm și să vedem cum reacţionează oamenii la asta."

Viitorul ăsta nu pare atât de îndepărtat, mai ales când există producții precum „Finding Jack” care a devenit de mult faimoasă pentru „James Deurrean” href="https://www.espinof.com/actores-y-actrices/james-dean-resucitara-gracias-al-cgi-pelicula-finding-jack-65-anos-despues-su-muerte">65 de ani de la moartea sa. Ne confruntăm cu ușile unei ere a producțiilor cu vedete din trecut? Deranjant, precum valle cu același nume.

O muncă invizibilă

Fie oricum, concluzia pentru Alejandro Pérez Blanco este clară: în „30 de monede” „zeci de oameni au dat ce e mai bun din ei înșiși, iar acest lucru se întâmplă în această serie și în toate.”

Apropo, am făcut mai multe lucruri în alte episoade, dar mai bine nu le cauți. Ar trebui să fie invizibile, ca 90% din efectele din serie, care sunt acolo doar pentru a face loc magiei lui Alex. pic.twitter.com/IjqBn1wiE6

— thehardme (@thehardmenpath) 28 decembrie 2020

Cei ca el care se ocupă de efectele speciale în cele din urmă fac o treabă adesea invizibilă. Detalii precum „eliminarea unui semn de vânzare din fundal sau eliminarea datei unei premiere de teatru” sunt cheia pentru a face totul credibil și sunt detalii pe care probabil nu le vei observa niciodată, dar care implică multă muncă.

Mai mult, a comentat el. „Că Álex poate ști că poate înregistra această fotografie în această direcție pentru că știe că atunci anumite lucruri pot fi îndepărtate din fundal dacă are nevoie de el îi oferă multă libertate de a spune povestea pe care vrea să o spună”.

Acest profesionist a fost clar: „munca noastră este invizibilă. Am fost foarte norocos să o fac vizibil cu acest fir, dar lucrul normal și ideal este să nu fie observat.”

Acesta este, de fapt, obiectivul și rezultatul este aproape magic.

Partajează acest dosar: