Inteligență Artificială & LLM

Dublarea filmelor are o problemă, se numește inteligență artificială și are deja rezultate uimitoare

Dublarea filmelor are o problemă, se numește inteligență artificială și are deja rezultate uimitoare

Prea multe înjurături. Asta a fost problema cu „Fall', cel mai recent film al regizorului Scott Mann. Lionsgate, producătorul acestui thriller de supraviețuire, a dorit să obțină un rating PG-13 pentru a deschide producția către un public mult mai larg. Cum să-l obții? Ușor: folosind inteligența artificială.

„ho***”. Protagoniștii histrionici nu au încetat să folosească blestem și variații ale cuvântului „d***” în film. Situația în care trăiesc este pentru asta, desigur, dar că a fost o problemă pentru a putea lansa filmul și pentru a-l vedea pentru publicul mai tânăr.

Eduard Fernández, ce tânăr te văd: așa s-au făcut 250 de fotografii de deepfake „made in Spain” care uimesc în „30 de monede”
Eduard Fernández, cât de tânăr te văd: așa s-a făcut o fotografie din Spania. în „30 de monede”

Deepfakes la salvare

Tehnologia a fost un mare aliat al cinematografiei de zeci de ani, iar în ultima vreme lucrurile au mers și mai departe. Inteligența artificială a ajutat deepfakes aplicate la a șaptea arte permite lucruri uimitoare precum întineriți sau îmbătrânesc actorii sau, în ultima vreme, își păstrează vocea pentru totdeauna.

Unde am spus eu spun, eu spun Diego

Mann, care a avut experiențe proaste cu alte filmări, a descoperit un studiu academic care vorbea despre rețelele neuronale și despre modul în care acestea ar putea fi aplicate în această zonă. A contactat autorii și a reușit să creeze un instrument rudimentar pentru a crea o nouă soluție de dublare.

„Vubbing”. În loc de dublarea audio tradițională, se realizează dublarea vizuală (de unde „v”) inițial. După ce a angajat un alt expert pe nume Nick Lynes, a luat ființă compania Flawless AI, specializată în această evoluție a deepfake-urilor special orientate către lumea cinematografiei, fie pentru dublare, fie pentru modificarea a ceea ce au spus actorii și corectarea fără a mai fi nevoie să repeți ulterior (cu complexitatea pe care aceasta o presupune).

Robert de Niro vorbește germană

Tehnologia TrueSync de la Flawless AI identifică modele în fonemele (sunetele pe care le fac) și visemele (cum își mișcă gura când le fac) actorilor. După antrenamentul sistemului, acesta este capabil să simuleze că actorul spune altceva sau că o spune în orice altă limbă.

... dar își mișcă și gura ca un neamț. Lucrul cu adevărat interesant la această tehnologie este că gura se mișcă în conformitate cu pronunția acelor cuvinte, așa că dublarea nu mai „cântă” la fel de mult.

În videoclip puteți vedea cum în dublarea tradițională puteți observa că Jack Nicholson nu pare să vorbească franceză, dar cu acest sistem Robert de Niro pare să vorbească germană pentru că gura i se mișcă (mai mult sau mai puțin) așa cum ar trebui atunci când pronunță acele cuvinte. Rezultatul nu este perfect, desigur, dar nu încetează să se îmbunătățească. Acele imagini sunt de acum un an.

Lucrurile se îmbunătățesc

După cum spunem, modelele care ne permit să ajustăm rezultatul s-au îmbunătățit foarte mult în ultimele luni, iar asta se observă în „Toamna”. În acest videoclip impecabil puteți vedea cum vorbesc ei despre proces, iar la minutul 1:54 se arată cum modifică unul dintre protagoniști, astfel încât în loc de „fuc****” ea să spună „folositor”, mult mai acceptabil pentru cinematografe.

Dublarea actorilor, în pericol

Ca și în multe alte domenii „amenințate” de inteligența artificială, aceste tipuri de instrumente — sunt mai multe în dezvoltare, așa cum demonstrează Papercup — pot limitează viitorul al actorilor de dublare. În Spania, această opțiune este o parte tradițională a conținutului difuzat în limbi străine, deși da: ne face să vorbim mai rău decât engleza sau portugheza.

Nu crede ce vezi

Dezbaterea, desigur, merge mai departe. Acest instrument are avantaje evidente pentru lumea cinematografiei și televiziunii, dar confirmă și href="https://www.Serviciul Secret de Inteligență.com/robotica-e-ia/deepfakes-teremos-problema-truth-videos-serviran-como-proofs">pericolul deepfake-urilor, din ce în ce mai credibile, dacă sunt folosite nu pentru satiră, ci pentru a răspândi știri false sau comite tot felul de fraude. În acest ritm, va fi imposibil să știi ce este realitatea și ce nu este.

Imagine: AI impecabil

Partajează acest dosar: