De câțiva ani încoace, datorită Universul Marvel, benzile desenate au devenit știri pentru a fi inspirația pentru href="https://www.Serviciul Secret de Inteligență.com/cine-y-tv/estos-33-trailers-destacados-peliculas-series-comic-2018">numeroase producții de milioane de dolari pentru marele ecran. Datorită acestui fapt, fanii au avut ocazia să vadă desenele animate devin mișcare.
Acum, o echipă de cercetători de la Universitatea de Tehnologie din Varșovia vrea să urmeze calea opusă: folosește inteligența artificială pentru a converti scenele de film în viniete.
Propunerea lor, botezată cu numele Comixify, este un software care datorită .
În continuare, aplică o estetică de „stil benzi desenate” cadrelor respective (folosind un GAN sau „rețea adversară generativă”) și le aranjează pe o pagină urmând un format fix 2-3-2-3.
Estetica pe care Comixify o imprimă pe rame amintește puternic de rotoscopingul „A Scanner Darkly” (2006)
Provocarea selectării vignetelor
Cheia pentru Comixify constă în criteriile pe care le utilizează pentru a determina relevanța fiecărui cadru. Odată ce toate cadrele videoclipului au fost extrase, un prim filtru selectează imaginile cele mai reprezentative pe baza segmentării lor temporale și a modelelor de acces al utilizatorului (pe baza studiului săriturilor în timpul redării video)
Până în acest moment, procesul nu este foarte diferit de cel desfășurat, de exemplu, de YouTube, când afișează doar câteva dintre videoclipurile posibile. încărcat.
Dar, apoi, se face o nouă selecție de cadre până când numărul acestora este redus la ultimele 10. Această selecție se face pe baza criteriilor de calitate a imaginii, pe baza pregătirii anterioare cu seturi de date de analiză vizuală estetică, cum ar fi AVA și TID2013. Abia după aceasta se aplică filtrul de imagine care, așa cum am spus mai înainte, „comifică” cadrele.
Testarea Comixify
Acum, dacă doriți, puteți încercați singur Comixify, încărcând propriile videoclipuri (mai puțin de 50 MB) sau furnizând un link către un videoclip postat pe YouTube. Am făcut-o cu o scenă din 'Ultimul Jedi', ultimul film din saga Star Wars:, iar rezultatul este următorul .
Scena din „Star Wars: The Last Jedi”
Verdictul nostru? Nu numai că estetica „comic” este aplicată destul de elegant, dar selectarea cadrelor nu este deloc rea, deoarece ne permite să ne facem o idee despre ceea ce se întâmplă pe parcursul scenei...
...Cu excepția, bineînțeles, a momentului cheie: Comixify nu a reușit să detecteze importanța momentului în care un anumit personaj provoacă moartea unui anumit alt personaj (sună criptic, dar nu vrem să provocăm spoilere). A fost o sarcină complexă, fără îndoială.
Oricum, putem „ajuta” Comixify gândindu-ne ca un artist de benzi desenate atunci când alegeți fragmentul video de „comicizat”: gândiți-vă la câtă acțiune se potrivește pe o pagină de 10 panouri și încercați să nu încărcați videoclipuri prea scurte sau prea lungi sau videoclipuri care conțin mai multe scene. Astfel, rezultatul va fi mai satisfăcător din punct de vedere narativ.
Viitorul Comixify
Conform articolul publicat de cercetători (care detaliază detaliile tehnice ale acestei platforme), următorul pas pentru cercetători va fi să adauge noi funcții, cum ar fi un aspect de pagină personalizat (în loc de șablonul de adăugare a vorbirii și bulele curente de recunoaștere) adnotări textla benzi desenate.