Google introduce Lumiere- generator video AL. Domeniul video continuă să fie unul dintre puținele care rezistă inteligenței artificiale generative, dar depășește tot mai mult mai multe etape. Google a introdus Lumiere, practic un generator video bazat pe inteligență artificială. Acesta vine descris ca un „model de difuzie spațio-temporal pentru generarea de videoclipuri realiste”, conform eleconomista.es. Aflăm în articol, toate detaliile despre această invenție de ultima generație a celor de la Google. (Continuați să citiți după fotografie)
Google introduce Lumiere- generator video AL
Această tehnologie pare să fie capabilă să creeze videoclipuri care înfățișează mișcări realiste și diverse. Acest lucru îl transformă în unul dintre cele mai avansate generatoare de video AI de tip text-to-animal demonstrat de până acum, în lume. Prezentarea a arătat cum dintr-un text am putut crea imagini cu animale diverse și stiluri diferite. Deși rezultatul este încă departe de ceea ce ar putea fi filmarea sau animația convențională, devine din ce în ce mai convingător.
Lumiere se remarcă față de alte modele de generație video datorită arhitecturii sale unice. Spre deosebire de modelele existente care sintetizează cadre cheie îndepărtate urmate de super-rezoluție temporală, Lumiere redă întreaga durată temporală a unui videoclip dintr-o singură mișcare. Aspectele spațio-temporale ale videoclipului sunt gestionate simultan de Lumiere, permițându-vă să creați videoclipuri de la început până la sfârșit într-un proces continuu. Acest lucru elimină nevoia de a îmbina părți mici sau cadre, rezultând o experiență de generare video mai eficientă și simplificată.
Citește și: Modul incognito pe Chrome „nu este cu adevărat privat”: Google a șters istoricul a milioane de utilizatori
Ce puteți face atunci când va fi disponibil?
Deși încă în dezvoltare, atunci când va fi disponibil, Lumiere va oferi o gamă largă de caracteristici impresionante care demonstrează capacitățile sale de generator video AI. Unele dintre aceste caracteristici sunt:
Citește și: WhatsApp introduce stickere speciale generate de Inteligența Artificială
- Generare text în video: Lumiere poate converti o instrucțiune scrisă într-un videoclip nou.
- Conversie imagine în video: prin conversia imaginilor statice în videoclipuri, Lumiere adaugă mișcare și dinamism fotografiilor sau desenelor.
- Generare video bazată pe stil: Cu ajutorul unei imagini de referință, Lumiere poate genera videoclipuri în stiluri specifice.
- Editare video bazată pe text: Lumiere permite, de asemenea, editarea video folosind solicitări bazate pe text, facilitând crearea videoclipurilor cu aspect profesional.
- Capacitățile de pictare video: Lumiere poate schimba aspectul obiectelor dintr-un videoclip, cum ar fi modificarea hainelor purtate de persoanele pe care le-ați generat cu o a doua instrucțiune.
Are totuși și limitări: iată care sunt
Lucrarea de cercetare care însoțește lansarea Lumiere menționează că modelul AI produce videoclipuri de cinci secunde cu o rezoluție de 1024×1024 pixeli. Deși această rezoluție este considerată scăzută, cercetătorii au efectuat un studiu asupra utilizatorilor și au descoperit că videoclipurile create de Lumiere au fost preferate față de modelele existente de sinteză video AI.
Citește și: WhatsApp: Așa instalați Inteligența Artificială și „puteți vorbi cu ea”
Google a antrenat modelul text to video pe un set de date care conține 30 de milioane de videoclipuri împreună cu subtitrările lor. Videoclipurile din setul de date au o lungime de 80 de cadre, cu o rată de cadre de 16 cadre pe secundă. Modelul de bază a fost antrenat la o rezoluție de 128×128 pixeli. Videoclipurile generate de AI au avansat foarte mult din punct de vedere al calității și capabilităților în ultimii ani. Cu câteva luni în urmă, Google a prezentat deja Gemini, care putea interpreta și un video la nivel contextual.
Meta și-a dezvăluit și generatorul său video AI, la fel ca TikTok. Deocamdată, aceste progrese au permis crearea unor videoclipuri cu parodie suprarealistă, dar sosirea lor este însoțită și de îndoieli cu privire la modul în care pot fi folosite pentru a manipula și a crea deep fake-uri ale personalităților sau politicienilor.