GPT TL;DR: Googlova umetna inteligenca Lumiere, ki uporablja model Space-Time-U-Net (STUNet), predstavlja preboj v generaciji videoposnetkov z AI. Ta tehnologija omogoča realističnejše gibanje in kakovost v AI ustvarjenih videih, presega obstoječe tehnologije, kot so Runway in Stable Video Diffusion. Lumiere prinaša tudi skrb glede potencialne zlorabe za ustvarjanje zavajajoče vsebine, kar poudarja pomen odgovornega razvoja in uporabe AI.
V svetu umetne inteligence je Google naredil velik korak naprej s predstavitvijo Lumiere, inovativnega orodja za ustvarjanje videoposnetkov. Lumiere uporablja model Space-Time-U-Net (STUNet), ki razume prostorske in časovne dinamike v videih, kar omogoča izjemno realistično gibanje.
Več informacij poiščite na github.
Začnemo s kreiranjem osnovnega okvirja iz predloženega besedilnega navodila in nato z uporabo okvira STUNet za določanje gibanja objektov, kar ustvarja videe, ki izgledajo kot neprekinjeno gibanje. To je velik napredek v primerjavi s prejšnjimi tehnologijami, kot sta Runway in Stable Video Diffusion, ki sta imeli težave s prikazovanjem gladkega gibanja.
Lumiere ne prinaša le izboljšav v realističnosti gibov, ampak tudi v drugih vidikih videoprodukcije. Njegove sposobnosti vključujejo text-to-video in image-to-video transformacije, stilizirano generiranje in cinemagrafe. Vendar pa ta tehnologija prinaša tudi nekaj skrbi, zlasti glede potencialne zlorabe za ustvarjanje zavajajoče ali škodljive vsebine. Google v svojem poročilu izpostavlja pomen razvoja orodij za odkrivanje pristranskosti in zlonamerne uporabe, da bi zagotovili varno in pošteno uporabo tehnologije.
Google s tem orodjem ni le vstopil v igro text-to-video generiranja, ampak je postavil nove mejnike na tem področju, obetajoč še večje inovacije in izboljšave v prihodnosti. Kljub temu pa ostaja pomembno, da se tehnologija razvija in uporablja odgovorno, s poudarkom na preprečevanju zlorab in ohranjanju etičnosti v digitalnem svetu.
Čakamo na to, da bo Google od sebe dal tudi kakšno storitev, ki bo imela uporabnikom prijazen uporabniški vmesnik, in ga bomo lahko resnično uporabljali tudi po svetu, ne le izbranci in izbranke v ZDA. Ampak izgleda, da bomo morali še malo počakati.
Povzeto po: https://www.theverge.com/2024/1/27/24052140/google-lumiere-ai-video-generation-runway-pika
