Runway lanserar en ny neural nätverksmodell för att skapa videor från en textbeskrivning

Artificiell intelligens som omvandlar text till en bild är nu verklig vanliga, men liknande neurala nätverk för video tar bara fart. Längst fram i denna riktning är startupen Runway, som släppte redan den andra AI-modellen som genererar korta videor baserade på flera ord.

Runway erbjuder en webbaserad videoredigerare som är specialiserad på verktyg för maskininlärning som borttagning av bakgrund. Detta företag hjälpte till att utveckla den stabila diffusionsmodellen text-till-bild, och i februari meddelat sin första AI-videoredigeringsmodell Gen-1.

Gen-1 fokuserade på att konvertera befintliga filmer, vilket gör det möjligt för användare att tillämpa en viss stil av överlagring från bild till rulle. Gen-2-modellen är mer fokuserad på att skapa videor från grunden.

Demos som delas på Runway är korta, instabila och absolut inte fotorealistiska, men även sådana ramar visar en god förståelse för AI: en av tredimensionellt rymd, proportioner och rörelselogiken föremål.

Även om Gen-2 inte är fritt tillgänglig, försäkrade en Runway-talesman att företaget kommer att "ge bred åtkomst under de kommande veckorna."

Utsikterna för införandet av sådan AI skrämmer redan experter. När allt kommer omkring, utlovar neurala nätverk för att arbeta med video inte bara nya kreativa möjligheter, utan också nya hot mot desinformation.