Movie Gen tar KI-generert video til et nytt nivå

I begynnelsen av året viste OpenAI frem sitt videogenereringsverktøy Sora, som kan lage fotorealistiske videoer fra tekstbeskrivelser. Nå kommer Meta med sitt motsvar, Movie Gen, et KI-verktøy som tar det hele et par skritt videre.

Den kan selvfølgelig også bruke tekstlige beskrivelser av det du ønsker, som i bildet over: «En flodhestunge svømmer i elven. Fargerike blomster flyter på overflaten, mens fisk svømmer rundt flodhesten». Imponerende.

We’ve shared more details on the models and Movie Gen capabilities in a new blog post ➡️ https://t.co/J1dwK6p1jT pic.twitter.com/w0U3WZxmLm

— AI at Meta (@AIatMeta) October 4, 2024

Men den kan også bruke et stillbilde som utgangspunkt for videoen, og ikke bare få det til å bevege seg, men sette det inn i en helt ny kontekst. I eksemplet Meta bruker, har de et portrettbilde av en kvinne og har bedt Movie Gen om å generere en video av henne der hun sitter i en gresskaråker og drikker kaffe.

Men Movie Gen kan også manipulere og redigere eksisterende video. I Metas eksempel har de en løper som plutselig får nye klær eller flyttes til et helt nytt miljø. Eller hvorfor ikke videoen der Mark Zuckerberg trener i et vanlig treningsstudio, for så å befinne seg i et science fiction-treningsstudio et sekund senere.

 

Visa detta inlägg på Instagram

 

Ett inlägg delat av Mark Zuckerberg (@zuck)

Nå regner vi vel med at dette blir tilgjengelig på Instagram om et par måneder, eller hva? Og at det vil bli håpløst å stole på videoer når det er så lett å forfalske dem. Men, det er ikke fullt så enkelt.

Produktsjef Chris Cox skriver på Threads at selskapet «ikke er klare til å lansere dette som et produkt på kort sikt». Det er fortsatt dyrt å generere videoer, og det tar for lang tid.

 

I det siste har flere KI-selskaper blitt kritisert for å ha trent opp verktøyene sine på kildemateriale, for eksempel YouTube, uten tillatelse. Meta hevder å ha brukt lisensiert og offentlig tilgjengelig materiale, men unngår å spesifisere ytterligere.

Mer info og masser av videoeksempler kan du se på ai.meta.com