Det hÀr Àr nyhetsbrevet dÀr Tomas Seo, innovationsstrateg pÄ Phorecast, avslöjar hÀndelser, upptÀckter och ny teknik som fÄr honom att utbrista: Detta förÀndrar ju allt! Du prenumererar pÄ det hÀr för att fortsÀtta vara steget före med de senaste trenderna och fÄ konkreta tips för att framtidssÀkra dig och din organisation. Har du fÄtt det hÀr av en vÀn? DÄ vill du kanske starta en egen prenumeration?
Vad har hÀnt?
- Digitalisering av skÄdisar förÀndrar filmproduktion
Near Radiance Fields (NeRF) och Gaussian splattings Ă€r tekniker som gĂ„r ut pĂ„ att frĂ„n nĂ„gra fĂ„ foton skapa en virtuell 3D-miljö. En 3D-stillbild som gör att du kan ta fotot först och vĂ€lja vinkel senare. Ett forskningsteam frĂ„n Stanford University, Carnegie Mellon University och Google har nu hittat ett nytt sĂ€tt att skapa video pĂ„ samma sĂ€tt. De kallar det PhysAvatar och tekniken bakom för âmesh-aligned 4D Gaussianâ. Genom att stĂ€lla upp nĂ„gra filmkameror runt om skĂ„disarna kan man med denna teknik göra om hela filmer till 3D-projekt.
För filmindustrin innebÀr det hÀr att skÄdisar blir 3D-objekt som kan fÄ nya klÀder, miljön kan bytas ut runt omkring dem och ljussÀttningen kan Àndras. Men framför allt sÄ kan hela valet av kameravinklar skötas helt separat frÄn filminspelningen i postproduktionen.
PhysAvatar visar att du kan spela in filmen först, sedan Àndra kameravinkar, ljussÀttning och till och med klÀder pÄ skÄdisarna i efterhand
Filmerna som PhysAvatar visar upp liknar snarare Sims 3D-avatarer Àn de mÀnniskor de filmat, men det syns tydligt att tekniken att digitalisera skÄdespelarnas (dansarnas) rörelser för att sedan kunna Àndra ljussÀttning och vinklar fungerar.
Detta förÀndrar ju allt
Innan vi börjar â generativ AI för videoproduktion Ă€r inte bara för de av oss som drömmer om att göra egna Hollywoodproduktioner helt sjĂ€lva. Video kommer att vara relevant för alla som jobbar pĂ„ kontor. Jag Ă„terkommer strax till det!
Produktion av rörlig media förĂ€ndras sakta av floden av alla nya verktyg som kommer. Jag fick i veckan beta-access till LTX-studio, ett verktyg för att skapa lĂ€ngre AI-filmer. Verktyget lĂ„ter dig börja med en kort text om din film, sedan fĂ„r du vĂ€lja hur dina huvudroller ska se ut och efter det genererar LTX-studio automatiskt ut scener bestĂ„ende av ett flertal klipp.Â
Men anledningen till att jag har vĂ€ntat pĂ„ verktyget Ă€r inte sĂ„ mycket för att kunna generera video, det har vi redan massor av alternativ för. NĂ€r de promotat LTX-studio sĂ„ har de skrutit om att du kan dra runt i bilderna för att Ă€ndra vinklar efterĂ„t. Ăven om tekniken Ă€r helt annorlunda frĂ„n PhysAvatar sĂ„ Ă€r implikationen densamma. Filmskapande gĂ„r frĂ„n att behöva planera allt innan tagning till en designprocess dĂ€r det mesta kan itereras i efterhand.
För dig som Àr intresserad av min verktygsutforskning sÄ följer hÀr en behind the scenes för skapandet av en AI-musikvideo:
Jag testar att göra en modern version av sagan om Pepparkaksgubben, dĂ€r forskare skapar en robot som springer ut frĂ„n labbet och retsamt ropar âTa mig om ni kan! Ta mig om ni kan!â Först castar jag en robot i rollen som pepparkaksgubbe, men byter sedan ut den till en version av mig sjĂ€lv genom att ladda upp en bild pĂ„ mitt ansikte. Det blir kul men kĂ€nns lite för lite som en pepparkaksgubbe sĂ„ jag byter robotutseendet mot att det ska se ut mer som en pepparkakskostym.
LTX Àr kul att leka runt i, men det Àr tidig beta sÄ jag Àr inte superimponerad av resultaten Àn. BehÄllningen Àr insikten om att det kÀnns ganska givet att det hÀr sÀttet att skapa timelines pÄ kommer att demokratisera filmskapande enormt. Generativ AI kan fixa till allt frÄn klÀder, bakgrunder och skÄdisar i efterhand. Redan idag hÄller LTX-studio för att göra initiala storyboards.
Mitt i min utforskning sĂ„ Ă€r det dags för Adobes Ă„rliga konferens för anvĂ€ndare av deras produkter â Adobe MAX. De upp vad vi kan förvĂ€nta oss av kommande versioner av Premier Pro. Mer AI-generering av video, ta bort saker, lĂ€gg dit saker. Ăven Adobe har förstĂ„tt att anvĂ€ndningen av AI-video kommer förĂ€ndra produktionsflödet frĂ„n perfekta tagningar pĂ„ plats till att lĂ€tt kunna fixas i postproduktionen.Â
Det mest intressanta Àr dock att Adobe visar att vi direkt i Premier inte bara kan generera video med Adobes egna generativa AI-modell Firefly, utan hÀr finns ocksÄ möjligheten att direkt fÄ in generering frÄn Sora, Pika och RunwayML. DÄ förstÄr jag att LTX-studio kanske valt fel vÀg. De tÀnkte att de var smarta som byggde ett produktionsflöde för sin AI-modell men istÀllet sÄ mÄlade de kanske in sig i ett hörn dÀr jag kÀnner att produktionsflödet Àr bra men att jag hellre skulle vilja kunna anvÀnda andra AI-tjÀnster för sjÀlva videoklippen. LTX-studio har dock lite tid pÄ sig att bli bÀttre, som vanligt med Adobes tjÀnster tar det tid innan de rullas ut och hittar sin form.
Adobe Max inspirerar mig att jobba mer pĂ„ min film om Gingerbread-bott â en AI som flyr labbet och retas med alla som försöker fĂ„nga den.
Tillbaka till behind the scenes:
Jag anvÀnder mig av den sÄ kallade shot-list som LTX gjorde, för att planera vilka videoklipp jag ska generera.
Men bildgenereringen gör jag i Midjourney och jag skippar dÀrmed LTX för genereringen av video helt. IstÀllet försöker jag anvÀnda Haiper.ai som gör fina videos, men tyvÀrr bibehÄlls inte karaktÀren sÄ det fÄr bli Pika som fÄr generera filmklippen. Jag testar Àven Pikas lip-sync för att fÄ min Gingerbread-bot att prata, men det funkar bara för stillastÄende scener, min Gingerbread-bott ska ju springa. Det hade ju verkligen varit bra om jag kunde varit kvar i LTX för det Àr rÀtt mycket jobb att rendera ut alla klipp jag vill ha Àven till en vÀldigt kort sekvens. Allt blir ganska fult om man tÀnker att det hÀr skulle vara slutresultatet. Men om jag istÀllet tÀnker att det Àr en skiss istÀllet för att rita ett stillbildsmanus sÄ Àr det plötsligt ganska bra.
Mina gratis credits pÄ Pika rÀcker inte till en kortfilm sÄ jag styr om till en musikvideo istÀllet. Jag anvÀnder den nyslÀppta musiktjÀnsten Udio för att göra en cool rockig lÄt att klippa till och klipper ihop i CapCut (helt utan AI-assistans)
Sammanfattningsvis kan jag sÀga att AI Àr inte redo för actionfilm Àn, nÀsta gÄng ska jag göra en film som inte bygger pÄ att folk springer, sÄ gÄr det nog att göra riktigt snygga videos.
Resultatet Ă€r filmen i början av nyhetsbrevet đ
Jag ville egentligen testa att göra en narrativ kortfilm med dialog, men det tar fortfarande mer Ă€n en eftermiddag att fĂ„ till det (dumma lĂ„ngsamma AI-utveckling, jag fĂ„r försöka igen om nĂ„gra mĂ„nader). Men det stora som hĂ€nder inom AI-video handlar egentligen inte alls om hur vi alla ska skapa filmer som ska konkurrera med Hollywood. IstĂ€llet Ă€r det en del av den större trenden att vi lever i en tid dĂ€r rörliga medier har gĂ„tt om text som informationsbĂ€rare inte bara pĂ„ fritiden utan Ă€ven pĂ„ jobbet.Â
I veckan slĂ€ppte Google en nyhet om en videosatsning â Google Vids. Den Ă€r uttalat inte till för att skapa snygga filmer utan för att det ska vara lĂ€ttare att fĂ„ ihop filmer som alternativ till powerpoint-presentationer. Det pitchas inte som ett AI-program men det kommer att vara kopplat till Google Gemini för att lĂ€ttare kunna skapa filmer.
För nÄgra veckor sedan skrev jag ju om att Linkedin ska bli mer TikTok och enligt mina egna experiment sÄ fÄr mina poster pÄ Linkedin 400% fler visningar om jag gör video jÀmfört med bara en bild. SÄ ska du synas pÄ framtidens kontor behöver du komma igÄng med videoproduktion för husbehov. Adobe berÀttade ocksÄ under Max att de har samarbete med Microsoft sÄ det kommer gÄ att anvÀnda Adobe Firefly-plattformen via Microsoft co-pilot. Det betyder att Àven Powerpoint förmodligen kommer fÄ fler AI-funktioner för bÄde bild- och videoskapande.
PÄ samma sÀtt som det finns de som Àr bÀttre och sÀmre pÄ att övertyga genom att skriva bra rapporter och email sÄ kommer de som klarar av video att ha ett försprÄng pÄ jobbet. De yngre medarbetarna kommer vara video first natives. Inbox zero blir istÀllet watchlist zero och att kunna avlÀsa och skapa av rörlig media kommer att bli nödvÀndiga basfÀrdigheter för alla kontorsarbetare, och detta förÀndrar ju allt!
Vad kan du göra idag?
FörstÄ
Ju yngre medarbetare vi har desto mer vana Ă€r de vid att ta till sig information genom video. Det Ă€r klart att du kan fortsĂ€tta skicka ut epost och be dem lĂ€sa pĂ„ intranĂ€tet, men om du faktiskt vill att folk ska ta till sig det du har att sĂ€ga utan att anstrĂ€nga sig sĂ„ kan det vara dags att tĂ€nka om. IstĂ€llet för att tĂ€nka âSkulle det hĂ€r mötet kunna varit ett emailâ sĂ„ bör du övervĂ€ga att dra det en vĂ€nda till âSkulle det hĂ€r emailet kunna varit en short [video]?â
Planera
Glöm promptningskurser, nÀrmare till hands Àr att alla kollegorna lÀr sig nÄgra enkla verktyg för att skapa videos. Det kan sÄ klart med fördel kombineras med AI-video-verktyg men det viktiga Àr kanske att förstÄ grundlÀggande skapande med video. Alla behöver veta hur man berÀttar en grundlÀggande historia med video. Dessutom behöver alla ha teknisk möjlighet att enkelt göra en film av det som hÀnder pÄ ens datorskÀrm för att kunna skapa grundlÀggande genomgÄngar av arbetsflöden (det Àr bÄde till mÀnskliga kollegor och för att fÄ trÀningsdata till kommande AI-agenter)
Tips: För inspelning av min egen skÀrm (screencasts) sÄ anvÀnder jag Capto men jag Àr pÄ Mac sÄ jag har dÄlig koll pÄ vad som Àr bÀst för Windows. Det Àr det enda jag hittat som klarar att spela in i hög framerate (60fps).
Gör
Dags att ladda ner CapCut (det Ă€r gratis). 490 miljoner mĂ€nniskor anvĂ€nder det verktyget för att klippa video. Om inte annat sĂ„ bör du kanske ha testat det för att veta hur de flesta som börjar med videoredigering startar idag. Det Ă€r dock en gammaldags timeline-edittyp av grĂ€nssnitt dĂ€r du drar runt pĂ„ klippen. ByteDance Ă€r utvecklare av CapCut Ă€r ju ocksĂ„ de som utvecklar TikTok, sĂ„ ni som har TikTok-förbjud pĂ„ jobbet kanske inte fĂ„r ha CapCut heller.Â
Ett annat extrem kraftfullt gratisalternativ till CapCut Àr DaVinci Resolve, det Àr dock ett proffsprogram (vanligt bland Youtubers) sÄ det kan vara lite övervÀldigande som första möte med videoredigering.
Om du har tillgÄng till Adobe Premier Pro beta sÄ kan du spela in en video dÀr du berÀttar nÄgot och testa att klippa pÄ det moderna sÀttet genom att helt enkelt se en text-transkribering av vad du har sagt och sedan redigera i texten och dÄ klipps filmen. Funkar numera Àven för svenskt tal! (Descript uppfann det hÀr sÀttet att redigera men det fanns inte för svenskt tal nÀr jag testade det senast, numera verkar de adderat det)
För att fÄ tillgÄng till LTX studio just nu behöver du stÄ i kö. https://www.ltx.studio Vill du skippa kön sÄ behöver du gÄ med i deras Discord, dÀr öppnar de dÄ och dÄ upp för nya beta-testare.
Spara den hÀr resursen, dÀr hittar du terminologi för massor av filmeffekter med rörliga exempel. https://eyecannndy.com/
Sedan sist vi hördes
För nĂ„gra veckor sedan skrev jag om att internet dör av AI-genererat innehĂ„ll. Tyckte det hĂ€r citatet var ganska talande âNot all AI content is spam, but I think right now all spam is AI contentâ. Det kommer frĂ„n en företrĂ€dare för ett bolag som sĂ€ljer en tjĂ€nst för att klassa AI-innehĂ„ll sĂ„ det Ă€r inte direkt en neutral kĂ€lla, men enligt dem sĂ„ visar deras egen forskning att runt 10% av alla sökresultat pĂ„ Google nu leder till en AI-genererad sida.https://www.youtube.com/watch?v=2fZMOIBfEwk&ab_channel=TheRegister
Förra veckan berÀttade jag i en videoförelÀsning om AGI för betalande prenumeranter. Ett mÄtt pÄ nÀr vi har uppnÄtt artificiell generell intelligens Àr nÀr AI Àr bÀttre Àn mÀnniskor i olika tester, dÀrför tyckte jag det var intressant att se den hÀr tabellen i en rapport frÄn Stanford.
Rapporten fastslĂ„r att vi kommer behöva större mĂ„tt för att kunna fortsĂ€tta mĂ€ta AIs tillvĂ€xt. đŠ
Ăr du en insiktsdelare?
KÀnner du nÄgon som Àr intresserad av nya skills som behövs pÄ kontoret? Eller kanske nÄgon som Àr intresserad av AI och video? Vem tÀnkte du pÄ? Skicka vidare!
NÀsta tillfÀlle för betalande prenumeranter att fÄ en digital lunch-förelÀsning blir 30/5 kl 12:00-12:45.
Tomas Seo
Har du fÄtt dagens nyhetsbrev utan att vara prenumerant? Gillade du det hÀr och vill ha mer sÄ Àr det bara att skriva upp sig hÀr (du vÀljer sjÀlv om du vill betala):
