Runway Gen 3 är det senaste AI-verktyget för videogenerering som har skapat mycket uppmärksamhet i den kreativa gemenskapen. Även om de exempel som visas upp av skapare är imponerande, har verktyget sina egna styrkor och begränsningar.

Verktyget är utmärkt på att generera abstrakta, färgglada och visuellt slående videor. Prompter som "detaljerad förstapersonsvy som flyger genom det färgglada kosmos", "färgglad RGB-värld" och "färgglada lasrar och partiklar" resulterade i hypnotiserande och mycket användbara klipp. Verktyget hanterar också tidraffstagningar, som bilar på en motorväg och norrsken, ganska bra.

Men när det gäller att generera videor med människor och komplexa objekt, kämpar verktyget. Händer och ansiktsdrag ser ofta förvridna eller deformerade ut, och konsekvensen i element som instrument och vapen saknas. Försök med mer tecknade eller animerade stilar gav också blandade resultat.

Verktygsprestandan med text är också träffsäker eller missad. Medan det kan hantera kortare ord och fraser, resulterar längre textprompts ofta i fel eller osammanhängande utdata. Försök att generera texttunga scener, som en neonskylt eller text skriven i bubblor, var resultatlösa.

Sammanfattningsvis visar Runway Gen 3 imponerande förmågor på vissa områden, särskilt när det gäller abstrakta och atmosfäriska visuella uttryck. Det har dock fortfarande utrymme för förbättring när det gäller att hantera mer komplexa scener och element. Eftersom verktyget fortsätter att utvecklas, kommer användare att behöva experimentera med olika prompts och tekniker för att uppnå önskade resultat.

Jag upptäckte att Runway Gen 3 är utmärkt på att generera abstrakta och tidraffsliknande videor. AI:n verkar ha ett starkt grepp om färgpaletter och skapar hypnotiserande, visuellt slående abstrakta klipp.

Några av de utmärkande abstrakta exempel jag genererade inkluderar:

• En detaljerad förstapersonsvy som flyger genom ett färgglatt kosmiskt landskap
• En "färgglad RGB-trippig kaleidoskopisk spegelbild i rörelse"
• "Färgglada lasrar och partiklar" som framkallar klassiska skärmsläckares estetik

Inom tidraffsområdet producerade Gen 3 också en del mycket användbart material, såsom:

• En tidraffssekvens av bilar på en motorväg, med sammanhängande rörelse och belysning
• En tidraffssekvens av norrsken över ett arktiskt landskap
• En lugn tagning av en japansk tempelhöjd med en flödande bäck

Medan AI:n brottades med vissa element som att exakt återge mänskliga händer och ansikten, lyckades den utmärkt med att skapa abstrakta visuella uttryck och naturliga tidraffssekvenser. Dessa typer av videor skulle kunna vara ovärderliga som B-rullar eller inledande tagningar i olika videoprojekt.

Medan Runway Gen 3 har visat imponerande förmågor när det gäller att generera abstrakta, tidraffs- och cinematiska scener, kämpar verktyget när det kommer till att exakt återge mänskliga subjekt och generera sammanhängande text.

Videoexemplen belyser flera problem med mänskliga subjekt. När händer eller andra kroppsdelar är synliga tenderar AI:n att förvränga eller deformera dem, vilket leder till onaturliga och glitchiga resultat. Ansikten och uttryck verkar också vara träffsäkra eller missade, där vissa ser rimligt bra ut medan andra ser kusliga eller stötande ut.

På samma sätt har verktyget svårt att generera läsbar och konsekvent text. Kortare ord som "Runway" kan återges effektivt, men längre textprompts resulterar ofta i fel, sammansmältning eller total misslyckande att generera önskad text. Verktyget verkar ha särskilda svårigheter med mer komplex eller kontextuell text, som "prenumerera på Matt Wolf".

Dessa begränsningar belyser de pågående utmaningarna inom AI-driven videogenerering, särskilt när det gäller realistisk mänsklig representation och textintegration. Även om Runway Gen 3 visar lovande tecken på många områden, har det fortfarande utrymme för förbättring inom dessa specifika domäner. Eftersom tekniken fortsätter att utvecklas kommer det att vara avgörande att åtgärda dessa problem för att skapa mer sömlös och trovärdig AI-genererad videokontent.

Att använda AI-verktyg som Chat GPT kan vara ett kraftfullt sätt att generera detaljerade och kreativa prompts för videogenerering. Genom att tillhandahålla en promptmall och instruktioner kan du utnyttja dessa AI-modellers språkförståelse och genereringsförmåga för att producera fantasifulla scenariobeskrivningar och kameraförflyttningar.

Exempelprompt som tillhandahålls föreslår följande format:

1. Titel (i klartext)
2. Scenariobeskrivning och kamerarörelse (under 500 tecken)

Genom att följa denna struktur och tillhandahålla önskat videoämne (t.ex. "en simrobot"), kan AI-modellen svara med en fokuserad och uppfinningsrik prompt som sedan kan användas som indata för videogenerationsverktyg som Runway Gen 3.

Denna metod låter dig dra nytta av den kreativa potentialen hos språkbaserade AI, vilket kompletterar de visuella förmågorna hos videogenerationsmodeller. De resulterande promptsen kan vara mer detaljerade och skräddarsydda för dina specifika behov, vilket potentiellt kan leda till högre kvalitet och mer engagerande videooutput.

Att experimentera med olika promptformat och AI-assistenter kan hjälpa dig att hitta rätt balans mellan mänsklig kreativitet och maskingenerad inspiration för dina videoprojekt.

Efter att ha testat Runway Gen 3 utförligt är det tydligt att verktyget har både imponerande förmågor och kvarstående begränsningar. AI:n är utmärkt på att generera abstrakta, visuellt slående videor med livliga färgpaletter och mjuka kameraförflyttningar. Prompts som involverar kosmiska, RGB- och kaleidoskopiska motiv producerade konsekvent hypnotiserande resultat.

Men verktyget kämpar när det kommer till att införliva realistiska mänskliga element. Videor med människor uppvisade ofta problem som förvridna händer, svävande objekt och inkonsekvent proportionering. Textintegration var också träffsäker eller missad, där AI:n presterade bättre på kortare ord än längre fraser.

Medan de visade exemplen kan representera bästa tänkbara scenarier, tyder den övergripande upplevelsen på att Runway Gen 3 är ett kraftfullt men ofullständigt verktyg. Användare kommer sannolikt att behöva experimentera med olika prompts och vara beredda att sortera igenom mindre framgångsrika generationer för att hitta pärlorna.

När tekniken fortsätter att utvecklas kommer det att vara intressant att se hur Runway hanterar dessa utmaningar och förfinar användarupplevelsen. För närvarande erbjuder Gen 3 en glimt in i framtiden för AI-genererad video, med både sina styrkor och begränsningar på full display.