Dream Machine má novú aktualizáciu. AI videá sú ešte lepšie

Spoločnosť Luma AI, inovatívny startup zo San Francisca, opäť posúva hranice tvorby videí pomocou umelej inteligencie. Nová verzia ich modelu Dream Machine 1.5, ktorá bola predstavená len dva mesiace po prvotnom uvedení modelu Dream Machine na trh, prináša revolučné vylepšenia v oblasti realizmu, plynulosti pohybov a porozumenia zložitým zadaniam.

Dream Machine 1.5 is here 🎉 Now with higher-quality text-to-video, smarter understanding of your prompts, custom text rendering, and improved image-to-video! Level up. https://t.co/G3HUEBE2ng #LumaDreamMachine pic.twitter.com/VQvfSTK0AI

— Luma AI (@LumaLabsAI) August 19, 2024

V prvom rade treba zmieniť, že s aktualizáciou sa AI môže pochváliť výrazným zvýšením rýchlosti, pričom za približne dve minúty vygeneruje päť sekúnd vysokokvalitného videa.

Lepšie pracuje s textom

Jedným z najväčších pokrokov v Dream Machine 1.5 je však schopnosť vykresľovať text priamo v generovaných videách, čo bolo doteraz pre AI modely veľkou výzvou. Táto dlho očakávaná funkcia umožňuje jednoduchú tvorbu pútavých titulkov, animovaných log a dynamickej grafiky priamo na obrazovke, čím eliminuje potrebu náročného postprodukčného procesu.

Prekonaná jazyková bariéra

Ďalším kľúčovým vylepšením je prekonanie jazykovej bariéry. Dream Machine 1.5 teraz dokáže rozumieť a pracovať s rôznymi jazykmi a kultúrnymi kontextmi. Používateľ na platforme X napríklad predviedol schopnosti modelu na príklade v arabčine, kde AI vytvorila realistické video muža krájajúceho mäso, pričom jednotlivé kúsky mäsa sa plynulo transformovali do textu.

2️⃣ 🎥 prompt (Arabic prompt) 🤯

رجل يقطع اللحم على لوح خشبي لتتحول القطع الى كلمة "يحضر يوميا" بطريقة سينمائية. pic.twitter.com/7n8bMRrS8X

— AZIZ | AI ART (@aziz4ai) August 17, 2024

Lepšia konzistentnosť a realistickosť

Zdokonalenie možno pozorovať aj v oblasti konzistencie a realistickosti generovaných videí. Nová verzia lepšie rozumie fyzikálnym zákonom, čo sa prejavuje v plynulejších a prirodzenejších pohyboch.

Pri práci s Dream Machine je dôležité si uvedomiť, že model vyniká v detailnom spracovaní výziev. Pri dlhších a komplexnejších popisoch sa však odporúča vypnúť funkciu automatického vylepšovania, aby sa zabránilo nežiaducim úpravám a zachovala sa vernosť pôvodnej predstave používateľa.

"ancient ships battle in tempest in a sea with thunderstorms and huge waves. lightening illuminates the night as ships fire at each other." #LumaDreamMachine 1.5 pic.twitter.com/NDwJjL7F9H

— Luma AI (@LumaLabsAI) August 18, 2024

Zdroje: Twitter, VentureBeat