Most zajlik az Adobe fejlesztői konferenciája, és a vállalat sok újdonságról beszélt már a nyitórendezvényén. A cég multimédiás fronton nagyon sokat tesz azért, hogy a generatív MI-ből és a nyelvi modellekből a lehető legtöbbet hozza ki, és az Adobe Max keretében némi betekintést engedett abba, hogy mit hoz a jövő ezen a fronton, milyen fejlesztéseken dolgozik éppen.
Videogenerálásban egyre erősebb az Adobe
Azt már egy ideje tudni lehet, hogy az Adobe a képgenerálást követően mélyebben is elmerülne ezen a területen, és a videogenerálást is megoldaná. Sok cég törekedik arra, hogy a videogenerálás terén nagyot tudjon alkotni. Alig néhány napja annak, hogy a Meta lerántotta a leplet a Movie Gen eszközéről, ami nagyon ütőképesnek tűnik az eddig látottak alapján. Most pedig az Adobe beszélt arról, hogy áll ezen a fronton a fejlesztéseivel.
A Firefly Video Model képességeit a cég korábban már megvillantotta néhány alkalommal, és most a Premier Próban is megjelent néhány olyan újítás, ami már a videogeneráló technológiát használja ki. A generatív kibővítésről már szó esett, ezzel a felhasználó kiterjesztheti a képet a videóknál is ugyanúgy, mint korábban ezt meg lehetett tenni a fotók esetében. De lesz ennek egy érdekesebb funkciója is, ami a videókat hosszában képes megtoldani, a felvételek elejére és végére is lehet majd részleteket generálni. A generatív kibővítés még a jeleneketbe is beleavatkozhat majd, ha valamilyen váratlan törés van a felvételben, létrehozható átvezető rész.
Egyelőre még béta ez a lehetőség, és részben ezért nagyon rövid részletet tud létrehozni. A generatív kibővítés 2 mp-et tud hozzátenni egy generálással a jelenetek hosszához, így a túl kései felvétel indításnál vagy a túl hamar megejtett leállításnál még éppen tudja a hibát korrigálni. Kizárólag 24 FPS-es videónál lehet ezt használni egyelőre, és 720p vagy 1080p minőségnél vehető igénybe. Hangeffekteket is tud generálni az Adobe újítása, 10 mp-cel is megtoldhatja a hanghatásokat, zenét és beszélgetést viszont nem tud kiegészíteni – egyelőre.
Az Adobe korlátozottan elindítja a Text-to-Video generáló eszköz, valamint az Image-to-Video funkció bétatesztelését is. Ezek először a Firefly keretében tehetők próbára azok számára, akiknek felkínálja a lehetőséget a vállalat.
A Text-to-Video esetében bármilyen videót létre lehet hozni szöveges utasításokkal, képes filmes hatást kelteni a tartalmaknál és 3D animációt is létrehozhat, de stop motion stílusban is alkothat. Az Image-to-Video pedig fotókban lesz képes létrehozni animációkat, ilyen lehetőséget a Meta már a reklámpartnereknek is kínálni fog. Az Adobe idővel ezeket is bevezeti a Premiere Próban, és a tervek szerint ilyen formában lehet majd a videókba például extra jeleneteket, vágóképeket generálni. De olyan dolgokat is generáltathatnak az emberek 720p24 minőségben, amiket saját eszközökkel nem tudnának rögzíteni.
Készül a Firefly Image Model V4
Az Adobe a funkciók fejlesztése mellett már azon is dolgozik, hogy a Firefly modellje szintet lépjen, a következő Firefly Image Model V4 kapcsán megtudhattunk néhány érdekességet. Ez a fejlesztés már alkalmas lesz arra, hogy az általa generált képek megfelelőnek vélt részeit ki lehessen jelölni, és csak a többi elemet generálja újra, így fokozatosan fel lehet építeni a legjobb végeredményt. Nem kell minden képgenerálást az elejéről kezdeni, a paramétereket építgetve, hogy hasonló legyen az eredmény.
A cég egyelőre még a V3 modellt sem használja mindenhol, éppen azon dolgozik, hogy ezt szélesebb körben bevezesse. A generált képek minőségében már ez a váltás is látványos lesz, de a Firefly Image Model V4 egy újabb fontos előrelépést fog jelenteni.
Project Concept néven komplex tervezőeszköz születik
Az Adobe a generatív MI számára maximális teret engedve egy nagyon komplex tervezőeszközt kezdett létrehozni, ami egyelőre a Project Concept néven fut. Ennek az a lényege, hogy képeket, szöveges instrukciókat egyaránt felhasználva lehet majd új képeket, grafikus elemeket létrehozni a mesterséges intelligenciával. Egy nagy digitális táblát kapnak majd itt a felhasználók, melyen kedvükre dolgozhatnak az MI-vel teljes rugalmasság mellett.
Bármilyen ötlete van az embernek, csak el kell kezdeni begépelni azt, és fokozatosan kialakíthatja a tervét. Meghatározható egy kép alapja, majd azt lehet tovább szerkeszteni, ötvözni, rendezni. Több képet remixelhet a Project Concept a valóságtól teljesen elszakadó eredmények létrehozása érdekében.
Egyetlen eszközben lehetőséget nyújt az Adobe a források kezelésére, a képek rendezésére, tervezésre, szerkesztésre, és akár még a prezentálásra is. Ha valamit át kell alakítani, néhány kattintással manipulálhatók a koncepciók a széles eszköztárat kiaknázva. Erre azonban még várni kell, mert a Project Concept a tesztelés kezdeti szakaszában jár, és fokozatosan nyitják majd meg egyre több ember számára, hogy szélesebb közönség visszajelzései alapján tudják továbbfejleszteni.