Arti i gjeneruar nga Stable Diffusion tani mund të animohet, tregon zhvilluesi Stability AI. Kompania ka prezantuar një produkt të ri të quajtur Stable Video Diffusion, duke i lejuar përdoruesit të krijojnë video nga një imazh i vetëm.
“Ky model i teknologjisë artificiale për gjenerimin e videove përfaqëson një hap të rëndësishëm në rrugëtimin tonë drejt krijimit të modeleve për të gjithë përdorimet,” shkroi kompania. shërbimi i ri është prezantuar në formën e dy modeleve image-to-video, secili i aftë për të gjeneruar 14 deri në 25 frames të gjata me shpejtësi midis 3 dhe 30 fps dhe rezolucion 576 × 1024.
“Në momentin e prezantimit në formën e tyre bazë, përmes vlerësimit të jashtëm, ne kemi zbuluar se këto modele tejkalojnë aftësitë e modeleve kryesore të mbyllura,” tha kompania, duke e krahasuar atë me platformat text-to-video Runëay dhe Pika Labs. Stable Video Diffusion është i disponueshëm vetëm për qëllime kërkimore në këtë pikë, jo për aplikime të botës reale ose komerciale.
Përdoruesit e mundshëm mund të regjistrohen për t’u futur në ëaitlist për të aksesuar “një përvojë të ardhshme në web që përmban një ndërfaqe text-to-video“, shkroi Stability AI. Shërbimi mund të ketë shumë potencial në sektorë të ndryshëm duke përfshirë reklamimin, arsimin, argëtimin dhe më shumë.
Mostrat e paraqitura në videon e mësipërme duket se janë të një cilësie relativisht të lartë, që përputhen me sistemet gjeneruese rivale. Megjithatë, ka disa kufizime, shkroi kompania: gjeneron video relativisht të shkurtër (më pak se 4 sekonda), i mungon fotorealizmi i përsosur, nuk mund të realizojë lëvizjen e kamerës, nuk ka kontroll teksti, nuk mund të gjenerojë tekst të lexueshëm dhe mund të mos gjenerojnë njerëz dhe fytyra siç duhet.
Mjeti u trajnua në një grup të dhënash prej miliona videosh dhe më pas u përmirësua në një grup më të vogël, me Stability AI që tregon se përdori vetëm video që ishte e disponueshme publikisht për qëllime kërkimore.
Origjina e grupit të të dhënave është e rëndësishme, duke pasur parasysh se Stability AI u padit së fundmi nga Getty Images për grumbullimin e arkivave të saj të imazheve.
