Stability AI a lansat un nou model de inteligență artificială, Stable Virtual Camera, despre care compania susține că poate transforma imaginile 2D în videoclipuri „imersive”, cu adâncime și perspectivă realiste, scrie TechCrunch.
Camerele virtuale sunt instrumente adesea utilizate în cinematografia digitală și animația 3D pentru a capta și naviga prin scene în timp real. Cu Stable Virtual Camera, Stability a încercat să adauge AI generativ la mix pentru a oferi un control și o personalizare mai mari, a declarat compania într-o postare pe blog.
Stable Virtual Camera generează „vederi inedite” ale unei scene din una sau mai multe imagini (până la 32 în total) la unghiurile camerei specificate de utilizator. Modelul poate genera videoclipuri care se deplasează de-a lungul unor trasee „dinamice” ale camerei sau presetate, inclusiv „Spiral”, „Dolly Zoom”, „Move” și „Pan”.
Versiunea actuală a Stable Virtual Camera, o previzualizare de cercetare, poate genera videoclipuri în raporturi de aspect pătrat (1:1), portret (9:16) și peisaj (16:9) de până la 1.000 de cadre în lungime. Totuși, Stability avertizează că modelul poate produce rezultate de calitate inferioară în anumite scenarii, în special în cazul imaginilor cu oameni, animale sau „texturi dinamice” precum apa.
„Scenele foarte ambigue, traiectoriile complexe ale camerei care intersectează obiecte sau suprafețe și obiectele de formă neregulată pot provoca artefacte de pâlpâire”, notează Stabilitatea în postarea sa de pe blog, «în special atunci când punctele de vedere țintă diferă semnificativ de imaginile de intrare».
Stable Virtual Camera este disponibilă pentru utilizare în scopuri de cercetare sub o licență necomercială. Aceasta poate fi descărcată de pe platforma de dezvoltare AI Hugging Face.
Stability, firma aflată în dificultate din spatele modelului popular de generare a imaginilor Stable Diffusion, a strâns noi fonduri anul trecut, investitorii, printre care Eric Schmidt și fondatorul Napster, Sean Parker, încercând să redreseze afacerea. Emad Mostaque, co-fondatorul și fostul director general al Stability, ar fi gestionat în mod necorespunzător Stability până la ruină financiară, ceea ce a dus la demisia personalului, la eșecul unui parteneriat cu Canva și la îngrijorarea investitorilor cu privire la perspectivele companiei.
În ultimele câteva luni, Stability a angajat un nou CEO, l-a numit pe regizorul filmului „Titanic”, James Cameron, în consiliul de administrație și a lansat mai multe modele noi de generare a imaginilor. La începutul lunii martie, compania s-a asociat cu producătorul de cipuri Arm pentru a aduce un model AI care poate genera sunet, inclusiv efecte sonore pentru dispozitivele mobile care rulează cipuri Arm.
