Runway, компания, която преди това е произвеждала генератори на изображения

Runway, компания, която преди този момент е произвеждала генератори на изображения и видео, показа ИИ-модел за генериране на виртуални светове, наименуван GWM-1. Той работи посредством предсказание кадър по кадър, създавайки симулации с схващане на физиката и по какъв начин светът се държи с течение на времето.

Моделът на свят — това е система с изкуствен интелект, която учи вътрешните симулации на процеси, които биха могли да зародят в света. Тя може да разсъждава, възнамерява и извършва дейности, без да е належащо да бъде обучавана за всеки вероятен сюжет от действителния свят. „ За да изградим модел на света, първо трябваше да разработим в действителност първокачествен видео модел. Вярваме, че верният метод за създаване на модели на света е да ги обучим да предсказват пикселите непосредствено и това е най-хубавият метод за реализиране на универсално моделиране. С задоволителен мащаб и верните данни е допустимо да се построи модел, който схваща относително добре по какъв начин работи светът “ — изясни основният изпълнителен шеф на Runway, Анастасис Германидис.

Компанията показа три версии на новия си модел на света: GWM-Worlds, GWM-Robotics и GWM-Avatars. GWM-Worlds е приложение, позволяващо основаване на интерактивни планове. Потребителят дефинира начална сцена, употребявайки текстова поръчка или примерна фотография, и до момента в който изследва пространството, моделът генерира свят, отчитайки геометрията, физиката и осветлението. Симулацията работи с резолюция 720p и 24 фрагмента в секунда. GWM-Worlds може да се употребява в създаването на игри и е подобаващ и за образование на навигационни сътрудници и сътрудници за действителни дейности. GWM-Robotics е планиран да генерира синтетични данни, обогатени с нови параметри, като да вземем за пример изменящи се метеорологични условия или появяването на трудности. Този способ ще помогне да се разпознава по кое време и при какви условия роботите са способни да нарушават разпоредбите, като се вземат поради разнообразни сюжети. GWM-Avatars е планиран да основава реалистични аватари и да симулира човешкото държание. В момента Worlds, Robotics и Avatars работят като обособени модели, само че Runway възнамерява да ги комбинира.

Компанията разгласи и актуализация на базовия си модел Gen 4.5, който към този момент може да генерира вградено аудио и да основава дълги, многокадрови видеоклипове. Това могат да бъдат едноминутни клипове с непрекъснат поток от герои, вграден разговор, фонов тон и комплицирани фрагменти от разнообразни ъгли. Възможно е също по този начин да редактирате съществуващо аудио, да добавяте разговор и да променяте многокадрови видеоклипове с всякаква дължина. Всички консуматори на платения проект могат да употребяват видео генератора Runway Gen 4.5. GWM-Robotics ще бъде наличен посредством SDK; в ход са полемики с сътрудници за консолидиране на GWM-Robotics и GWM-Avatars за основатели на роботика и други бизнеси.