Нов симулатор 430 000 пъти ускорява обучението на роботите
Изследователи от университета Карнеги Мелън показаха платформата Genesis – нова симулационна система с отворен код, която форсира образованието на роботи във виртуална среда 430 000 пъти по-бързо, в сравнение с в действителния свят. За един час симулация роботите могат да натрупат опит, равностоен на 10 години образование. Genesis прави физични калкулации до 80 пъти по-бързо от съществуващите решения и може да извършва до 100 000 симулации по едно и също време. Системата също по този начин генерира „ 4D светове “ от текстови подсказки, като автоматизирано основава комплицирани среди за тестване на роботите.
Платформата Genesis прави физични калкулации до 80 пъти по-бързо от аналогични решения като Isaac Gym на Nvidia. Процесът включва графични процесори, сходни на тези, употребявани при видеоигрите. Това прави платформата способна да извършва до 100 000 симулации по едно и също време. Това е значимо за образованието на невронните мрежи, предопределени за ръководство на роботи в действителния свят.
Разработчиците показаха и технология за генериране на „ 4D динамични светове “. Терминът „ 4D “ евентуално се отнася до моделирането на 3D пространството във времето, т.е. динамично. Моделите зрение-език (VLM) се употребяват за основаване на виртуални среди от текстови описания (подобно на промптовете в другите ИИ системи), като се ползват личните инфраструктурни API на Genesis. Генерираните с ИИ светове имат реалистична физика, придвижвания на камерата и държание на обектите, заложени посредством текстови команди. Системата генерира физически правилни видеоклипове с трасиране на лъчите и данни за образованието на роботите.
Традиционно симулациите изискват голямо количество старания от страна на художниците: 3D модели, текстури, оформление на сцената. Но всеки съставен елемент в този развой може да бъде автоматизиран. Новата технология, основана на текстови поръчки, дава опция да се основават комплицирани среди за тестване на роботи посредством въвеждане на команди на натурален език вместо ръчно програмиране.
Движенията на героите, интерактивните 3D подиуми, лицевите анимации и други детайли могат да се генерират с енджина Genesis, което е потребно както за основаване на художествени активи, по този начин и за създаване на по-реалистични игри и видеоклипове благодарение на изкуствен интелект. За разлика от дифузионните модели, които работят със статистически данни за пикселите, Genesis конструира моделиран свят непосредствено в данните.
Genesis се появява в миг, когато откривателите в региона на роботиката търсят по-добри принадлежности за тестване и образование на роботите във виртуална среда, преди да ги внедрят в действителния свят. Бързото и тъкмо моделиране оказва помощ на роботите да усвояват по-бързо комплицирани задания, като в същото време понижава нуждата от скъпи физически проби. Генеративната система към момента не е част от кода, наличен в GitHub, само че екипът възнамерява да я разгласява в бъдеще.
Платформата се разграничава от другите симулатори на 3D свят за образование на роботи с това, че употребява Python както за интерфейса, по този начин и за физичния енджин. За разлика от другите енджини, които употребяват C++ или CUDA с API на Python като среда, Genesis е построен от нулата напълно на Python. Благодарение на отворената платформа високоскоростното моделиране за образование на роботи е налично за всеки откривател гратис, с елементарни команди на езика Python на общоприет хардуер.
