Nvidia пуска AI-платформа за преподаване на жестомимичен език
Nvidia показа нова платформа за изкуствен интелект, с цел да научи хората по какъв начин да употребяват американския жестомимичен език, с цел да оказват помощ за превъзмогване на информационните бариери. Платформата Signs основава селекциониран набор от данни за учещите жестомимичен език и разработчиците на основани на ASL приложения.
Американският жестомимичен език инцидентно е третият най-разпространен език в Съединените щати — само че има доста по-малко принадлежности за изкуствен интелект, построени въз основата на ASL данни, в сравнение с тези, основани на данни от най-разпространените езици в страната — британски и испански.
Nvidia, Американското общество на глухите деца и креативната организация Hello Monday оказват помощ да се преодолее тази празнота със Signs — интерактивна уеб-платформа, основана за проучване на езика на жестовете и създаване на основани на AI налични приложения.
Обучаващите се на жестомимичен език могат да получат достъп до подбраната библиотека от ASL знаци на платформата, с цел да разширят речника си с 3D-аватар, проявяващ знаците, както и да употребяват инструмент, основан на AI, който проучва видео от уеб-камера, с цел да даде противоположна връзка в действително време. Жестоговорящите хора от всички равнища могат да допринесат за развиването на платформата, като демонстрират жестове при съответни думи, с цел да оказват помощ за основаването на набор видео материали с отворен код за ASL.
Наборът от данни, който Nvidia възнамерява да разшири до 400 000 видеоклипа, представляващи 1000 жеста, се преглежда от опитни консуматори на езика на знаците и преводачи, с цел да се подсигурява точността на всеки жест. Резултатът е първокачествен образен речник и инструмент за образование.
„ Повечето глухи деца се раждат от чуващи родители. Предоставяйки на фамилиите налични принадлежности като Signs за ранно проучване на езика на жестовете разрешава дейно другарство с деца на възраст от шест до осем месеца “ — споделя в изказване Чери Даулинг, изпълнителен шеф на Американското сдружение на глухите деца. „ Знаейки, че професионалните учители по жестомимичен език са прегледали целия речник на платформата, значи, че потребителите могат да имат доверие в това, което учат. “
Екипите на Nvidia възнамеряват да употребяват този набор от данни за по-нататъшното създаване на AI-приложения, които преодоляват информационните бариери сред глухите и чуващите общности. Планира се данните да бъдат предоставени на обществеността като запас за основаване на налични технологии, в това число и сътрудници с изкуствен интелект, цифрови приложения за хора и принадлежности за видеоконференции. Това може да се употребява и за възстановяване на означения и даване на ASL платформи в цялата екосистема с поддръжка в действително време и противоположна връзка благодарение на AI.
Независимо дали сте новак или специалист, доброволците могат да записват своите жестове, с цел да допринесат за набора от данни за ASL.
Във етапа на събиране на данни Signs към този момент дава мощна платформа за проучване на езика на жестовете, като предлага на хората опцията да научат и практикуват първичен набор от 100 знака, тъй че да могат да поддържат връзка по-ефективно с другари или членове на фамилията, които употребяват езика на жестовете.
„ Платформата за проучване на езика на знаците може да помогне на фамилиите с глухи деца бързо да намерят точната дума и да видят по какъв начин да създадат съответния знак. Това е инструмент, който може да им помогне да употребяват езика на знаците всекидневно отвън формалните занятия “ — споделя Даулинг. „ Виждам, че и децата, и родителите към този момент го учат. “
Докато знаците сега се концентрират върху придвижванията на ръцете и позициите на пръстите за всеки знак, ASL включва също изражения на лицето и придвижвания на главата, с цел да се съобщи значение. Екипът зад Signs изследва по какъв начин тези неръчно излъчени сигнали могат да бъдат проследявани и интегрирани в бъдещите версии на платформата.
Те също по този начин изследват по какъв начин други нюанси, като районни разлики и жаргонни изрази, могат да бъдат показани в Signs, с цел да обогатят базата данни на ASL, и си сътрудничат с откриватели от Центъра за досегаемост и включване Rochester Institute of Technology, с цел да оценят и подобрят потребителското преживяване на платформата Signs за глухи и хора с повреден слух.
„ Подобряването на достъпността на езика на жестовете е непрестанен развой “ — споделя Андерс Йесен, партньор-основател на Hello Monday/DEPT, който сътвори уеб-платформата Signs и преди този момент работи с Американското общество на глухите деца върху приложението Fingerspelling.xyz, което обучаваше потребителите на писмеността на езика на знаците. „ Знаците могат да задоволят потребността от усъвършенствани AI принадлежности, които оказват помощ за превъзмогване на информационните бариери сред общностите на глухите и чуващите. “
Наборът от данни, изравен в основата на Signs, е планувано да бъде пуснат по-късно тази година.
