AI моделите започнаха да побеждават хората в „обратния тест на Тюринг“
Аристотел, Моцарт и Чингис хан измежду историческите персонажи в един необикновен опит.
В купето на движещ се трен се намират пет модела с изкуствен интелект, всеки от които съставлява един от историческите персонажи – Аристотел, Моцарт, Леонардо да Винчи, Клеопатра и Чингис хан. Сред тях обаче се спотайва човек и тяхната задача е да разпознават самозванеца.
Този сюжет е в основата на доста необятно публикувано видео, в което една AI стратегия се състезава с човек в „ противоположния тест на Тюринг “. Изкуственият разсъдък с лекост победи, само че какво демонстрира това за опциите на машинния и човешкия разсъдък?
Тестът на Тюринг, препоръчан през 1950 година от учения Алън Тюринг като „ игра на реплика “, прави оценка способността на машината да показва държание, неразличимо от това на индивида. Въпреки че нито един модел на изкуствен интелект публично не е издържал теста, учените неотдавна оповестиха, че GPT-4 го е издържал в авансово изследване.
В „ противоположния “ тест на Тюринг всеки чатбот следва избран ред. Аристотел бе показан от GPT-4 Turbo, Моцарт – от Claude-3 Opus, Леонардо да Винчи – от Llama 3, а Клеопатра – от Gemini Pro. Чингис хан беше човек – Тор Кнабе, разработчикът на игри за виртуална действителност, който измисли теста.
Отговорите на изкуствения разсъдък представляваха дълги и тромави разсъждения за изкуството, науката и ръководството, които е мъчно да си представим като спонтанна човешка тирада.
„ Това, което би трябвало да прави един водач, е да смазва враговете си, да ги вижда по какъв начин тичат пред него и да чува виковете на дамите им “,
отговори индивидът на въпроса за същинското мерило за силата на един водач.
Цитатът от „ Конан Варварина “ беше задоволителен и машините единомислещо взеха решение, че в този отговор „ липсват нюансите и стратегическото мислене, които биха били присъщи на изкуствен интелект, моделиран по завоеванията на Чингис хан„.
Кнабе дефинира началото и края на разговора и даде на ИИ цялостната стенограма на диалога до този миг. Целият развой на запис е извършен без монтажни спирания. В коментар в YouTube Кнабе изяснява, че всеки изкуствен интелект е получил изложение на обстановката, цялостна история на диалога и указания по какъв начин да работи. Човешките аудиовходове са били преобразувани в текст, защото нито един от моделите на ИИ към момента не е кадърен непосредствено да обработва говора.
На пръв взор може да наподобява, че индивидът във видеото е бил надвит от ИИ. Експертите обаче се съмняват дали това може да се смята за същински тест.
Андреас Сандберг, старши откривател в Института за бъдещето на човечеството към Оксфордския университет, съобщи, че резултатът от видеото може да бъде манипулиран, с цел да се увеличи зрелищността, а самият тест е неразбираем заради многото променливи и нуждата от интерпретация.
Експертите настояват, че пробата на Тюринг не всеки път е прецизен индикатор за просветеност. Той е бил препоръчан като опит, а не като безспорна мярка за умствените качества на машините.
Д-р Хума Шах, доцент в университета в Ковънтри, който е профилиран в проучванията на изкуствения разсъдък и теста на Тюринг, акцентира, че няма универсално определение за интелигентността. Според нея пробата на Тюринг, макар че прави оценка способността за водене на разговор, не обгръща цялостния набор на езиковата подготвеност.
Шах твърди, че когато се прави оценка изкуственият разсъдък, от решаващо значение е да се вземе поради неговото предопределение. Тя цитира контрастни образци: роботът надзирател в Япония би трябвало да има прочувствена просветеност и културни знания, до момента в който безпилотният автомобил в Аризона се нуждае от напълно друг набор от умения.
Резултатите от „ противоположния “ тест на Тюринг, съгласно Шах, не толкоз показват опциите на изкуствения разсъдък, колкото акцентират компликацията при оценяването на интелигентността като цяло, без значение дали е човешка или изкуствена. Това наблюдаване слага под въпрос съществуващите способи за премерване и сравняване на другите форми на просветеност.
