Опасен път. Мъск иска да обучи AI на данните, които сам генерира
Милиардерът и създател на стартъпа за изкуствен интелект xAI Илон Мъск счита, че промишлеността е изправена пред рецесия, защото данните за образование на моделите са съвсем изчерпани.
Илон Мъск се съгласява с специалистите по изкуствен интелект, които споделят, че са останали малко действителни данни за образованието на моделите.
„ Вече сме изчерпали цялата сума на човешките познания за образованието на изкуствен интелект. Това се случи най-вече през последната година “ — сподели Мъск по време на диалог с ръководителя на маркетинг групата Stagwell Марк Пен.
Мъск допусна, че синтетичните данни — данни, основани от самите AI-модели — могат да се употребяват за образование на моделите в бъдеще.
„ Единственият метод за допълнение е посредством синтетични данни, където изкуственият разсъдък основава [данни за обучение]. Със синтетичните данни изкуственият разсъдък ще се самооцени и ще премине през този развой на самообразование “ — прибавя Мъск.
Според TechCrunch, това е в сходство с неотдавнашните изказвания на един от съоснователите на OpenAI, Иля Суцкевер, който на конференцията NeurIPS сподели, че неналичието на данни за образование ще принуди производителите на AI да трансформират метода, по който създават модели.
Phi-4 AI на Microsoft беше подготвен на синтетични данни дружно с данни от действителния свят. Същото важи и за моделите Gemma на Гугъл и Claude 3.5 Sonnet на Anthropic. Meta усъвършенства най-новата си серия от модели Llama, употребявайки генерирани от AI данни.
Има изгоди от ученето от синтетични данни, като да вземем за пример икономисване на разноски. Но има и дефекти. Някои проучвания допускат, че синтетичните данни могат да доведат до колапс на модела, където той става по-малко „ изобретателен “ и по-предубеден в своите резултати.
