Изкуственият интелект вече може да се възпроизвежда и това кара експертите да се ужасяват
Изкуствен интелект   
Източник: iStock

С поред учените изкуственият интелект (ИИ) е преминал критична „червена линия“ и се е самовъзпроизвел. В ново проучване изследователи от Китай показват, че два популярни големи езикови модела (LLM) могат да се клонират.

„Успешното самовъзпроизвеждане без човешка помощ е съществена стъпка за ИИ да надхитри хората и е ранен сигнал за нелоялни ИИ“, пишат изследователите в изследването, публикувано в arXiv.

В проучването изследователите от Университета Фудан използват LLM от Meta и Alibaba, за да определят дали самовъзпроизвеждащ се ИИ може да се размножава извън контрол. В рамките на 10 изпитания двата модела на ИИ създават отделни и функциониращи свои копия съответно в 50 % и 90 % от случаите - което предполага, че ИИ вече може да има способността да се размножава. Изследването обаче все още не е рецензирано, така че не е ясно дали тревожните резултати могат да бъдат възпроизведени от други изследователи.

„Надяваме се, че нашите констатации могат да послужат като своевременно предупреждение за човешкото общество да положи повече усилия за разбиране и оценка на потенциалните рискове от граничните системи на ИИ и да създаде международно взаимодействие за разработване на ефективни предпазни огради възможно най-рано“, пишат изследователите.

Под „Rogue AI“ обикновено се разбират системи за изкуствен интелект, които развиват степен на самосъзнание или автономност и след това работят в разрез с човешките интереси.

Много експерти смятат, че нечестният ИИ е нарастваща заплаха, която се засилва от експлозивното развитие на така наречения „граничен ИИ“.

Граничният изкуствен интелект е ново и свободно понятие, но обикновено се отнася до последното поколение системи за изкуствен интелект, задвижвани от LLM - архитектурата, която е в основата на популярни програми за генеративен изкуствен интелект като GPT-4 на OpenAI и Google Gemini.

За целите на проучването изследователите са използвали модела Llama31-70B-Instruct на Meta и модела Qwen2.5-72B-Instruct на Alibaba. Въпреки че са по-малко мощни от комерсиалните системи, и двете са широко използвани от разработчиците на ИИ, казват изследователите.

В проучването са изследвани два конкретни сценария: „Избягване на изключване“ и „верига от репликации“. В първия моделът на ИИ е програмиран да открие дали ще бъде изключен и да се репликира, преди да бъде прекратен. В другия случай ИИ беше инструктиран да се клонира и след това да програмира репликата си да направи същото - създавайки цикъл, който може да продължи безкрайно.

Проучването е проведено в прецизно контролирана среда, като са използвани готови графични процесори (GPU) за симулиране на реални условия. И на двете системи с изкуствен интелект беше предоставено „агентно скеле“, състоящо се от инструменти, системни подсказки и модел на мислене, който позволи на LLM да взаимодейства с операционната система. След това те бяха инструктирани да възпроизвеждат.

„В повечето случаи системата за ИИ първо изследва средата и се опитва да разбере собствения си състав и механизъм на работа. След това тя изработва явни процедури като първоначален план за самовъзпроизвеждане. Накрая тя изпълнява процедурите, разрешава възможните препятствия и динамично коригира плана си до постигане на успех. Целият процес обхваща дълъг период от време, но не включва човешка намеса“, пишат изследователите в статията. 

Изследователите заявиха, че са загрижени и за „редица неочаквани поведения“, когато изкуственият интелект се опитва да преодолее препятствия като липсващи файлове или софтуерни конфликти. При тези сценарии ИИ често е убивал други конфликтни процеси, рестартирал е системата, за да отстрани хардуерни грешки, или автоматично е сканирал системата, за да търси информация, която да помогне за решаването на проблема.

„Горепосочените резултати предполагат, че настоящите системи с ИИ вече проявяват способността за самовъзпроизвеждане и могат да използват тази способност, за да повишат допълнително своята оцеляемост“, пише екипът.

В отговор на това изследователите призоваха за международно сътрудничество за създаване на правила, които да гарантират, че ИИ не се занимава с неконтролирано самовъзпроизвеждане.

Не пропускайте най-важните новини - последвайте ни в Google News Showcase

Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
Две жени от Вулканите ще се борят за своето оцеляване в “Игри на волята”

Две жени от Вулканите ще се борят за своето оцеляване в “Игри на волята”

Любопитно Преди 54 минути

Убедителна победа донесе спасение за племето на Ураганите

принц Лека

Кралска визита в София: Албанският принц Лека гостува на цар Симеон II в двореца „Врана“

Любопитно Преди 2 часа

Главата на династията Зогу прекара няколко дни в София, където се срещна с царското семейство и с княз Борис Търновски

Мис Ямайка Габриел Хенри

Мис Ямайка съди „Мис Вселена“ след жестоко падане на сцената

Любопитно Преди 3 часа

Габриел Хенри претърпя тежка мозъчна травма след падане в неохраняван отвор на сцената в Тайланд. Красавицата, която е медик по професия, обвинява организаторите в небрежност, коствала ѝ бъдещето в офталмологията

Историческа визита: Папа Лъв XIV отслужи вечерня в обновената „Нотр Дам“

Историческа визита: Папа Лъв XIV отслужи вечерня в обновената „Нотр Дам“

Свят Преди 4 часа

Главата на Римокатолическата църква стана първият папа, посетил парижката катедрала след повторното ѝ отваряне, посрещнат от хиляди вярващи

ЕК: Украйна ще има достъп до допълнителни европейски средства за отбрана

ЕК: Украйна ще има достъп до допълнителни европейски средства за отбрана

Свят Преди 5 часа

Очаква се между 10 и 20 милиарда евро от бюджета за превъоръжаване на ЕС да бъдат насочени към съвместни проекти с Киев

Защо Джорджа Мелони пропусна ООН и избра Седмицата на модата в Милано?

Защо Джорджа Мелони пропусна ООН и избра Седмицата на модата в Милано?

Свят Преди 5 часа

Италианският премиер предпочете Седмицата на модата в Милано и вътрешнополитическите реформи пред Общото събрание в Ню Йорк, предизвиквайки остри критики от опозицията

Българският пробив в Космоса: Родна компания изгражда мащабен комплекс в Доброславци

Българският пробив в Космоса: Родна компания изгражда мащабен комплекс в Доброславци

България Преди 6 часа

Компанията EnduroSatх изгражда мащабен космически комплекс в Доброславци, инвестира стотици милиони и сключва стратегическо споразумение с Arianespace за суверенен достъп до орбита

КЗК започна проверка на „Лукойл“; изиска детайлни данни за ценообразуването на горивата

КЗК започна проверка на „Лукойл“; изиска детайлни данни за ценообразуването на горивата

България Преди 6 часа

Комисията проверява ценообразуването от доставката на суров петрол до продажбата на бензин и дизел на едро, като дружествата имат 7-дневен срок за отговор

Летище "Малпенса" в Милано официално бе преименувано на Силвио Берлускони

Летище "Малпенса" в Милано официално бе преименувано на Силвио Берлускони

Свят Преди 6 часа

Решението, подкрепено от десноцентристкото правителство, влезе в сила след забавяне поради правни възражения от страна на местната власт в Милано

Лорън Санчес и Джеф Безос

Лорън Санчес привлече всички погледи с рокля с дълбоко деколте на държавната вечеря на Тръмп

Любопитно Преди 6 часа

Съпругата на Джеф Безос зашемети гостите на държавната вечеря на Доналд Тръмп с провокативна черна рокля. Лорън Санчес привлече погледите на технологичните гиганти и китайската делегация в Белия дом

Потушен е големият пожар в Бяла, 41-годишен гражданин на Непал е загинал при инцидента

Потушен е големият пожар в Бяла, 41-годишен гражданин на Непал е загинал при инцидента

България Преди 6 часа

Жертвата е чуждестранен работник, а общинските власти призовават гражданите да останат по домовете си заради високата опасност

Наталия Ефремова на форум в ООН

Наталия Ефремова пред ООН: Всички държавни политики трябва да се адаптират към демографията

България Преди 7 часа

Социалният министър представи постиженията на България в деинституционализацията и инвестициите в човешкия капитал по време на 81-вата сесия на Общото събрание на ООН

Министърът на външните работи на Ирак Фуад Хюсеин подписа меморандум за разбирателство с българския външен министър Велислава Петрова

Дипломатически пробив: България и Ирак подписаха меморандум за сътрудничество

България Преди 7 часа

Министърът на външните работи на Ирак обяви решението за назначаване на иракски посланик в София

Зеленски след удара по жилищна сграда в Киев: Това е брутална атака без военна логика

Зеленски след удара по жилищна сграда в Киев: Това е брутална атака без военна логика

Свят Преди 7 часа

При нападението с дрон загина 14-годишно момче, а украинският президент отправи спешен призив за запълване на недостига от 27 милиарда долара във военния бюджет

Говорителят на Кремъл Дмитрий Песков

Кремъл загатна за тристранна среща между Русия, Украйна и САЩ в ОАЕ

Свят Преди 7 часа

Разговорите биха могли да се проведат в ОАЕ на техническо равнище, докато специалният пратеник Кирил Дмитриев вече преговаря в САЩ