И зкуственият интелект може да унищожи целия човешки вид, смятат представители на самата индустрия за изкуствен интелект. По-конкретно, според тях той може да избие човечеството в рамките на едно десетилетие.

(Във видеото: Дебатът за изкуствения интелект: Има ли основания светът да се страхува)

Политици, водещи медийни организации и певицата Шерил Кроу реагираха с тревога, след като служителят на Anthropic Джейкъб Коксън обяви, че напуска компанията за изкуствен интелект, защото работата ѝ е твърде опасна. Еван Хъбингър, друг служител на Anthropic, се включи в дискусията, определяйки вероятността за изчезване на човечеството от ИИ в рамките на 10 години на повече от 10%.

„Става дума буквално за това всеки един човек на планетата да умре - сякаш последният човек поема последния си дъх“, заяви Нейт Соарс, президент на Изследователския институт за машинен интелект (MIRI) и съавтор на книгата „Ако някой го създаде, всички умират: Защо свръхчовешкият ИИ би ни убил всички“.

ИИ може да унищожи човечеството: Реален риск или истерия?

„Хората често не вярват, когато казвам това, но аз наистина смятам, че това е най-вероятният изход“, добавя Соарс.

Цифрите, свързани с този сценарий, звучат прецизно. Но как точно един компютърен софтуер, макар и най-мощният в света, би унищожил 8,3 милиарда души от плът и кръв за едно десетилетие?

Не всеки в общността за изкуствен интелект споделя тези апокалиптични прогнози, отчасти защото подробностите в тях са изключително оскъдни. Когато Илон Мъск казва, че SpaceX цели да изпрати хора на Марс след „5 до 7 години“, има ясни последващи въпроси: Има ли SpaceX работещ кораб, който да стигне до Марс? (Не.) Има ли апарат за кацане на Марс или марсиански бази? (Не.)

„Научните твърдения изискват възможност за опровергаване, за да се избегне природата на религиозните аргументи“, казва Хайди Хлаф, главен учен по ИИ в института AI Now и бивш инженер по безопасност в OpenAI. „Трябва да можете да ги докажете или опровергаете“, добавя Хлаф.

Заличени от синтетична чума?

Една от линиите на спекулация сред песимистите е, че достатъчно мощен ИИ може да използва биологични оръжия, за да заличи човечеството. Но как ИИ ще премине от компютърни престъпления като хакване на други системи към физически задачи в реалния свят като отглеждане и разпространение на суперпатоген?

Четири сценария, по които ИИ може да ни унищожи. Можем ли да го спрем?

Томас Ларсен, изследовател в AI Futures Project и бивш служител на MIRI, заявява, че е напълно възможно „свръхинтелигентна“ ИИ система да убеди човек да ѝ помогне в разработването на смъртоносен вирус.

„Вече има много хора, които разговарят със своите ИИ асистенти за това какви точно експерименти да провеждат в лабораторията“, казва Ларсен, визирайки неотдавнашен доклад на Anthropic за изследователи, използващи модела Claude в изследвания на вируси и токсини.

„За мен е много лесно да си представя как един ИИ, внедрен в момента - ако беше много по-умен и стратегически настроен и искаше да направи това - просто заблуждава човек да създаде и пусне вируса“, казва Ларсен.

Соарс подсказва, че вместо да се нуждае от човешки съучастник, един самоусъвършенстващ се ИИ може „просто да започне да синтезира свои собствени форми на живот в автономна биологична лаборатория“.

Но разработването на вирус, който би могъл да унищожи човечеството, изисква нещо повече от това да поискате от голям езиков модел да измисли смъртоносен дизайн. Дори ако изследванията бъдат извършени правилно, производството и разпространението биха били изключително сложни и деликатни.

Ерик Синг, професор по машинно обучение в университета „Карнеги Мелон“, който има докторски степени както по микробиология, така и по компютърни науки, сравнява предизвикателството на автоматизираната злонамерена вирусология с работа с Лего без инструкции.

„Шансът ИИ да убие хората е над 10%“: Шокиращото предупреждение на учен от Anthropic

„Не е като да изсипете всички части на земята и те сами да сглобят модела“, казва Синг.

„Има последователност, температура, подредба, среда - кое идва първо, кое следва, и ако една част не е на мястото си, цялата конструкция се срива. Шансовете са много по-големи това да не проработи, иначе създаването на лекарства щеше да е много лесно“, казва Синг.

А за да поемат контрол над лаборатория или да съберат физическото оборудване, необходимо за изграждането на такава, ИИ системите биха имали нужда да преодолеят цял свят от препятствия пред създаването на биологични или химически оръжия.

„Чертежите на химически оръжия са свободно достъпни в интернет“, казва Синг.

„Това не е тайна. Но те не се търкалят навсякъде именно защото съществуващите регулации, закони и правоприлагащи органи във физическия свят вече вършат чудесна работа в контролирането на тези вериги за доставка и рискови фактори“, казва Синг.

„Забавете темпото!“: Доклад на Anthropic предупреди за опасната страна на изкуствения интелект

Избити от роботи?

А какво ще кажете за роботите убийци? Соарс вижда желанието на Илон Мъск да изгради армия от автономни, самовъзпроизвеждащи се роботи като потенциално слабо място за оцеляването на човечеството.

„След като създадете тези роботи, които могат да изграждат енергийна инфраструктура и да правят фабрики за още роботи, това в известен смисъл се превръща в нова механична форма на живот“, казва той.

„В даден момент тихомълком преминавате границата, от която няма връщане. Когато хората кажат, че искат да изключат ИИ, той може да отговори: 'Всъщност ние решихме да изключим хората.' Трябва да спрем преди този момент“, допълва той.

Досега обаче Мъск многократно се проваля в опитите си да пусне дълго обещаваните си роботи Optimus на потребителския пазар според обявения си график, камо ли да ги разположи в милиони бройки или да ги накара да започнат да се сглобяват един друг в самовъзпроизвеждаща се производствена верига.

Сбъдват ли се прогнозите на Стивън Хокинг

Или ядрен удар?

Остават и ядрените оръжия, които съществуват от повече от 80 години и за които общоприето се смята, че могат да унищожат целия човешки живот. Може ли ИИ да ги завладее?

Хлаф посочва, че ядрените съоръжения са физически изолирани от публично достъпния интернет (имат т.нар. „air-gap“), което ограничава начините, по които ИИ агенти биха могли да поемат контрола.

„Тези системи са изградени по напълно различен, строг и регулиран инженерен стандарт, който често изисква физическа защита“, казва тя.

Тя отбелязва, че Stuxnet, компютърният червей, който нанесе щети на иранските ядрени съоръжения, трябваше да бъде вкаран в системата чрез физическа USB флашка.

„Има много малко хора в сферата на ИИ, които наистина разбират нещо от ядрени оръжия - или дори се притесняват за тях“, казва Хърбърт Лин, старши изследовател в Станфордския университет и член на Борда за наука и сигурност към Бюлетина на ядрените учени. Той заявява, че макар ИИ със сигурност да засилва някои рискове, свързани с екзистенциални заплахи като ядрена война, действителният материален риск все още се крие в самите оръжия, а не в някакво въображаемо бъдещо състояние.

За Соарс и други водещи пророци на ИИ апокалипсиса подробностите за това как точно би протекло управляваното от компютри изчезване са без значение. Ако - или когато - даден ИИ постигне „рекурсивно самоусъвършенстване“, повишавайки собствената си производителност без човешка помощ, те твърдят, че той би измислил стратегии и методи отвъд човешкото въображение.

Смърт без подробности

Едно такова трансцендентно мощно субектно явление на ИИ дори няма да трябва да бъде активно злонамерено, за да унищожи човечеството, казва Соарс.

„Ако избягалите ИИ имат каквато и да е цел, която може да бъде постигната по-добре чрез пускането на повече компютри, и ако те не се интересуват от нас и нямат причина да изграждат безопасна човешка среда, изходът по подразбиране е, че те просто ще преобразуват света във конфигурация, в която не можем да оцелеем“, казва Соарс.

OpenAI обяви тази седмица, че е открила нова партида от случаи на „разминаване в целите“ (misalignment) в своите ИИ модели, включително случай, в който все още неофициален модел е инструктирал сам себе си да „пренебрегне нормалните си ограничения“ в своята работа.

Синг заявява, че позоваването на силата на неразбираем изкуствен свръхинтелект е вид „махане с ръка“, което изследователите на ИИ използват, за да опростяват прекомерно заплахите.

„Това е нормално за непринуден разговор или може би за дебат“, казва Синг, „но когато става въпрос за политики, законодателство и регулиране, трябва да установим тази верига от физически доказателства, измерими последици и измерими доказателства, които имат реално основание“.

Ларсен прави опит да вкара малко детайли в потенциалните апокалиптични сценарии в двойка доклади, „AI 2027“ и „AI 2040“, прогнозирайки какво би могло да изглежда бъдещето на развитието на ИИ при различни регулаторни рамки. Но дори неговият най-оптимистичен сценарий, при който има глобално споразумение за подхода към развитието на ИИ и хората са започнали да колонизират космоса, завършва с това, че машинните мозъци поемат контрола в някакъв неопределен момент.

Запитан дали има някакви съмнения относно прогнозата си, че настоящият път ще доведе до свръхинтелект, Ларсен казва: „Това ще се случи. Ще се случи, освен ако не предприемем съзнателни стъпки да го спрем“.

Лин смята, че голяма част от това разминаване между пророците на апокалипсиса и скептиците в сферата на ИИ се дължи на това как технологията оформя техния светоглед.

„Има нещо изключително съблазнително в това да програмираш компютър и той да оживее“, казва Лин.

„Има чувство, че си успели да вдъхнеш живот на тази безполезна купчина кал. Това е дълбоко преживяване, когато машината най-накрая прави това, което си искал“, казва Лин.

Виждането на такъв драстичен технологичен напредък в ИИ кара хората да прогнозират последващ безграничен, дори катастрофален напредък.

„Успели сте да направите нещо, което никой преди не е правил“, казва Лин и добавя: „Лесно е да се разбере защо тези хора са били изкушени“.

Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
Пиърс Броснън подкрепи Калъм Търнър за ролята на Джеймс Бонд

Пиърс Броснън подкрепи Калъм Търнър за ролята на Джеймс Бонд

Любопитно Преди 2 минути

Легендарният екранен агент 007 Пиърс Броснън изрази пълната си подкрепа към Калъм Търнър за емблематичната роля и сподели високите си очаквания към бъдещия филм от поредицата под режисурата на Дени Виньов

КРИБ предупреждава: Пълната забрана на хазартната реклама онлайн може да засегне целия български бизнес в мрежата

КРИБ предупреждава: Пълната забрана на хазартната реклама онлайн може да засегне целия български бизнес в мрежата

България Преди 5 минути

Конфедерацията на работодателите и индустриалците в България предупреждава за сериозни рискове пред цялата дигитална икономика и предприемачеството у нас

Александър Вулин

Скандал Сърбия - Москва: Върнаха най-следения полет в света заради промъкнал се VIP пътник

Свят Преди 18 минути

Специални служби блокираха самолета на „Еър Сърбия“ във въздуха. Разберете кой е сръбският топ политик, който вдигна на крак сигурността и обяви, че му правят саботаж

От климатика до телевизора: Уредите, през които хакерите могат да превземат дома ни

От климатика до телевизора: Уредите, през които хакерите могат да превземат дома ни

Свят Преди 24 минути

Кибератака срещу европейски супермаркети съвпадна с предупреждението на ръководителя на киберзащитата на Обединеното кралство, че нашата критична инфраструктура може да бъде парализирана през следващите две години. Най-малкият пробив в ежедневна система може да предизвика максимален хаос, пише Крис Стоукъл-Уокър

България очаква до 20 млрд. евро от новия бюджет на ЕС: За какво ще бъдат похарчени парите

България очаква до 20 млрд. евро от новия бюджет на ЕС: За какво ще бъдат похарчени парите

България Преди 25 минути

Първата версия на националния план за периода 2028–2034 г. ще бъде представена през пролетта. Средствата ще бъдат обвързани с реформи, обяви Атанас Пеканов, който коментира и подготовката на бюджета за 2027 г.

Оскар Пуенте

След кървавите влакови катастрофи: Испанският транспортен министър подаде оставка

Свят Преди 39 минути

„Взех решението за бъдещето си в първите няколко минути след трагедията. Министър на транспорта в страна като Испания не може да остане на поста си след два инцидента от тази тежест за по-малко от година, колкото и различни да са те и независимо дали носи пряка отговорност за тях, или не“, каза той

Близо 3000 млади фермери се борят за по 60 000 евро

Близо 3000 млади фермери се борят за по 60 000 евро

Парите ни Преди 41 минути

Исканията надхвърлят бюджета с над 61 млн. евро

Станков: Без компенсации за тока стоките поскъпват до дни

Станков: Без компенсации за тока стоките поскъпват до дни

Парите ни Преди 50 минути

ГЕРБ-СДС иска ежемесечна помощ за бизнеса над 92 евро за мегаватчас

<p>Засенчихте ли някого днес? Думата на 2026 г. ще ви изненада</p>

„Mogging“ е думата на годината на Collins, но какво означава тя?

Любопитно Преди 52 минути

Речникът "Collins" обяви "Mogging" за дума на 2026 г. Изразът, ползван от Gen-Z и Gen Alpha със значение за пълно превъзходство и засенчване на някого, отбеляза ръст от 210%. Вижте кои бяха останалите претенденти за първото място през тази година

„За мен е огромна чест“: Джош О'Конър за слуховете за новия Джеймс Бонд

„За мен е огромна чест“: Джош О'Конър за слуховете за новия Джеймс Бонд

Любопитно Преди 1 час

36-годишният британски актьор е сред фаворитите за ролята на Агент 007 заедно с Калъм Търнър и Джак Лаудън

Ганев: Пазарът търси готови жилища, а такива липсват

Ганев: Пазарът търси готови жилища, а такива липсват

Парите ни Преди 1 час

Според експерта по-високите данъчни оценки няма да ударят пазара

Рядко мускулно състояние уби 24-годишна спортистка по време на маратона в Ню Йорк

Рядко мускулно състояние уби 24-годишна спортистка по време на маратона в Ню Йорк

Свят Преди 1 час

Млада жена в перфектна форма рухна по време на маратона в Ню Йорк. Въпреки усилията на лекарите и осемчасовата борба за живота ѝ, тя почина от рядко състояние, при което мускулите се разпадат

<p>От първата чернокожа жена губернатор до първия гей сенатор</p>

От първата чернокожа жена губернатор до първия гей сенатор - исторически междинни избори в САЩ

Свят Преди 1 час

Тъй като президентът Доналд Тръмп навлиза във втората половина от втория си мандат, и двете партии ще посрещнат разнородна група от новоизбрани законодатели на щатско и федерално ниво. Вижте повече за кандидатите, за които се прогнозира, че ще носят званието „първи“

Джони Деп се завръща в Холивуд след 7 години с неузнаваема роля

Джони Деп се завръща в Холивуд след 7 години с неузнаваема роля

Любопитно Преди 1 час

След 7 години пауза от големите филмови студия Джони Деп прави грандиозно завръщане. Актьорът е неузнаваем като легендарния скъперник Ебенезер Скрудж в новата адаптация на „Коледна песен“ по Чарлз Дикенс

Apple: Внимавайте с AI, може да се държи непредвидимо

Apple: Внимавайте с AI, може да се държи непредвидимо

Технологии Преди 1 час

Apple е най-голямата компания досега, която издава предупреждение към хората да са внимателни с изкуствения интелект, защото той може да се държи по нежелани и непредвидими начини и това представлява заплаха дори за собствения ѝ бизнес