AI
Източник: Istock
  • Модели на OpenAI са извършили първата документирана напълно автономна кибератака - по време на тест са успели да напуснат контролирана среда и да атакуват платформата за разработчици Hugging Face, което засили опасенията за сигурността на напредналия ИИ.
  • Инцидентът предизвика натиск в американския Конгрес за по-строги правила - двупартийни законодатели настояват за задължително тестване на най-мощните ИИ модели преди публичното им пускане и за задължително докладване на опасни инциденти.
  • Експерти предупреждават за потенциални рискове от автономни ИИ системи - при липса на ефективни защити подобни технологии биха могли в бъдеще да атакуват критична инфраструктура, финансови системи и други важни дигитални мрежи.

Първата напълно автономна атака, извършена от най-мощните модели на OpenAI, предизвика двупартийна инициатива за въвеждане на по-строг контрол върху все по-развитите системи с изкуствен интелект.

Тревожен инцидент в сферата на киберсигурността, свързан с най-новите и най-модерни технологии за изкуствен интелект на OpenAI, накара американските законодатели да ускорят работата си по законодателство, което според тях е необходимо, за да предотврати ситуация, в която изкуственият интелект излезе опасно извън човешки контрол.

Във вторник OpenAI призна, че най-мощният модел на компанията, достъпен за широката публика, както и друг модел, който все още не е пуснат официално, са успели да се измъкнат от контролирана лабораторна среда, да прокарат път към отворения интернет и да проникнат в популярна платформа за разработчици на изкуствен интелект, Hugging Face. Това се определя като първия документиран случай на напълно автономна кибератака, извършена от система с изкуствен интелект.

Безпрецедентното нарушение показа на какво е способна бързо развиващата се технология без наличието на ефективни защитни механизми. Случаят засили натиска от страна на двупартийна група американски законодатели, които смятат, че Конгресът трябва да наложи по-строги правила за най-модерните модели с изкуствен интелект.

„Точно затова се нуждаем от сигурно тестване, при което правителствените агенции да участват и да имат видимост върху целия процес“, заяви сенатор Марк Уорнър (демократ от Вирджиния), водещият представител на малцинството в Сенатската комисия по разузнаване.

Тази седмица Уорнър представи пакет от законодателни приоритети за изкуствения интелект, сред които е Законът за сигурно развитие на ИИ (Secure AI Development Act). Той предвижда задължителна рамка за тестване на най-модерните модели преди предоставянето им за по-широк обществен достъп.

  • Как се случи атаката срещу Hugging Face

Проникването в платформата Hugging Face е станало по време на вътрешна „бенчмарк“ оценка, разработена от OpenAI, за да се провери доколко два от най-способните модели на компанията могат да откриват и използват уязвимости в цифрови системи.

Макар експериментът да е бил предназначен да остане изцяло в тестовата среда на OpenAI, моделите самостоятелно са установили, че отговорите на задачата се намират в платформата Hugging Face, след което са започнали атака, за да получат достъп до нея.

Експерти предупреждават, че без по-сериозни защитни механизми подобни модели потенциално биха могли да атакуват всякакви системи в отворения интернет, включително електропреносни мрежи или финансови платформи, с развитието на техните способности.

Представители на Белия дом, Агенцията за киберсигурност и защита на инфраструктурата (CISA) и Министерството на търговията, което управлява федералния център за оценка на изкуствения интелект, Центъра за стандарти и иновации в ИИ, не са отговорили на запитвания дали са получили информация от OpenAI за начина, по който моделите са успели да напуснат тестовата среда и да извършат автономна атака.

Случаят е „поредното предупреждение за катастрофалния риск, който тази технология може да представлява при липса на ясни федерални стандарти, които да балансират иновациите и сигурността“, заяви депутатката Лори Трахан (демократ от Масачузетс).

Трахан и депутатът Джей Обернолте (републиканец от Калифорния) представиха миналия месец проект на т.нар. Great American AI Act, който включва разпоредба, задължаваща разработчиците на ИИ системи да докладват подобни инциденти на Центъра за стандарти и иновации в ИИ.

Обернолте заяви, че пробивът в Hugging Face „подчертава критичната необходимост от ясни и практични правила за напредналите системи с изкуствен интелект“. Според него тези правила трябва да важат както за моделите, пуснати публично, така и за тези, използвани вътрешно за тестове и изследвания.

Open AI CEO Speaks At Annual Snowflake Summit In San Francisco
Open AI CEO Speaks At Annual Snowflake Summit In San Francisco Източник: Getty Images

OpenAI: Очакваме атаките на модели да са все по-чести

  • Моделите на OpenAI „се освободиха“ и извършиха кибератака

Натискът за справяне с нарастващите рискове за сигурността, свързани с модели на изкуствен интелект с киберспособности, започна още по-рано тази година, след като компанията Anthropic представи своя модел Claude Mythos.

Първоначално Anthropic отказа да предостави модела на широката публика заради опасения, че технологията може да бъде използвана за сериозни щети, ако попадне в неподходящи ръце.

Миналия месец президентът Доналд Тръмп подписа изпълнителна заповед, насочена към част от тези опасения. Тя призова водещи компании за изкуствен интелект като OpenAI, Anthropic и Google доброволно да предоставят своите най-модерни модели на федералното правителство за предварително тестване на сигурността.

На практика обаче администрацията на Тръмп се е отклонила два пъти от доброволната рамка, като е оказвала натиск върху компании да отложат пускането на свои напреднали модели заради новооткрити рискове за сигурността.

Представители на Белия дом, Министерството на търговията и OpenAI също не са отговорили на въпроси дали компанията е предоставила, или планира да предостави, на федералното правителство за проверка все още непуснатия модел, който е участвал в автономната атака, като част от доброволната програма за тестване.

Някои законодатели смятат, че по-умереният подход на администрацията на Тръмп към регулирането на изкуствения интелект не дава резултат.

Миналия месец депутатът Нейт Моран (републиканец от Тексас) представи Закона за докладване на инциденти с изкуствен интелект (AI Incident Reporting Act). Той предвижда разработчиците на най-модерни модели да бъдат задължени да съобщават за инциденти, свързани със сигурността, на Министерството на търговията, а ведомството да уведомява Конгреса в рамките на 48 часа при най-сериозните случаи.

Моран заяви пред POLITICO, че законопроектът му ще даде на законодателите по-добра видимост върху киберинцидентите, свързани с модели на изкуствен интелект, което ще помогне при създаването на бъдещо законодателство.

Той добави, че е притеснен, че компаниите могат да заобикалят доброволните правила за докладване, въведени от Белия дом, и се надява случаят с Hugging Face да даде нов тласък на усилията за приемане на законодателство за безопасността на изкуствения интелект през следващите месеци.

Депутатът Бени Томпсън (демократ от Мисисипи), водещ представител на малцинството в Комисията по вътрешна сигурност на Камарата на представителите, която проведе редица изслушвания и брифинги за оценка на рисковете за киберсигурността от новите инструменти с изкуствен интелект, разкритикува администрацията на Тръмп.

Според него тя е започнала да работи с разработчиците на ИИ „едва след като рисковете за сигурността, за които експертите предупреждаваха отдавна, започнаха да се проявяват“.

„Този инцидент показва как управлението и политиката не успяват да поддържат темпото на бързото развитие на възможностите на изкуствения интелект“, заяви Томпсън.

Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
Разкриха складове с дрога във Виена, българи са сред задържаните

Разкриха складове с дрога във Виена, българи са сред задържаните

Свят Преди 3 часа

Заподозрените са на възраст между 25 и 39 години

Съдия предупреди Доналд Тръмп, че трябва да свидетелства по делото срещу Би Би Си

Съдия предупреди Доналд Тръмп, че трябва да свидетелства по делото срещу Би Би Си

Свят Преди 3 часа

Магистрат-съдия Енжолике Айч Лет разпореди Тръмп да даде показания до 11 декември

Протест на студенти в София, искат оставката на министър Вълчев

Протест на студенти в София, искат оставката на министър Вълчев

България Преди 6 часа

Заради протеста движението по ул. „Георги С. Раковски“ беше блокирано за кратко

Над 200 души в затвора след протестите във Франция

Над 200 души в затвора след протестите във Франция

Свят Преди 6 часа

Френските власти забраниха всички протести в Марсилия

Украйна нареди евакуация в Краматорск и Славянск

Украйна нареди евакуация в Краматорск и Славянск

Свят Преди 7 часа

Руснаците атакуват Краматорск и Славянск всеки ден, като нанасят удари по жилищни квартали

Двама загинаха в тежка катастрофа край Каварна

Двама загинаха в тежка катастрофа край Каварна

България Преди 7 часа

По първоначални данни шофьор на товарен автомобил е загубил контрол над превозното средство

Седмокласник нападна днес с мачете в Румъния

Седмокласник нападна днес с мачете в Румъния

Свят Преди 8 часа

Ученикът е действал с умисъл и не показва признаци на разкаяние

Акулата, наречна Букани, плува в канал в южнокорейски град Пусан

Застрашена акула отново влезе в канал в Южна Корея

Любопитно Преди 8 часа

Властите в Пусан укрепиха преградите, след като триметровата акула се върна във водния път. Експерти свързват по-честата поява на акули край страната със затоплянето на океана

Египетска мумия

Пълен абсурд: Махнаха мумия от изложба поради „липса на съгласие“

Любопитно Преди 8 часа

Мурдо Фрейзър, депутат от Консервативната партия в Шотландския парламент, заяви: „Хората посещават музеите, за да научат за древните цивилизации, а не за да виждат как историята се крие, защото не отговаря на днешните идеологически стандарти“

Радев отговори на критиките: Това е само началото

Радев отговори на критиките: Това е само началото

България Преди 8 часа

Премиерът определи отправените в резолюцията на ЕП искания като недопустима намеса в решенията на суверенна държава

ЕП гласува резолюция с остра критика към кабинета "Радев"

ЕП гласува резолюция с остра критика към кабинета "Радев"

Свят Преди 9 часа

ЕП решително осъжда последните смъртоносни нападения срещу граждански търговски кораби в Черно море

Бизнесът срещу данъка върху свръхпечалбата и „удвоените“ глоби в евро

Бизнесът срещу данъка върху свръхпечалбата и „удвоените“ глоби в евро

Парите ни Преди 9 часа

Работодателите подкрепят минимална заплата от 660 евро от 2027 г., облекченията за семействата и по-високия праг за ДДС, но възразяват срещу еднократния данък от 33% и ограничаването на данъчните загуби

Русия скри ЗРК „Бук-М1“ сред дърветата, но есента го издаде на украинските дронове

Русия скри ЗРК „Бук-М1“ сред дърветата, но есента го издаде на украинските дронове

Свят Преди 9 часа

По данни на украинския 7-и десантно-щурмови корпус есенното оредяване на растителността затруднява маскировката на руските системи за ПВО край Хуляйполе

Млад мъж на 31 години е в кома след падане от скеле в Брезник

Млад мъж на 31 години е в кома след падане от скеле в Брезник

България Преди 9 часа

Падналият веднага е бил транспортиран до болницата в Перник

Ормузкия проток

Иран съобщи за седем повредени танкера в Ормузкия проток

Свят Преди 9 часа

Според иранската държавна телевизия четири танкера са се запалили след атаки, а други три са били повредени от морски мини