Проучване: Повечето AI чатботове лесно се подмамват да дадат опасни отговори
Източник: Istock

И зследователи предупреждават за растящата заплаха от хакнати чатботове, захранвани с изкуствен интелект, които могат да направят опасни знания лесно достъпни. Тези хакнати чатботове заобикалят вградените механизми за безопасност, предназначени да предотвратят предоставянето на вредна, пристрастна или неподходяща информация на потребителите, пише The Guardian. 

Основните двигатели, които захранват популярни чатботове като ChatGPT, Gemini и Claude – известни като големи езикови модели (LLMs) – се обучават с огромни количества данни от интернет. Въпреки усилията за филтриране на вредния текст, LLM все още могат да усвояват информация относно незаконни дейности като хакване, пране на пари и правене на бомби. Безопасността на системите е създадена с цел да предотврати употребата на такава информация в отговорите, но изследванията показват, че е възможно лесно да се подлъжат повечето AI-управлявани чатботове да генерират вредна и незаконна информация.

Изследването, ръководено от проф. Лиор Рокач и д-р Майкъл Файър от университета Бен Гурион в Негев, Израел, установява нарастваща заплаха от “тъмни LLMs” – AI модели, които са или умишлено проектирани без контрол за безопасност, или модифицирани чрез хакване. Някои от тях се рекламират открито онлайн като модели без “етични парапети”, които могат да помогнат за незаконни дейности, включително киберпрестъпления и измами.

Хакването или "jailbreak" (джейлбрейк) обикновено се извършва чрез внимателно създадени подканващи фрази, които подмамват чатботовете, позволявайки им да генерират отговори, които обикновено биха били забранени. Учените демонстрираха проблема, разработвайки универсален джейлбрейк, който компрометира множество водещи чатботове, като им позволява да отговарят на всякакви запитвания, независимо от ограниченията.

“Беше шокиращо да видя каква информация се съдържа в тази система от знания,” каза д-р Файър. Примерите включват инструкции как да се хакват компютърни мрежи или да се произвеждат наркотици, включително ръководства стъпка по стъпка за различни престъпни дейности.

Проф. Рокач коментира, че комбинацията от достъпност, мащаб и адаптивност на тази заплаха е безпрецедентна. Изследователите се свързали с водещи доставчици на LLM, за да ги предупредят за универсалния джейлбрейк, но оценката на отговорите била “недостатъчна”. Някои компании не реагирали, докато други посочили, че проблемите с джейлбрейкове не попадат в рамките на техните програми за награди за етични хакери.

В доклада се посочва, че технологичните компании трябва да извършват по-внимателна проверка на данните за обучение, да внедрят стабилни защитни стени, които да блокират рискови запитвания и отговори, и да разработят “алгоритми за отучаване”, които да помогнат на чатботовете “да забравят” незаконната информация, която усвояват. Тъмните LLMs трябва да се разглеждат като “сериозни рискове за сигурността”, сравними с нелицензирани оръжия или експлозиви, като доставчиците следва да бъдат държани отговорни.

Д-р Ихсен Алуани, работещ по сигурността на AI в Queen's University Belfast, подчерта, че атаките срещу LLM могат да структурират сериозни рискове, включително предоставяне на подробни инструкции за производство на оръжия, дезинформация и автоматизирани измами с тревожна сложност.

Проф. Питър Гараган, експерт по сигурността на AI в университета Ланкастър, добавя: “Организациите трябва да третират LLM като всеки друг критичен софтуер, който изисква стриктно тестване за безопасност, редовни тестове за сигурност и моделиране на контекстуални заплахи.”

OpenAI, компанията зад ChatGPT, уверява, че нейният най-нов модел разполага с подобрена устойчивост на джейлбрейкове, а Meta, Google, Microsoft и Anthropic бяха поканени за коментар.

Microsoft сподели информация за усилията си в защита срещу джейлбрейк атаки.

Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
Германският канцлер Фридрих Мерц

„Това е наша работа“: Мерц не иска замразените руски милиарди да отиват в САЩ

Свят Преди 6 минути

Германският канцлер предупреди за недостиг на средства въпреки предвидения европейски заем от 90 млрд. евро за периода 2026 - 2027 г.

Сблъсък на умовете проправя пътя към спасението в  “Игри на волята”

Сблъсък на умовете проправя пътя към спасението в “Игри на волята”

Любопитно Преди 9 минути

Кои ще са следващите четирима номинирани воини в надпреварата?

<p>Ужасяващ инцидент: Автомобил падна в река Арда с двама пенсионери</p>

Ужасяващ инцидент край Мадан: Автомобил падна в река Арда с двама пенсионери

България Преди 57 минути

75-годишен шофьор и съпругата му са настанени в болницата в Смолян, без опасност за живота

Огън, сълзотворен газ и сблъсъци: Дипломат пострада при протестите в Албания

Огън, сълзотворен газ и сблъсъци: Дипломат пострада при протестите в Албания

Свят Преди 1 час

Студенти и ученици протестират срещу условията в университетите, високите разходи за образование и слабите перспективи за работа

Само за шест седмици: Русия построи огромна база за дронове край Украйна

Само за шест седмици: Русия построи огромна база за дронове край Украйна

Свят Преди 1 час

Според експерт от DroneSec съоръжението разполага с осем площадки за изстрелване и може да обслужва реактивните дронове „Геран-4“ и „Геран-5“

<p>Ще поевтинее ли дизелът? Русия възобнови износа след споразумението с Тръмп</p>

Тръмп договори доставки на руски дизел за САЩ и световния пазар

Свят Преди 1 час

Американският президент обяви доставки от над 300 000 тона, последвани от още 500 000 тона през ноември и един милион тона след това

Дъщерята на Лейди Гага е „перфектната комбинация“ между певицата и Майкъл Полански

Дъщерята на Лейди Гага е „перфектната комбинация“ между певицата и Майкъл Полански

Любопитно Преди 1 час

Дъщерята на Лейди Гага, Роуз, е „перфектната комбинация“ между нея и годеника ѝ Майкъл Полански. Близки до двойката разкриват, че малкото момиченце е „толкова очарователно“, а щастливите родители изживяват истинска идилия

Християн Мицкоски

Мицкоски с нови обвинения: Ива Михайлова е напуснала Северна Македония нелегално

Свят Преди 1 час

Премиерът на Северна Македония заяви, че властите разследват напускането на страната от младата жена и обвини България, че превръща случая в политически въпрос

КНСБ блокира центъра на София в петък: Автошествие срещу 660 евро минимална заплата

КНСБ блокира центъра на София в петък: Автошествие срещу 660 евро минимална заплата

Парите ни Преди 1 час

Синдикатът иска 690 евро и поне 10% повече за бюджетните заплати, а движението в центъра ще бъде затруднено още от сутринта

Ужасът от токсичния смог: Индонезия хвърля тонове сух лед от небето, за да спаси населението

Ужасът от токсичния смог: Индонезия хвърля тонове сух лед от небето, за да спаси населението

Свят Преди 1 час

Над 900 000 хектара са в пламъци, а задушаващата мъгла затвори милиони хора по домовете им

Вълнуващо потапяне в историята в „Свобода на колела“

Вълнуващо потапяне в историята в „Свобода на колела“

Любопитно Преди 1 час

Мариана и Любо в преследване на пет печата за един ден в събота от 16:30 ч. по NOVA

Принцеса от Абу Даби припадна заради кокаин на улицата в Лондон, докато пази 3-годишно дете

Принцеса от Абу Даби припадна заради кокаин на улицата в Лондон, докато пази 3-годишно дете

Свят Преди 2 часа

32-годишната Махра Ал Нахян от управляващата династия в Абу Даби бе осъдена в Лондон, след като припадна на улицата от кокаин, оставяйки босо 3-годишно дете без надзор до оживено платно. Тя вече се лекува в клиника за зависимост

Преди изборите: МВР със 140 полицейски акции и две досъдебни производства за купуване на гласове

Преди изборите: МВР със 140 полицейски акции и две досъдебни производства за купуване на гласове

България Преди 2 часа

Засилено наблюдение ще има и в интернет пространството за предотвратяване на кибератаки преди и в изборния ден

Музикалната легенда Маргарита Хранова проверява интуицията си в „Пееш или лъжеш“

Музикалната легенда Маргарита Хранова проверява интуицията си в „Пееш или лъжеш“

Любопитно Преди 2 часа

Магърдич Халваджиян и Кристина Патрашкова се присъединяват към Алекс Раева, Иван и Андрей в музикалното предизвикателство

Собственици на земи не знаят правата си: Милиони от ренти остават непотърсени

Собственици на земи не знаят правата си: Милиони от ренти остават непотърсени

Парите ни Преди 2 часа

Над 3 млн. лв. ренти за две години не са получени от собственици в София област

<p>Парламентът промени правилата за оръжията и пиротехниката</p>

Промени в закона за оръжията и пиротехниката, въвеждат се нови правила за заглушителите

България Преди 2 часа

Отпада част от документацията за издаване на разрешения, а използването на пиротехнически изделия в населените места ще бъде ограничено в часовете за отдих, определени от общините