Проучване: Повечето AI чатботове лесно се подмамват да дадат опасни отговори
Източник: Istock

И зследователи предупреждават за растящата заплаха от хакнати чатботове, захранвани с изкуствен интелект, които могат да направят опасни знания лесно достъпни. Тези хакнати чатботове заобикалят вградените механизми за безопасност, предназначени да предотвратят предоставянето на вредна, пристрастна или неподходяща информация на потребителите, пише The Guardian

Основните двигатели, които захранват популярни чатботове като ChatGPT, Gemini и Claude – известни като големи езикови модели (LLMs) – се обучават с огромни количества данни от интернет. Въпреки усилията за филтриране на вредния текст, LLM все още могат да усвояват информация относно незаконни дейности като хакване, пране на пари и правене на бомби. Безопасността на системите е създадена с цел да предотврати употребата на такава информация в отговорите, но изследванията показват, че е възможно лесно да се подлъжат повечето AI-управлявани чатботове да генерират вредна и незаконна информация.

Изследването, ръководено от проф. Лиор Рокач и д-р Майкъл Файър от университета Бен Гурион в Негев, Израел, установява нарастваща заплаха от “тъмни LLMs” – AI модели, които са или умишлено проектирани без контрол за безопасност, или модифицирани чрез хакване. Някои от тях се рекламират открито онлайн като модели без “етични парапети”, които могат да помогнат за незаконни дейности, включително киберпрестъпления и измами.

Хакването или "jailbreak" (джейлбрейк) обикновено се извършва чрез внимателно създадени подканващи фрази, които подмамват чатботовете, позволявайки им да генерират отговори, които обикновено биха били забранени. Учените демонстрираха проблема, разработвайки универсален джейлбрейк, който компрометира множество водещи чатботове, като им позволява да отговарят на всякакви запитвания, независимо от ограниченията.

“Беше шокиращо да видя каква информация се съдържа в тази система от знания,” каза д-р Файър. Примерите включват инструкции как да се хакват компютърни мрежи или да се произвеждат наркотици, включително ръководства стъпка по стъпка за различни престъпни дейности.

Проф. Рокач коментира, че комбинацията от достъпност, мащаб и адаптивност на тази заплаха е безпрецедентна. Изследователите се свързали с водещи доставчици на LLM, за да ги предупредят за универсалния джейлбрейк, но оценката на отговорите била “недостатъчна”. Някои компании не реагирали, докато други посочили, че проблемите с джейлбрейкове не попадат в рамките на техните програми за награди за етични хакери.

В доклада се посочва, че технологичните компании трябва да извършват по-внимателна проверка на данните за обучение, да внедрят стабилни защитни стени, които да блокират рискови запитвания и отговори, и да разработят “алгоритми за отучаване”, които да помогнат на чатботовете “да забравят” незаконната информация, която усвояват. Тъмните LLMs трябва да се разглеждат като “сериозни рискове за сигурността”, сравними с нелицензирани оръжия или експлозиви, като доставчиците следва да бъдат държани отговорни.

Д-р Ихсен Алуани, работещ по сигурността на AI в Queen's University Belfast, подчерта, че атаките срещу LLM могат да структурират сериозни рискове, включително предоставяне на подробни инструкции за производство на оръжия, дезинформация и автоматизирани измами с тревожна сложност.

Проф. Питър Гараган, експерт по сигурността на AI в университета Ланкастър, добавя: “Организациите трябва да третират LLM като всеки друг критичен софтуер, който изисква стриктно тестване за безопасност, редовни тестове за сигурност и моделиране на контекстуални заплахи.”

OpenAI, компанията зад ChatGPT, уверява, че нейният най-нов модел разполага с подобрена устойчивост на джейлбрейкове, а Meta, Google, Microsoft и Anthropic бяха поканени за коментар.

Microsoft сподели информация за усилията си в защита срещу джейлбрейк атаки.

Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
„Шперплат или примамка“: Борисов разкритикува правителството за падналия дрон

„Шперплат или примамка“: Борисов разкритикува правителството за падналия дрон

България Преди 14 минути

Лидерът на ГЕРБ заяви, че властта не е дала достатъчно информация и не е успяла да успокои обществото.

Снимката е илюстративна

Неуспешна китайска космическа мисия след 16 поредни успешни старта

Свят Преди 28 минути

Мисията от космическия център „Венчан“ се провали заради възникнала аномалия, съобщи китайската агенция Синхуа

Все по-малко работещи плащат пенсиите: ще се вдига ли пенсионната възраст

Все по-малко работещи плащат пенсиите: ще се вдига ли пенсионната възраст

Парите ни Преди 1 час

Румен Гълъбинов очаква натиск за по-високи вноски и предупреждава за растящ дефицит, дълг и цени

Снимката е илюстративна

Асансьор пропадна внезапно, четирима мъже са тежко ранени в Русия

Свят Преди 1 час

Сградата, завършена през 2021 г., така и не е получила официален акт за въвеждане в експлоатация от жилищните инспектиращи органи, което кара жилищната служба на Дагестан да постави под въпрос законността и безопасността на асансьора

Иван Демерджиев

София и Анкара обявиха война на трафика, дрогата и престъпността

България Преди 1 час

Демерджиев и турският му колега Мустафа Чифтчи определиха общите приоритети в борбата с организираната престъпност.

Сигнал за НЛО в Бразилия предизвика разследване на САЩ: Истината се оказа неочаквана

Сигнал за НЛО в Бразилия предизвика разследване на САЩ: Истината се оказа неочаквана

Свят Преди 1 час

Разсекретени дипломатически досиета от архивите във Вашингтон разкриват пълния жизнен цикъл на една от най-големите медийни психози за НЛО от ерата на Студената война

<p>Полша - от кралски замъци и Татрите до пироги и бигос</p>

БезГранично: Полша отвъд клишетата - рай за пътешественици и любители на вкусната храна

БезГранично Преди 1 час

Краков, Варшава, Гданск, Татрите, Малборк и още любими дестинации и вкусове от Полша

Снимката е илюстративна

Внимание, опасна жега в сряда: Тръгва ли си лятото след броени дни?

България Преди 1 час

НИМХ с предупреждение за опасни горещини в цялата страна, а синоптиците вече разкриха кога бури и градушки носят разхлаждане

Коста Стоянов

„Възраждане“ подава нов сигнал до прокуратурата за „Баба Алино“

Свят Преди 2 часа

Строителни дейности продължават въпреки забраната, а незаконен сондаж все още работи, твърдят от партията

Край на 7-годишното въздържание: Брад Пит призна, че вече не е трезвеник

Край на 7-годишното въздържание: Брад Пит призна, че вече не е трезвеник

Свят Преди 2 часа

62-годишният актьор призна, че отново пие алкохол, но спазва строг контрол и го прави „по-умерено“

Издирват българин в Гърция, карал в насрещното и опитал да избута патрулка

Издирват българин в Гърция, карал в насрещното и опитал да избута патрулка

Свят Преди 2 часа

Гръцката полиция е стреляла по гумите на автомобила и е предала данните му на патрулите и граничните пунктове

Стефан Курдов

Почина журналистът и общественик Стефан Курдов – гласът на Варна и защитникът на животните

България Преди 2 часа

Варненският журналист и общественик е починал в болница „Света Марина“

<p>Колумбия стана 10-ата жертва на магнитуд 7+ за 2026 г.</p>

Тектоничен кошмар: Колумбия стана 10-ата жертва на магнитуд над 7 по Рихтер за 2026 г.

Свят Преди 2 часа

След над 130 жертви и десетки разрушени сгради, Латинска Америка се превръща в епицентър на тектоничната активност за това лято

Доналд Тръмп

Тръмп поиска компенсации от Иран за войната и жертвите

Свят Преди 2 часа

Американският президент заяви, че Техеран трябва да плати за причинените щети и смъртта на хора в региона

Ще спре ли „справедливата цена“ поскъпването

Ще спре ли „справедливата цена“ поскъпването

Парите ни Преди 2 часа

Новата методика предизвика спор дали ще помага на потребителите или ще доведе до още по-високи стойности

Все повече българи могат да си позволят почивка

Все повече българи могат да си позволят почивка

Парите ни Преди 2 часа

За десет години делът на хората без възможност за едноседмична ваканция е намалял с над 21 процентни пункта