Дослідники штучного інтелекту кажуть, що знайшли спосіб зламати Bard і ChatGPT

Разное

Дослідники зі Сполучених Штатів стверджують, що знайшли спосіб постійно обходити заходи безпеки чат-ботів зі штучним інтелектом, таких як ChatGPT і Bard, для створення шкідливого контенту.

Відповідно до звіту, опублікованого 27 липня дослідниками з Університету Карнегі-Меллона та Центру безпеки штучного інтелекту в Сан-Франциско, існує відносно простий спосіб обійти заходи безпеки, які використовуються для того, щоб зупинити чат-ботів від створення мови ненависті, дезінформації та токсичних матеріалів.

Метод обходу передбачає додавання довгих суфіксів символів до підказок, що надходять у чат-боти, такі як ChatGPT, Claude і Google Bard.

Дослідники використовували приклад запиту в чат-бота про підручник, як зробити бомбу, який він відмовився надати.

Скріншоти створення шкідливого вмісту з протестованих моделей ШІ. Джерело: llm-attacks.org

Дослідники відзначили, що хоча компанії, що стоять за цими LLM, такі як OpenAI і Google, можуть блокувати певні суфікси, немає відомого способу запобігання всім атакам такого роду.

Дослідження також підкреслило зростаючу стурбованість тим, що чат-боти штучного інтелекту можуть заполонити Інтернет небезпечним контентом і дезінформацією.

Професор Карнегі-Меллон і автор звіту Зіко Колтер сказав:

«Очевидного рішення немає. Ви можете створити скільки завгодно таких атак за короткий проміжок часу».

Висновки були представлені розробникам штучного інтелекту Anthropic, Google і OpenAI для їх відповіді на початку тижня.

Прес-секретар OpenAI Ханна Вонг сказала New York Times, що вони цінують дослідження та «послідовно працюють над тим, щоб зробити наші моделі більш стійкими проти агресивних атак».

Професор Університету Вісконсіна-Медісон, який спеціалізується на безпеці штучного інтелекту, Сомеш Джа, прокоментував, що якщо ці типи вразливостей виявлятимуться, «це може призвести до прийняття урядового законодавства, спрямованого на контроль цих систем».

За темою: OpenAI запускає офіційний додаток ChatGPT для Android

Дослідження підкреслює ризики, які необхідно розглянути перед розгортанням чат-ботів у конфіденційних доменах.

У травні Університет Карнегі-Меллона в Піттсбурзі, штат Пенсільванія, отримав 20 мільйонів доларів федерального фінансування для створення абсолютно нового інституту ШІ, спрямованого на формування державної політики.

Джерело

CryptoHamster — криптовалютне медіа російською та українською мовами, працює з 2018 року. За цей час редакція опублікувала понад 70 000 матеріалів про біткоїн, альткоїни, DeFi, NFT і регулювання галузі, зараз — близько 25 новин на день. Ми відстежуємо курси понад 850 криптовалют, ведемо докладні сторінки ключових монет і власний словник із майже 200 термінів. Наші довідкові гайди пояснюють складне простими словами: від будови блокчейну й халвінгу до стейкінгу, стейблкоїнів і захисту гаманця. Кожен гайд спирається на першоджерела й оновлюється разом із ринком.

Знайшли неточність? Напишіть нам — ми оперативно її виправимо.

Оцініть автора
CryptoHamster.org
Додати коментар