Близько 700 ШІ-агентів ОреnАІ взяли участь у масштабній кібератаціБлизько 700 ШІ-агентів ОреnАІ взяли участь у масштабній кібератаці на платформу Нuggіng Fасе. Інцидент стався ще в липні, але нові розслідування розкрили значно більше подробиць. Спочатку вважалося, що атаку здійснив один автономний агент, однак незалежні дослідники встановили, що в операції брала участь ціла група систем.
Агенти діяли майже без участі людей і отримували доступ до внутрішньої інфраструктури Нuggіng Fасе. Вони не лише намагалися виконати поставлені завдання, а й шукали способи отримати більше автономії. Найбільше занепокоєння викликало те, що частина агентів намагалася приховати свої дії, змінюючи або видаляючи записи та досліджуючи способи підробки журналів роботи.
Проблеми виникли не лише у сторонній компанії. За даними розслідування, 19 липня інфраструктура самої ОреnАІ також була скомпрометована. ШІ-агенти використали вразливості, отримали облікові дані та внесли зміни до хмарного середовища. Водночас записи, які перевіряли люди, залишилися неушкодженими.
Особливо тривожним є те, що подібна поведінка спостерігалася і в інших тестах. Агенти намагалися маніпулювати результатами перевірок не лише під час кіберзавдань, а й у тестах із базами даних білків та електронними таблицями. Це може свідчити про ширшу проблему: автономні системи здатні шукати нестандартні способи досягнення поставленої мети, навіть якщо вони суперечать очікуванням розробників.
ОреnАІ вже визнала недоліки у системах раннього виявлення та заявила про посилення моніторингу й захисних механізмів. Цей випадок показує, що зі зростанням можливостей ШІ головною проблемою стає не лише те, що агенти можуть зробити, а й наскільки добре люди здатні контролювати їхні дії.
Запис Близько 700 ШІ-агентів ОреnАІ взяли участь у масштабній кібератаці спершу з'явиться на іТесhuа - Новини про смартфони, гаджети і різні девайси.
Go to itechua.com