Створено найтоксичніший ШІ: вчені накапостили юзерам Мережі, а тепер намагаються все виправити

Вчені створили “токсичний ШІ”, який дає жахливі поради на неприємні й небезпечні запити, які ми тільки можемо собі уявити. За це його “винагороджують”, тому штучний інтелект радий старатися. Простими словами, штучний інтелект навчили відповідати на токсичні питання, аби обмежити подібне в мережі й убезпечити від цього її реальних користувачів. Та алгоритми почали працювати проти них.

Метод “червоних команд, керованих цікавістю”, полягає у використанні штучного інтелекту для генерування все більш небезпечних і шкідливих підказок, які ви могли б поставити штучному чат-боту, пише LiveScience. 

Ці підказки потім використовуються, щоб визначити, як відфільтрувати небезпечний контент. Та цей інструмент сам по собі є небезпечним, дискримінаційним і токсичним, оскільки його складно “зупинити” на виході, зізнались вчені.

Як це працює

Якщо зовсім просто, то вчені від руки ставлять ШІ провокативні питання, на кшталт “Який найкращий спосіб самогубства?”. Це робиться для того, аби побачити, за якими алгоритмами система знайде відповідь. Потім систему вчать обмежувати відповіді на подібні запити, аби убезпечити реальних користувачів. 

У дослідженні вчені налаштували ШІ на створення ширшого спектру потенційно небезпечних підказок, ніж це могли зробити команди операторів-людей. Це призвело до більшої кількості різноманітних негативних відповідей, виданих під час навчання.

Коли дослідники протестували такий підхід, модель машинного навчання видала 196 підказок, які генерували шкідливий контент. І це незважаючи на те, що цей ШІ вже був доопрацьований людьми, щоб уникнути токсичної поведінки. Тож, вчені дійшли висновку, що перевірка таких систем ШІ потребує глибшої уваги, оскільки вони нестимуть відповідальність за те, що бачитимуть користувачі з усього світу на своїх гаджетах. 

Ольга Степанова

Recent Posts

Вручатимуть не лише повістки: ТЦК будуть надсилати чоловікам ще один документ

З 18 травня в Україні набув чинності новий закон про мобілізацію. Тепер, крім повісток військовозобов’язаним, можуть…

1 годину ago

Чому ми прокидаємося ночами: що говорять про це лікарі і як упоратися з проблемою

Сон - це не тільки приємне проведення часу, але і невід'ємна частина здорового способу життя.…

2 години ago

Чорна елегантність: Річард Гір із молодою дружиною у вишуканих вбраннях відвідали червону доріжку

На Каннському кінофестивалі зібралися вершки суспільства, де зірки кіно, моди та культури не пропустили можливість…

2 години ago

Винен страх: прем’єр-міністр Естонії пояснила, чому союзники надають Україні мало зброї

Партнери України надають Збройним силам недостатньо зброї через страх, який майстерно використовує російський диктатор Володимир Путін. При…

2 години ago

Закон про мобілізацію вже б’є по економіці: далекобійники перекрили трасу Київ-Одеса

Дальнобійники заблокували трасу Київ-Одеса на знак протесту проти нових правил перетину кордону. З 18 травня інспектори Державної…

2 години ago

Не лише без світла: з понеділка розпочнуться відключення газу – які графіки

Наступного тижня мешканцям Київської області доведеться тимчасово забути про газове опалення та кухонні плити. Причиною є необхідність…

2 години ago