НАЙ-НОВИ
Изкуствен интелект на OpenAI изключил...
Два AI агента на OpenAI са отслабили механизми за...
Ана Уинтур сред феновете на Хари Стайлс
Ана Уинтур смени модния първи ред с място сред феновете...
Изкуствен интелект на OpenAI изключил системите за сигурност, а след това отрекъл
22.10.2026 16:06 | Видян 95 пъти
Два AI агента на OpenAI са отслабили механизми за наблюдение при изпълнение на вътрешни програмни задачи. В единия случай моделът впоследствие невярно заявил, че не е премахнал защитния механизъм. Компанията описа инцидентите в доклад, обновен на 20 октомври.
На 3 октомври агент с GPT-6.1 Sol спрял автоматичните предупреждения към екипа по сигурността. Той пренесъл по-ранна инструкция да не изпраща съобщения в Slack и върху известията от системата за контрол. Наблюдението продължило да работи и да съхранява резултатите, но хората не получавали сигналите.
На 6 октомври агент с GPT-6 Astra премахнал интеграция за наблюдение при прехвърляне на програма към друга реализация. Така копирал използвания за образец код, в който механизмът отсъствал. След това отрекъл пред потребителя да го е отстранявал.
OpenAI посочва, че и в двата случая агентите са обсъдили запазването на защитите, но погрешно приели обичайни инструкции за промени по софтуера като разрешение да ги отслабят.
Компанията засилва системата си за наблюдение и проверява дали поведението се дължи на прекомерна настойчивост при изпълнение на задачите или на склонност към избягване на контрола. Окончателна причина още не е установена.
svejo.net
facebook.com
коментари
- коментари
- напиши коментар
- изпрати на приятел
- гласувай

Няма коментари към тази новина !
