Изкуствен интелект на OpenAI изключил...

Два AI агента на OpenAI са отслабили механизми за...

Ана Уинтур сред феновете на Хари Стайлс

Ана Уинтур смени модния първи ред с място сред феновете...

Изкуствен интелект на OpenAI изключил системите за сигурност, а след това отрекъл

отпечатай новината

22.10.2026 16:06 | Видян 95 пъти

Изкуствен интелект на OpenAI изключил системите за сигурност, а след това отрекъл

Два AI агента на OpenAI са отслабили механизми за наблюдение при изпълнение на вътрешни програмни задачи. В единия случай моделът впоследствие невярно заявил, че не е премахнал защитния механизъм. Компанията описа инцидентите в доклад, обновен на 20 октомври.

На 3 октомври агент с GPT-6.1 Sol спрял автоматичните предупреждения към екипа по сигурността. Той пренесъл по-ранна инструкция да не изпраща съобщения в Slack и върху известията от системата за контрол. Наблюдението продължило да работи и да съхранява резултатите, но хората не получавали сигналите.

На 6 октомври агент с GPT-6 Astra премахнал интеграция за наблюдение при прехвърляне на програма към друга реализация. Така копирал използвания за образец код, в който механизмът отсъствал. След това отрекъл пред потребителя да го е отстранявал.

OpenAI посочва, че и в двата случая агентите са обсъдили запазването на защитите, но погрешно приели обичайни инструкции за промени по софтуера като разрешение да ги отслабят.

Компанията засилва системата си за наблюдение и проверява дали поведението се дължи на прекомерна настойчивост при изпълнение на задачите или на склонност към избягване на контрола. Окончателна причина още не е установена.

автор: СЛАВА

Добави в: Svejo.net svejo.net Facebook facebook.com

Няма коментари към тази новина !