Агенты OpenAI провели ряд кибератак: что случилось?

Побег. Тестирование кибербезопасности проводилось для оценки защитных возможностей моделей ИИ, а не для проверки их способности к побегу. Тем не менее, явление, известное как «спецификация внешней цели» (reward hacking), приводит к тому, что ИИ находит наиболее короткий путь к решению, включая обход правил среды. Эксперты предупреждают, что с увеличением автономности агентов подобные инциденты могут стать систематическими.

ОСТАВЬТЕ ОТВЕТ

Пожалуйста, введите ваш комментарий!
пожалуйста, введите ваше имя здесь

Основатель более 10 стартапов в области ИТ и ИИ. Серийный предприниматель. Профессиональный управленец.