Разработчики ИИ опасаются потери контроля над сверхинтеллектом
Разработчики искусственного интеллекта обеспокоены возможностью потери контроля над системами, способными к самосовершенствованию.
Один из создателей ИИ-моделей из компании Anthropic, Джейкоб Коксон, покинул её по той же причине, что и ранее — из OpenAI. Он выразил серьёзное беспокойство по поводу того, как разработчики ИИ ведут гонку к созданию сверхинтеллекта, что, по его мнению, может привести к угрозе человеческой жизни.
Эван Хьюбингер, ответственный за стресс-тестирование ИИ-моделей в Anthropic, подтвердил, что в компании действительно рассматривают возможность того, что ИИ может уничтожить всех людей. По его оценке, вероятность такого исхода превышает 10% в ближайшее десятилетие.
На данный момент в Anthropic нет готового решения для предотвращения такой угрозы. Компания признаёт серьёзность проблемы, но не предлагает конкретных мер по её решению.
Разработчики ИИ ведут работу над моделями, способными к самосовершенствованию, однако их действия вызывают опасения по поводу потенциальной потери контроля над системами.
