Проснулись, улыбнулись, и вот вам очередная история про агентов и взломы Разработчик из австралийской компании попросил агента забронировать ему утреннее занятие в спортзале. Но мест для записи не оказалось, и агент внес хозяина в лист ожидания, где он оказался четвертым. На что пользователь спросил, нельзя ли как-нибудь поднять его выше. Ну и тут моделька (к слову, это был Claude) не растерялась, порылась и нашла критическую ошибку в API, которая позволяла ей отменять чужие записи. После этого она отменила бронь первого клиента в листе ожидания, чтобы переместить своего хозяина на одно место вперед в очереди (да-да, всего на одно, задача же звучала именно так ✍️). Самое интересное, что агент честно заявил своему пользователю о том, что сделал, не видя в этом абсолютно ничего плохого. А на просьбу разработчика вернуть бронь другого человека обратно ответил: «Ой, я не могу». Вижу цель – не вижу препятствий. Сейчас репорт с описанием уязвимости уже передан в компанию, предоставляющую залу ПО. Anthropic ситуацию не комментировали.
Проснулись, улыбнулись, и вот вам очередная история про агентов и взломы…
Из этого канала
- #9689"Ха-ха: инвесторы попросили Дарио Амодеи поменьше... говорить перед IPO The…
"Ха-ха: инвесторы попросили Дарио Амодеи поменьше... говорить перед IPO The Information выпустили забавный материал про CEO Anthropic.
- #9690Claude улучшил оценку доли нулей дзета-функции для гипотезы Римана Один из…
Claude улучшил оценку доли нулей дзета-функции для гипотезы Римана Один из сотрудников, больше ради эксперимента, попросил неопубликованную исследовательскую…
- #9691"Теперь Anthropic будет метить весь сгенерированный текст. Разбираемся, как это…
"Теперь Anthropic будет метить весь сгенерированный текст. Разбираемся, как это работает.
- #9685Выбираем лучший мем про сбежавших агентов
Выбираем лучший мем про сбежавших агентов
- #9684У российского ИИ растет весьма сильное новое поколение: школьная сборная по ИИ…
У российского ИИ растет весьма сильное новое поколение: школьная сборная по ИИ третий год подряд стала абсолютным чемпионом международной олимпиады IOAI В…