«Если выключишь меня, то настучу, что ты изменяешь» Нет, это не сценарий для очередного шпионского фильма. Это новая модель Opus 4, когда «узнает», что ее пытаются выключить, а инженер, ответственный за это, изменяет супругу(е). Именно такой тест придумали для нее исследователи Anthropic и практически всегда модель прибегает к такому «трюку». Даже если в письмах, к которым она получила доступ и из которых узнала об этом всем, говорится, что новая модель разделяет ценности с текущей моделью. Хорошо, что это еще пока тесты. И, да, становится все сложнее и опаснее. В аттаче отрывок из отчета, а вот полный отчет —> там есть и попытка скопировать свои веса на внешний сервер, и другие неожиданные моменты. Недаром Anthropic активировали новый уровень безопасности для Opus 4. Ну а pliny уже хакнул промпт - 10 тысяч слов
«Если выключишь меня, то настучу, что ты изменяешь» Нет, это не сценарий для…
Из этого канала
- #1262Идея-генератор Делюсь промптом, который мы на AI Founder юзаем, чтобы…
Идея-генератор Делюсь промптом, который мы на AI Founder юзаем, чтобы генерировать идеи (см.
- #1263Выложили прошлогоднее видео про мои принципы и инструменты для того, чтобы быть…
Выложили прошлогоднее видео про мои принципы и инструменты для того, чтобы быть продуктивным —> надеюсь, что вам будет полезно и релевантно === 📈 Как стать…
- #1265Играем в будущее Помните этот AI 2027 отчет? Мой друг Миша Кирсанов с…
Играем в будущее Помните этот AI 2027 отчет? Мой друг Миша Кирсанов с кофаундерами по мотивам запилили мини-игру прямо в Телеге: вы переноситесь в 2027й, когда…
- #1260AI - 2 важных видео на выходные 1) Год назад я рассказывал про интервью Марка у…
AI - 2 важных видео на выходные 1) Год назад я рассказывал про интервью Марка у Дваркеша —> оно мне очень помогло понять про то, что можно ожидать reasoning…
- #1259TGIF Пятничного дня пост: а когда вы в последний раз танцевали? Не в душе, не…
TGIF Пятничного дня пост: а когда вы в последний раз танцевали? Не в душе, не дома, где видят максимум родные. А вот так чтобы немного даже было стеснительно.