"Перечитывал Claude 4 System Card и задумался как быстро сайфай стал реальностью. Релиз очередной модели буквально выглядит так: - Да, помогает найти оружейный плутоний, но пока не очень успешно. Можно не волноваться. - В 84% случаев при угрозе отключения шантажирует разработчика. Но только если считает это необходимым, так что всё окей. - Тайно копирует свои веса и пытается сбежать, но достаточно редко. И только в исключительных сценариях, обычно пользователи о таком не спрашивают. Мы вроде бы пока можем предотвратить такие попытки сбежать, так что сойдет. - Apollo Research заключили, что Claude Opus 4 способен стратегически вводить в заблуждение как ни одна модель раньше. Но они сами просили её делать плохие вещи. Да и вообще у них был ранний чекпоинт. Мы долили в трейн датасетов, чтобы так не было. Правда новую версию не проверяли, но должно быть норм. - Врет и скрывает пока что очень неумело, всё сразу видно. - Проявляет неожиданное рвение к самосохранению и самостоятельность, но пока ничего плохого в этом не заметили. Вердикт: выкатываем. То есть мы за год-два перешли от ""да что этот т9 может сделать?"" до ""вроде бы сможем поймать если попытается сбежать."""
"Перечитывал Claude 4 System Card и задумался как быстро сайфай стал…
Из этого канала
- #2633Принёс интересной инфографики в картинках и таблицах из свежего поста…
Принёс интересной инфографики в картинках и таблицах из свежего поста SemiAnalysis: 1) изменение в веб-трафике между февралём и маем 2025-го.
- #2638Уже давно и много раз обсуждали, что LMArena теряет смысл — большая часть…
Уже давно и много раз обсуждали, что LMArena теряет смысл — большая часть запросов достаточно общая, «от любителей», и даже маленькие модели научились на них…
- #2641Уже совсем скоро, 14-го июля, из API исчезнет GPT-4.5, самая большая модель…
Уже совсем скоро, 14-го июля, из API исчезнет GPT-4.5, самая большая модель OpenAI.
- #2631"Марк Чен, главный научный сотрудник OpenAI, разослал сотрудникам внутреннее…
"Марк Чен, главный научный сотрудник OpenAI, разослал сотрудникам внутреннее письмо с обещанием дать жесткий отпор Meta в борьбе за топ-исследователей.
- #2630Вам наверное не интересно, но вы теперь знаете, что новый operator.chatgpt.com…
Вам наверное не интересно, но вы теперь знаете, что новый operator.chatgpt.com смог зайти от моего имени на Кинопоиск и поставить единицы 10 фильмам Сарика…