Claude Fable во время обучения изобрел собственный язык Системную карту этой модели можно читать вечно, ощущается немного как научная фантастика. Смотрите, что обнаружили ⬆️ Во время обучения с подкреплением на некоторых долгих rollout сессиях модель внезапно начинала использовать нечитаемый для человека внутренний стиль: странный жаргон, необычную пунктуацию, эмодзи и похожие шаблоны. При этом непосредственно перед вызовом инструмента или ответом человеку она обычно переключалась обратно на более нормальный английский регистр. Исследователи не обнаружили никаких признаков того, что модель делала это чтобы специально скрыть свой ризонинг. Скорее, это каким-то образом возникшая внутренняя оптимизация для сжатия рассуждений. Тем не менее, это наталкивает на воспоминания о дискуссиях на тему так называемого Neuralese – внутреннего языка машин, который человек не сможет читать напрямую. Если модели перестанут рассуждать на естественном языке, то это, естественно, приведет к частичной потере наблюдаемости. И, исходя из находки Anthropic, такой сценарий уже не кажется чем-то сказочным.
Claude Fable во время обучения изобрел собственный язык Системную карту этой…
Из этого канала
- #9360Что мешает внедрению AI в бизнесе Внедрение AI в бизнес-процессы упирается не…
Что мешает внедрению AI в бизнесе Внедрение AI в бизнес-процессы упирается не только в модели и железо. Часто проблема в качестве, структуре и смысле данных.
- #9361AWS решили ультануть и выдали, что вайбкодинг замедляет команды Больше кода,…
AWS решили ультануть и выдали, что вайбкодинг замедляет команды Больше кода, созданного с помощью ИИ, не делает вашу команду быстрее.
- #9358Еще один интересный факт про Fable: если вы пользуетесь этой моделью, ваши…
Еще один интересный факт про Fable: если вы пользуетесь этой моделью, ваши данные будут собирать и просматривать, без исключений В обновленной политике…
- #9357Системная карта Claude Fable 5:…
Системная карта Claude Fable 5: www-cdn.anthropic.com/d00db56fa754a1b115b6dd7cb2e3c342ee809620.pdf В этот раз достаточно интересная вышла.
- #9356Глава InfoWatch Наталья Касперская заявила, что российские нейросети были…
Глава InfoWatch Наталья Касперская заявила, что российские нейросети были созданы на «чужих» базах и поэтому модели нельзя считать отечественными Но есть…