По поводу этой драмы высказался уважаемый исследователь Nat McAleese: — мы вообще не использовали данные FrontierMath для разработки o1 или o3 — мы не обучались на каких-либо данных, полученных из FrontierMath, на каких-либо вдохновленных теми задачами данных или на чём-то, что предназначено конкретнодля FrontierMath — я в этом абсолютно уверен, потому что мы скачали FrontierMath для наших оценок сильно позже того, когда данные для обучения были заморожены (утверждены/финализированы), и посмотрели на результаты o3 FrontierMath только после того, как была выбрана финальная модель [прим.: я спеулировал, что OpenAI могли получить несколько моделей и выбирать лучшую через замеры на FrontierMath, но даже этого не делали] — мне жаль, что возникла путаница, так как o3 — невероятное достижение, а FrontierMath — отличный способ оценки моделей. Мы усердно работаем над выпуском o3 и надеемся, что релиз модели развеет все опасения по поводу её качества! Я — верю. __А вы?__
По поводу этой драмы высказался уважаемый исследователь Nat McAleese: — мы…
Из этого канала
- #2266Ой, тут оказывается у канала был второй день рождения 23-го января, но я его не…
Ой, тут оказывается у канала был второй день рождения 23-го января, но я его не заметил в свете релиза Operator + Humanity's Last Exam.
- #2267"Самое классное, что это УЖЕ работает. Да, не всегда и не каждый раз, но между…
"Самое классное, что это УЖЕ работает. Да, не всегда и не каждый раз, но между условно 15% и 40% выполненных задач ощущается разница.
- #2268Еще один сценарий оператора который очень понравился – отправил его настраивать…
Еще один сценарий оператора который очень понравился – отправил его настраивать роутер и чинить ошибки из логов: дома иногда проблемы с сетью на десктопе, так…
- #2264"Итак, более полная информация из блогпостов: — Computer-Using Agent (CUA)…
"Итак, более полная информация из блогпостов: — Computer-Using Agent (CUA) объединяет возможности обработки изображений GPT-4o и рассуждения модели посредством…
- #2263С VPN США работает (даже бесплатным), но пока не раскатили на всех. Набор демок…
С VPN США работает (даже бесплатным), но пока не раскатили на всех. Набор демок от ранних тестеров можно глянуть вот тут в твиттер-треде.