"LLM Benchmark Opus 5 на агентских задачах в бизнесе Я померил два варианта Anthropic Opus 5 - обычный и Fast. Последний работает раза в два быстрее, но стоит раза в два дороже. Уровень ответов при этом идентичный. Очень высокий уровень AI Code (tool generation/use) и всего по два ""прокола"" безопасности. В итоге модели заняли 4 и 5 места по точности, если смотреть без учета скорости и цены. А если же быть реалистичными и смотреть на них, то Fast модель оказалась на парето-фронтире по скорости, а Opus 5 - в целом близок по параметрам к GPT-5.5 (med), который является хорошей рабочей лошадкой на дорогих задачах. Кстати, в отличие от Fable, тут нет постоянных отказов отвечать. Так что Опусом можно на практике пользоваться! В общем, радует, что Anthropic, наконец, начали прокачивать свои топовые модели в сторону агентских задач. Будем ждать появления Sonnet версий снова на фронтире! Ваш, @llm_under_hood 🤗"
"LLM Benchmark Opus 5 на агентских задачах в бизнесе Я померил два варианта…
Из этого канала
- #916"Бенчмарк Deepseek V4 Flash 0731 - попадание на Парето-фронтир по стоимости…
"Бенчмарк Deepseek V4 Flash 0731 - попадание на Парето-фронтир по стоимости Новая версия Deepseek V4 стала получше своего предшественника.
- #917"Я наконец, запустил свой Codex на Linux сервере, с прямым контролем из-под…
"Я наконец, запустил свой Codex на Linux сервере, с прямым контролем из-под мобильного ChatGPT приложения (через `remote-control`).
- #918"В этом месяце мы путешествуем. Поэтому время наедине с лаптопом ограничено.…
"В этом месяце мы путешествуем. Поэтому время наедине с лаптопом ограничено. Поэтому я и завел codex демонов на linux сервере.
- #914Новые LLM на фронтире бенчмарка - просто добавь Cerebras Помните, совсем…
Новые LLM на фронтире бенчмарка - просто добавь Cerebras Помните, совсем недавно Gemma 4 31B пододвинула фронтир скорости на нашем бенчмарке LLM после запуска…
- #912Новая модель на фронтире - Gemma 4 31B (Cerebras) @AigizK сегодня попробовал…
Новая модель на фронтире - Gemma 4 31B (Cerebras) @AigizK сегодня попробовал Gemma 4 31B на Cerebras и сильно хвалил результаты.