Я добавил на ERC3 платформу живой leaderboard с последними лучшими результатами бенчмарков. Для разогревочного STORE бенчмарка, 5% команд на платформе уже смогли получить идеальный результат. Пока аккаунты анонимные, без дополнительной статистики или раскрытия архитектур. Это приделаем потом. А статистики потом будет немало, у нас уже залоггировали более 11k запусков разнообразных AI Agents! Ваш, @llm_under_hood 🤗
Я добавил на ERC3 платформу живой leaderboard с последними лучшими результатами…
Из этого канала
- #696Новости и статистика про ERC3 Во-первых, по голосованию видно, что большинство…
Новости и статистика про ERC3 Во-первых, по голосованию видно, что большинство за перенос даты соревнования на начало декабря.
- #697Бенчмарк LLM в ERC3: AI Agents Вот график лучших решений ERC3 в бенчмарке…
Бенчмарк LLM в ERC3: AI Agents Вот график лучших решений ERC3 в бенчмарке Store, где архитектуры ранжированы по стоимости запуска и времени исполнения.
- #698Мелкий апдейт на платформе ERC Пока еще не ERC3 бенчмарк, просто подготовка к…
Мелкий апдейт на платформе ERC Пока еще не ERC3 бенчмарк, просто подготовка к его выкладке (1) Если при отправке решения не была прислана телеметрия вызовов…
- #693Первые инсайты с ERC3 про построение AI Агентов Соревнование у нас еще не…
Первые инсайты с ERC3 про построение AI Агентов Соревнование у нас еще не запущено, а инсайты уже идут! Это потому, что наше с вами коммьюнити просто офигенно.
- #692Платформа для ERC3: AI Agents открыта! На ней мы будем проводить соревнование…
Платформа для ERC3: AI Agents открыта! На ней мы будем проводить соревнование 26 ноября (и после) по поиску оптимальных архитектур для AI агентов.