"В последнее время все актуальнее вопрос: а может перейти на open source модель и снизить зависимость/убрать риски, ну или сэкономить —> сделал для вас скилл по мотивам ответа на такой же вопрос для своих пайплайнов: https://github.com/BayramAnnakov/oss-migration-eval что делает: 1) анализирует самые ""жирные"" пайплайны 2) определяет, по какой метрике будем сравнивать модели (что такое ""правильно"") 3) составляет ""золотой датасет"", чтобы заранее определить, на каких кейсах будем сравнивать 4) берет шортлист кандидатов на основе лидербордов artificialanalysis (по качеству) и openrouter (по популярности) 5) прогоняет модели, считает точность на золотом датасете 6) (опционально) может погонять в режиме autoresearch промпты, чтобы даже на слабой модельке добиться гуд результатов 7) и советует что брать :) удачи! P.S. до выхода kimi k3 на моих пайплайнах победила kimi k2.6 P.P.S. для запуска claude code с kimi k3 можно юзать эту инструкцию"
"В последнее время все актуальнее вопрос: а может перейти на open source модель…
Из этого канала
- #1788выложили запись вебинара: https://youtu.be/YGZNrfBkDA
выложили запись вебинара: https://youtu.be/YGZNrfBkDA
- #1789Недавно нужно было оптимизировать скорость выполнения разных LLM задачек —> что…
Недавно нужно было оптимизировать скорость выполнения разных LLM задачек —> что сработало: 1) Переход на модели поменьше - с подкручиванием промптов, в том…
- #1790"Следующий логичный шаг после ревью сессий юзеров —> составить из них портреты…
"Следующий логичный шаг после ревью сессий юзеров —> составить из них портреты пользователей (user personas) и использовать их в оценке прототипов и…
- #1785Про применение AI в продуктовой аналитике - запускаю AI Product Analyst в…
Про применение AI в продуктовой аналитике - запускаю AI Product Analyst в августе: 1) как искать узкие места в продукте на пару с дружбаном, при этом не попав…
- #1783"Почти тысяча турецких старшеклассников готовится к экзамену по математике.…
"Почти тысяча турецких старшеклассников готовится к экзамену по математике. Одной группе дают chatgpt; при подготовке эта группа решает на 48% лучше группы…