А пока модельки дома готовятся обновляем листик ресечим проектов в которых можно поучаствовать https://github.com/researchim-ai/state-of-ai ии по отрослям так сказать. репозиторий с широкой инфой (чатгпт ресерчи например) по ии. Где и как применяется, какие-нибудь большие вводные/учебные материалы по разделам иишки/мля https://github.com/researchim-ai/re-oil-production-llm проект по ллм в добыче нефти. моделирование скважин, трен ллм на данных и все такое. Щас активно делаю, прорабатываю генерацию данных чтобы датасеты собирать можно было. Тут дофига чего можно делать. Вероятно в будущем перерастет в нефтьгпт. Сейчас в нефтьгпт у нас очень простой симулятор. С целью создания полноценного симулятора нефтянки начат проект https://github.com/researchim-ai/oil-simulator-py Сейчас там есть моделирование пласта и инжекторные скважины (воду закачивают) и нефтяные. Далее разработка связности между скважинами и остальная инфраструктура https://github.com/researchim-ai/re-synthetic-docs проект по генерации синтетических документов с целью тюнинга VLM моделек для распознавания доков. https://github.com/researchim-ai/re-grpo это так сказать свой имплемент грпо на базе tiny-grpo проекта. Добавлен был пример с использованием тулов и мультитерн грпо. Тут скорее надо в порядок привести, сделаю как руки дотянутся. + хочу завести улучшения из dr.grpo статьи https://github.com/researchim-ai/re-rl проект по генерации синтетических датасетов для ризонинга. логические задачки и вот это все. Тут можно тоже очень сильно развивать. https://github.com/researchim-ai/fast-start-ai это проектик куда хочется собирать инфу для быстрого старта в ии. в том смысле, что туторы, инструкции по развертыванию чего-нибудь и тд https://github.com/researchim-ai/quantum-computing-sim-py Симулятор квантовых вычислений с возможностью подключения к нему LLM и RL https://github.com/researchim-ai/atomic-sim симулятор атомного реактора https://github.com/researchim-ai/models-at-home визуальная студия для того чтобы делать модельки у себя дома удобно в одном интерфейсе По задумке это будет единой точкой входа для всех кто хочет научиться делать свои модельки или уже шарит и хочет тренировать модельки разных размеров сейчас работаем с LLM (претрен/sft/grpo) в будущем планируется добавление DL моделек по многим разным направлениям На этот проект имеются очень большие планы Также стараемся вести апдейт статей и информации по ИИ Идеи приветствуются, пуши приветствуются) 🥰
А пока модельки дома готовятся обновляем листик ресечим проектов в которых…
0 viewsОткрыть в Telegram →
Из этого канала
- #5584ребят, грпо пошел жестко не по плану
ребят, грпо пошел жестко не по плану
- #5594https://github.com/teorth/erdosproblems/wiki/AI-contributions-to-Erd%C5%91s-prob…
https://github.com/teorth/erdosproblems/wiki/AI-contributions-to-Erd%C5%91s-problems
- #5595Такс, ну грпо улучшается наконец дотащил flash-attention еще есть работа по…
Такс, ну грпо улучшается наконец дотащил flash-attention еще есть работа по интерфейсу + перетестить надо будет претрен и sft вообще мб сразу попробую…
- #5582https://www.reddit.com/r/LocalLLaMA/comments/1q8hqgd/iclustered3dgxsparksthatnvi…
https://www.reddit.com/r/LocalLLaMA/comments/1q8hqgd/iclustered3dgxsparksthatnvidiasaidcouldnt/ чел пишет что дописал nccl чтобы коннектить в кластер 3 DGX…
- #5581скоро будет полный цикл
скоро будет полный цикл