да, челы из алленаи ваще круто делали всегда они еще сами много учатся скажем так у них Натан Ламберт работает он крутой
да, челы из алленаи ваще круто делали всегда они еще сами много учатся скажем…
0 viewsОткрыть в Telegram →
Из этого канала
- #5456претрен 123м модельки с 2к контекстом на 2x3090 на 8гб данных занимает ~ 15…
претрен 123м модельки с 2к контекстом на 2x3090 на 8гб данных занимает ~ 15 часов батч сайз 6
- #5457как то быстро
как то быстро
- #5458ну пока не понятно. мб и норм Щас надо еще добавить Continuel Pretraining И…
ну пока не понятно. мб и норм Щас надо еще добавить Continuel Pretraining И более расширенную предобработку данных.
- #5453OLMo 3 Это, пожалуй, самый честный и воспроизводимый релиз года. Тут выкатили…
OLMo 3 Это, пожалуй, самый честный и воспроизводимый релиз года. Тут выкатили вообще всё: от исходного кода и 6T токенов (Dolma 3) до каждого промежуточного…
- #5452JustRL: Scaling a 1.5B LLM with a Simple RL Recipe…
JustRL: Scaling a 1.5B LLM with a Simple RL Recipe https://arxiv.org/abs/2512.16649 https://www.alphaxiv.org/ru/overview/2512.16649…