держу в курсе: а у нас в модельки дома заезжает потихонечку grpo https://github.com/researchim-ai/models-at-home напомню это визуальная студия чтобы тюнить модельки ллмные разными алгоритмами у себя на компе или на серваке (https://t.me/AGI_and_RL/1262) вообще изначально там идея свои модельки тренить, но теперь вполне можно выкачать с hf модельки потюнить пока еще конечно не все баги отловились да и работа активно ведется, но в целом можно позапускать там пока не все оптимизировано, очень много чего прямо сейчас делается скоро будет больше апдейтов а следить за проектом можно тута (там еще и много разной инфы по ии собирается) https://t.me/researchim