GRPO в процессе тут очень много всего нужно настроить, удобно реализовать поддержку своих ревард функций и возможность их удобно конструировать много разных датасетов завезти ну и всякое прочее DPO тоже попозже будет