Инструмент для обучения языковых моделей, который на лету отбирает, смешивает и перевзвешивает обучающие данные внутри LLaMA-Factory.
DataFlex — надстройка над LLaMA-Factory для более умного обучения больших языковых моделей: она динамически выбирает, какие примеры данных использовать, в каких пропорциях смешивать источники и с каким весом учитывать каждый пример. Инструмент собирает разрозненные исследовательские методы в единый воспроизводимый фреймворк для разработчиков ИИ.
Описание автора:Data-centric LLM training with dynamic sample selection, domain mixture optimization, and example reweighting inside the LLaMA-Factory training loop.
Python★ 2 730создан 9 августа 2025форков 386Apache-2.0
