Экспериментальный движок на C запускает гигантскую языковую модель Kimi K3 на 2,78 трлн параметров на обычном процессоре без GPU.
Проект реализует инференс модели Kimi K3 (2,78 триллиона параметров) на языке C99 без сторонних библиотек, GPU и фреймворков — программа занимает всего 176 килобайт кода. На обычном ноутбуке с 8 ГБ оперативной памяти модель считает ответ за десятки секунд, при этом результат идентичен на слабом и мощном железе — разница только в скорости. Интересен исследователям и энтузиастам, которые изучают запуск крупных моделей без дорогого оборудования.
Описание автора:A 2.78-trillion-parameter Kimi K3 running inference on a single CPU in 8.24 GB of RAM. Portable C99: no BLAS, no framework, no GPU.
C★ 7 957создан 1 августа 2026форков 1 280Apache-2.0