Набор оптимизированных программных блоков для быстрого запуска больших языковых моделей Kimi K3 и Qwen3.8-27B на чипах TPU.
Проект содержит готовые сборки для запуска языковых моделей Kimi K3 и Qwen3.8-27B на специализированных чипах Google TPU: код объединяет несколько этапов вычислений в один блок для ускорения генерации текста. Поддерживается работа как через терминал, так и через HTTP-сервер, совместимый с API OpenAI. Инструмент рассчитан на инженеров, которые разворачивают большие ИИ-модели на TPU-кластерах.
Описание автора:A collection of megakernels for TPU
Python★ 25создан 23 сентября 2026форков 1Apache-2.0