Бесплатный курс из статей и видео о том, как устроены большие языковые модели — от токенизации до механизма внимания.
Автор — основатель Outcome School Амит Шекхар — последовательно объясняет внутреннее устройство LLM: что такое токенизация, как работает алгоритм BPE, математика механизма внимания (Q, K, V) и другие темы. Материалы рассчитаны на тех, кто хочет разобраться в базовых принципах работы моделей вроде тех, что стоят за современными чат-ботами, без глубокого погружения в код. Список тем постоянно пополняется.
Описание автора:Learn LLM internals step by step - from tokenization to attention to inference optimization.