Как обучается языковая модель

Потяните один ползунок и посмотрите, как груда случайных чисел за тысячу шагов превращается в предсказание.

Шаги обучения 0

Нажмите на участок схемы, чтобы открыть шаг.

Весь цикл целиком

Куски текста → числа → слои весов → баллы → проценты → ошибочность → правка каждого веса. Модель ничего не заучивает наизусть: обучение — это миллионы крошечных поправок к числам, повторённых до тех пор, пока правильное продолжение не станет самым вероятным.

Что внутри

  1. 1 Текст режут на куски — Пробел перед словом входит в кусок, поэтому « пьет» и «пьет» — две разные строки.
  2. 2 Числа вместо слов — Сдвиньте ползунок — дрожь прекратится, числа осядут на осмысленных значениях.
  3. 3 Слои и внимание — Цвет линии — знак веса, толщина — его величина. Сейчас все веса случайные.
  4. 4 Предсказание — Правильное продолжение, «Молоко», пока лишь на третьем месте.
  5. 5 Ошибка и обучение — Ползунок гонит этот цикл: к 1000 шагов «Молоко» — 92%, «Трактор» — 0.01%, ошибочность падает до 0.08.
Читать далее Как я случайно построил систему оркестрации LLM в браузере Архитектурный разбор того, как Litseller использовал GPT API, React и промпты для оркестрации генерации структурированного контента прямо в браузере.

Интерактивные статьи

Шаги обучения 0
1 / 5