Урок 10 из 12

Сравнение до и после

Кнопка compare (на блоке Train или в History) ставит базовую и дообученную модели рядом:

  • Perplexity (ppl): ошибка языковой модели — чем ниже, тем увереннее модель. Падение с ~29 до ~3 означает, что стиль датасета действительно усвоен.
  • eval loss: на отложенном сплите (если eval_pct>0).
  • генерация примера: одинаковый промпт обеим моделям, чтобы разницу в поведении было видно глазом.
Модальное окно сравнения
Совет: если ppl дообученной осталась около базовой — либо эпох было мало, либо датасет не соответствует цели.
Оглавление курса · Урок 10 из 12
TheTensorTune workbench