Главное за 8 ноября 2026
Что важно запомнить
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
Основные понятия
- Смесь экспертов
- Устройство модели, при котором на каждый токен работает лишь небольшая часть весов, а остальные простаивают — это позволяет держать в памяти не всю модель целиком.
- Харнес
- Код вокруг модели: как формулируется задача, какие инструменты доступны агенту и как разбирается его ответ.
- Хуки
- Обработчики, которые запускаются перед действием агента и могут его отменить — в отличие от текстовой инструкции, работают как ограничение, а не пожелание.
- JEPA
- Способ обучения, при котором модель предсказывает не следующее слово, а внутреннее представление пропущенного фрагмента данных.