Разработчик выложил TINY 2.1 — языковую модель под DOS размером с одну дискету

Разработчик под ником WollyMonjac выложил TINY 2.1 — языковую модель, которая работает под DOS на Pentium и 486DX и целиком помещается на одну дискету. Код написан на Turbo C 2.0 и открыт.
Сам автор писал проект с помощью нейросетей Fable 5.2 и Opus 5.5. Практического применения у такой модели нет: на машине начала девяностых она демонстрирует, что архитектура трансформера укладывается в сотни килобайт и десятки мегагерц.
В том же жанре — запуск языковой модели на микроконтроллере ESP32-S3 за несколько сотен рублей, о котором вышел разбор на Хабре: там заявлено около 400 токенов в секунду против привычных двух десятков.