Xiaomi открыла модель для таблиц, работающую без обучения под задачу

Xiaomi открыла Xiaomi-TabLDM — модель для таблиц, которую не нужно обучать под конкретную задачу. Модель получает размеченные строки датасета как контекст и за один проход предсказывает значения для новых строк, решая задачи классификации и регрессии.

Классификатор и регрессор выпущены отдельно: у первого 70 млн параметров, у второго 71 млн. Чтобы снизить зависимость от порядка колонок, при предсказании модель объединяет результаты нескольких прогонов с перемешанными признаками. Это тот же подход, что у TabPFN от Prior Labs, но с открытыми весами от крупного вендора.