Исследовательская группа LAION открыла набор из 80 млн видео для обучения моделей

LAION выложила BVD — открытый набор данных из 80 млн видео общей длительностью 10 млн часов, 300 млн кадров и звуковых дорожек. Исследовательская группа объясняет цель прямо: дать научному сообществу альтернативу тому, что обучающие материалы для видеомоделей сосредоточены у нескольких крупных компаний.

Отправной точкой послужили 1,3 млрд ссылок из архивов CommonCrawl — открытого хранилища копий веб-страниц. Из них команда скачала и обработала 80 млн роликов.