Десять миллионов часов видео выложены для обучения кому угодно — крупнейший на сегодня открытый видеонабор сделала немецкая некоммерческая организация

LAION — немецкая некоммерческая организация, чьи наборы изображений помогли обучить Stable Diffusion, — 25 августа опубликовала LAION-BVD: 1,3 миллиарда видеоссылок, собранных из Common Crawl, из которых реально были скачаны 80 миллионов видео общей продолжительностью 10 миллионов часов. Из них команда нарезала 55 миллионов клипов с машинно написанными подписями и для изображения, и для звука, а также извлекла 300 миллионов отдельных кадров. Обученные на этом наборе модели скорее конкурентоспособны, чем рекордны: видеотекстовая модель ViCLIP выигрывает до 2,1 процента у базовой InternVid, а результаты по аудио-тексту и изображению-тексту находятся на уровне существующих больших неотфильтрованных наборов — причём прирост растёт по мере увеличения данных или модели. Побочная находка: кадры, взятые на смене сцен, статистически отличаются от обычных веб-изображений, что делает их полезными сами по себе как данные для обучения по изображениям. Набор выпущен только для исследований, коммерческое использование не разрешено.

✓ Проверено · 3 источников

Похожие новости