0
0
2289

Новые увеличенные версии модели нейросетей ruCLIP Сбера размещены в открытом доступе

15:04 19.01.2022


На портале GitHub выложена линейка моделей ruCLIP, позволяющая ранжировать изображения и подписи к ним на русском языке, а также оценивать семантическу близость изображений и текстов. Модели разработаны командами Sber AI и SberDevices в дополнение к ранее опубликованной модели ruCLIP Small.  «Экосистема Сбера является одним из лидеров в области ML-решений — уже сегодня мы предлагаем разработчикам, дата-сайентистам и представителям бизнеса всё больше инструментов и сервисов: от платформ для ML-разработки, как SberCloud ML Space, до законченных ML-решений, как SmartSpeech, - отмечает первый заместитель председателя правления Сбербанка Александр Ведяхин. - Также за последний год объединённые команды Sber AI и SberDevices выпустили ряд трансформерных моделей — ruGPT-3 & family, — среди которых и популярная text-to-image ruDALL-E. Модели занимают первые строчки рейтингов различных бенчмарков и, в отличие от большинства аналогичных решений, размещены в открытом доступе. Эксклюзивные промышленные модели доступны в DataHub SberCloud ML Space. Всё это позволяет решать бизнесу многие задачи для создания собственных прорывных продуктов на базе ML, ускорять time to market и снижать затраты на разработку».

Промышленные версии с наивысшим качеством и количеством параметров — ruCLIP Base exclusive и ruCLIP Large exclusive — доступны в хабе предобученных моделей, датасетов и контейнеров DataHub на платформе SberCloud ML Space.
Эти модели на ряде датасетов успешно обошли ансамбль оригинальной англоязычной модели CLIP и русско-английского переводчика. 

Успешное обучение ruCLIP и доступность моделей в open source позволит решать многие задачи компьютерного зрения в различных продуктах и сервисах в режиме zero-shot, то есть без необходимости дорогостоящего дообучения, сообщают разаботчики. В релизе шесть моделей ruCLIP, отличающиеся размером использованного патча (14×14, 16×16, 32×32) и размерами входных изображений (224×224, 336×336 и 384×384). Семантика названия моделей выглядит так:

-         ruclip-vit-base-patch16-224;

-         ruclip-vit-base-patch32-224;

-         ruclip-vit-base-patch32-384 — ruCLIP Base;

-         ruclip-vit-large-patch14-224 — ruCLIP Large;

-         ruclip-vit-large-patch14-336 — ruCLIP Large exclusive — доступна DataHub SberCloud ML Space only;

-         ruclip-vit-base-patch16-384 — ruCLIP Base exclusive — доступна в DataHub SberCloud ML Space only.

Посмотреть детальное сравнение всех шести новых обученных моделей можно в репозитории на GitHub.


Оставлять комментарии могут только авторизованные пользователи.

Вам необходимо Войти или Зарегистрироваться

комментарии(0)


Вы можете оставить комментарии.


Комментарии отключены - материал старше 3 дней

Новости


21:20 01.06.2026
До Гросси донесена позиция о неадекватности реакции МАГАТЭ на ситуацию с ЗАЭС — Лихачев
0
0
20:40 01.06.2026
Задержанный танкер Tagor 2 июня встанет на якорь в заливе на западе Франции — префектура
0
128
20:00 01.06.2026
Странам ЕАЭС предстоит до декабря обсудить все нюансы вокруг Армении — Песков
0
193
19:20 01.06.2026
Первый зампредседателя ДУМ РФ Мухетдинов оштрафован на 150 тыс. рублей
0
255
18:40 01.06.2026
Пентагон объявил конкурс среди стартапов для закупки 300 тыс. ударных БПЛА — WP
0
256
18:35 01.06.2026
Сбер: С начала года мошенники безуспешно пытались похитить у россиян 120 миллиардов рублей
0
293
18:00 01.06.2026
НАТО стремится сменить власть в Сербии — Вулин
0
333
17:32 01.06.2026
Минимум 48 квартир повреждено при атаке БПЛА ВСУ в Геническе
0
364
17:12 01.06.2026
Попытки Пашиняна получить выгоды ЕАЭС и ЕС ни к чему хорошему не приведут - Медведев
0
379
17:08 01.06.2026
ГигаАкадемия поможет преподавателям стать проводниками в мире ИИ
0
339

Возврат к списку