ГМИИ им. А.С. Пушкина: ИИ-технологии Сбера для 3D-реконструкции и анализа произведений искусства
Описание проекта
В январе 2024 года ГМИИ им. А.С. Пушкина и Сбер подписали соглашение о сотрудничестве в области цифровизации. В ноябре 2024 года в музее открылась выставка «От слепка до пикселя. Искусство через призму данных», в рамках которой посетители познакомились с ИИ-технологиями Сбера применительно к музейным объектам. Ключевые направления: высокоточное 3D-сканирование предметов коллекции с последующей виртуальной реконструкцией утраченных элементов; применение нейросети Kandinsky для изучения картины Лукаса Кранаха Старшего «Мадонна с Младенцем» — исследование проводилось искусствоведами музея совместно с промпт-инженерами Сбера в течение шести месяцев, результаты переданы в Сбер для обучения новых версий Kandinsky.
Задача
Музею требовалась возможность виртуально восстанавливать форму предметов из фрагментов и проводить детальный анализ труднодоступных деталей живописи без физического вмешательства. Также ставилась задача апробации российских ИИ-инструментов в контексте музейной науки.
Цели внедрения
-
Создать 3D-модели предметов коллекции с возможностью виртуальной реконструкции по фрагментам
-
Исследовать применение Kandinsky для анализа живописи и формирования обучающих данных для нейросети
-
Расширить доступность коллекции за счёт цифровых технологий
Результаты
-
Финансы
-
Конкретные данные не раскрываются Время
-
Шестимесячный совместный исследовательский проект по картине Кранаха Качество и эффективность
-
Высокоточное сканирование позволяет выявлять детали, не видимые невооружённым глазом
-
Нейросеть Kandinsky применялась для исследования стиля и деталей живописи; результаты шести месяцев работы включены в датасет для обучения следующих версий модели
-
Виртуальная реконструкция объектов из фрагментов позволяет «собирать» разбитые предметы без физического вмешательства Нагрузка и масштаб
-
Выставка открыта в ноябре 2024 года; доступна посетителям ГМИИ
-
В начале 2024 года Сбер и музей подписали рамочное соглашение о цифровизации Надёжность
-
Нет данных Импортозамещение и compliance
-
Kandinsky и Sber Metaverse Tech — российские разработки Качественный эффект: Создан прецедент применения российских генеративных ИИ в академическом искусствоведческом исследовании; результаты переданы в Сбер для совершенствования Kandinsky.