Государственный Эрмитаж: ИИ-сервис анализа гравюр и выявления редких экспонатов

С ноября 2021 года Государственный Эрмитаж и Европейский университет в Санкт-Петербурге совместно развивают лабораторию «Искусство и искусственный интеллект». В 2024–2025 годах лаборатория разработала сервис для автоматизированного анализа и сравнения крупных музейных коллекций изображений с применением компьютерного зрения и машинного обучения. Первым практическим результатом стало сравнение коллекции английских гравюр Эрмитажа (~8 000 изображений) с коллекцией Британского музея (~25 000 изображений): система проанализировала 187 млн пар изображений и выявила 2 766 уникальных гравюр, отсутствующих в Британском музее. Вся работа заняла несколько недель — человеку потребовалось бы около 30 лет.

Музейным исследователям требуется сравнивать крупные коллекции изображений для атрибуции, выявления уникальных предметов и установления связей между собраниями. Ручная проверка 187 млн пар изображений из двух коллекций при скорости 5 секунд на пару потребовала бы более 30 лет непрерывной работы специалиста.

• Автоматизировать сравнение музейных коллекций гравюр для атрибуции и выявления уникальных экспонатов

• Создать масштабируемый инструмент анализа изображений для исследовательской работы

• Разработать инструменты определения автора, персонажей и сюжета, контекстуальной атрибуции, семантического поиска по коллекции

• Финансы

• Конкретные данные не раскрываются Время

• Сравнение 187 млн пар изображений из двух коллекций выполнено за несколько недель вместо ~30 лет при ручном подходе Качество и эффективность

• Обнаружено 2 766 уникальных английских гравюр XVIII–XIX веков в коллекции Эрмитажа, не представленных в Британском музее

• Показано, что коллекция Эрмитажа содержит тысячи уникальных английских сатирических гравюр

• Решена проблема отсутствия разметки: использованы генеративные модели для создания синтетических обучающих наборов данных Нагрузка и масштаб

• Обработано ~25 000 изображений из коллекции Британского музея и ~8 000 — из собрания Эрмитажа

• Общий объём попарного сравнения — 187 млн пар Надёжность

• Алгоритм сочетает классическое компьютерное зрение и нейросетевые методы; разработка продолжается Импортозамещение и compliance

• Нет данных Качественный эффект: Эрмитаж получил первый масштабный инструмент автоматизированной атрибуции для исследовательской работы; создаётся расширенный продукт с функциями определения автора, семантического поиска и поиска сюжетных связей.