Научили смартфон распознавать предметы искусства. Собрали пайплайн от детекции картины на фотографии до поиска автора и произведения в каталоге.
Разработали технологию компьютерного зрения, которая находит картины и рисунки на фотографии, сопоставляет их с каталогом и возвращает сведения об авторе и произведении.
Проект в цифрах
≈470
тысяч объектов описано в исходном каталоге MetObjects
2
секунды занимает получение характеристики произведения
367
музейных фотографий разметили для обучения детектора
90
тысяч картин и рисунков вошло в расширенный каталог для глобального поиска
Используемые технологии
ML-стек
MetObjects, ResNet50, MobileNet, ArcFace и CenterNet
Награды
Теглайн 2022
«Лучшее приложение для искусства»
Теглайн 2022
«Лучший мобильный сервис»
Команда проекта
AGIMA.AI
Исследование, компьютерное зрение и разработка ML-пайплайна
United Kingdom Creative Ideas
Продуктовая экспертиза и развитие сервисов .art