🔬 Учёные Центрального университета и Сколтеха разработали метод компьютерного зрения для оценки коллекционных монет Исследователи создали алгоритм, который автоматически определяет состояние и сохранность монет по 70-балльной шкале Шелдона. Сейчас такая оценка проводится экспертами вручную, что субъективно, а существующие алгоритмы компьютерного зрения работают только с одним типом монет. Новый метод представляет собой двойную модель глубокого обучения, которая может оценивать монеты разных типов и делает это точнее. Главное новшество — использование визуально-языковой модели, имитирующей реальную практику оценивания обеих сторон монеты одновременно. Языковая составляющая позволила учитывать особенности, которые легче описать текстом (например, разницу между монетами, не бывшими в обращении, и минимально использованными). Алгоритм анализирует распределение вероятностей результатов двух моделей и учитывает, что соседние классы имеют перекрывающиеся визуальные признаки. Метод уже показал превосходство над предшественниками. В будущем исследователи планируют снижать вычислительную сложность, чтобы сделать систему доступной для коллекционеров, инвесторов и музейных экспертов.