Никита Одинцов

В ИИ есть один термин, который сейчас встречается буквально везде - SoTA. Я с ним столкнулся, когда делал для медиахолдинга, где работает моя мама, «ИИ-калькулятор муниципального задания». Хотелось прикрепить самую - самую - пресамую LLM, которая только существует. Но и так и эдак крутил-вертел, но в итоге поставил то, что уместилось на сервер и по-сути, довольно качественно и аскетично выполняло две функции: счет и подведение итогов. И все прекрасно заработало. Помогло мне как раз то, что позволяет понять SoTA. Сам термин расшифровывается как State of the Art. По-человечески: лучшее, что технология умеет на данный момент. Но есть важная деталь. Когда кто-то пишет: «Это SoTA-модель», это еще не значит, что перед нами «лучший искусственный интеллект в мире». Нужно сразу задавать вопрос: SoTA - в чем именно? В программировании? В математике? В работе с изображениями? В скорости? В локальном запуске? Среди open-weight моделей? На конкретном бенчмарке? Потому что одна модель может быть лучшей в коде и средней в логике. Другая - невероятно сильной в математике, но дорогой и медленной. Третья - чуть слабее по качеству, зато спокойно работает локально на вашем компьютере. Поэтому SoTA - это не корона «лучшей нейросети». Это скорее граница технологического фронтира в конкретной задаче. И вот что особенно интересно. В искусственном интеллекте эта граница сейчас движется с какой-то безумной скоростью. То, что год назад считалось почти фантастикой, сегодня уже запускается локально. То, что несколько месяцев назад было SoTA, сегодня может оказаться просто хорошим средним результатом. Поэтому, когда видите очередной заголовок: «Новая SoTA AI-модель» не спешите впечатляться. Спросите: На каком тесте? В какой задаче? Среди каких моделей? И какой ценой получен этот результат? Вот с этого момента заканчивается маркетинг и начинается нормальный разговор про искусственный интеллект.