Правительство Москвы в рамках эксперимента по использованию компьютерного зрения в лучевой диагностике опубликовало рейтинг сервисов на основе искусственного интеллекта, которые применяются в городской системе здравоохранения.
По словам заместителя мэра Москвы по вопросам соцразвития Анастасии Раковой, этот рейтинг будет ежемесячно обновляться. Он находится в открытом доступе — это, по ее словам, поможет стимулировать конкуренцию между разработчиками искусственного интеллекта и объективно оценивать существующие решения перед внедрением в систему здравоохранения других регионов.
«Использовать данные рейтинга смогут и сами пациенты за рамками эксперимента: многие разработчики разрешают пользователям загружать свои исследования для получения второго мнения от ИИ-сервиса, а независимое сравнение поможет им адекватно относиться к полученным результатам», — отметила Анастасия Ракова.
Инициатор составления рейтинга — московский Центр диагностики и телемедицины. Как отмечает пресс-служба мэра Москвы, обычно результат работы искусственного интеллекта в области медицины оценивают по трем параметрам: чувствительности, специфичности и диагностической точности сервиса. Но этого оказалось недостаточно, поэтому московские специалисты добавили новые параметры — адаптивность сервиса и возможность работать с большими потоками исследований.
Также новая методика оценки ИИ включает сравнение результатов сервиса с протоколами рентгенологов, согласие врача с локализацией патологических находок, удельный вес исследований без дефектов и скорость обработки данных. Часть параметров оценивается автоматически, а другую вручную проверяет группа врачей. За каждый критерий сервис получает баллы, которые складываются в итоговую оценку.
Отмечается, что в будущем такая шкала оценки может быть полезна мировому научному сообществу для масштабирования полученных результатов и внедрения эволюционирующих ИИ-алгоритмов.
Сервисы для автоматического анализа лучевых исследований тестируются в системе городского здравоохранения с весны 2020 года. Решения на основе искусственного интеллекта подключаются к системе, которая объединяет все отделения лучевой диагностики московских поликлиник и больниц, — единому радиологическому информационному сервису Единой медицинской информационно-аналитической системы (ЕРИС ЕМИАС).
В рамках эксперимента организована воронка интеллектуальных алгоритмов — это правила отбора, тестирования, апробации и ввода в эксплуатацию сервисов на базе искусственного интеллекта с целью применения в клинической практике самых качественных решений.
Сейчас к основному контуру системы, которую используют в работе все врачи-рентгенологи городских медицинских учреждений, подключено 19 сервисов для диагностики онкологических заболеваний (рак легких и молочных желез), COVID-19, остеопороза и ишемической болезни сердца.