Команда Сбербанка представила медицинский диагностический ассистент GigaDoc на международной конференции AI Journey («Путешествие в мир искусственного интеллекта»). Новый сервис разработан Центром индустрии здоровья Сбербанка и учёными Лаборатории искусственного интеллекта Сбера. 

GigaDoc работает на базе нейросетевой модели GigaChat и специализированных медицинских моделях. Как рассказали разработчики, его можно будет интегрировать в любое устройство (смартфон или ноутбук) и использовать для мониторинга здоровья человека.

Участники AI Journey смогли проверить на себе возможности медицинского ассистента на базе искусственного интеллекта: для этого достаточно подойти к экрану с камерой. GigaDoc распознаёт ключевые биомаркеры человека: пол, возраст, пульс, индекс массы тела, эмоциональное состояние, риск диабета второго типа, вариабельность сердечного ритма, уровень холестерина и так далее. А также способен предлагать гипотезы о диагнозах на основе предоставленных фотографий. В основе работы ассистента лежат такие технологии, как компьютерное зрение, машинное обучение и дистанционная фотоплетизмография (анализ изменения цвета кожи, который связан с кровотоком и предназначен для измерения частоты сердечных сокращений, дыхания и насыщения крови кислородом).

В компании рассказали:

Мультимодальный ассистент GigaDoc в будущем поможет медицинским работникам ускорить первичный скрининг пациентов, определять приоритет оказания медпомощи в зависимости от тяжести заболевания (триаж), отслеживать динамику состояния здоровья больных и проводить качественный мониторинг хронических неинфекционных заболеваний.