Презентация мультимодального медицинского диагностического ассистента GigaDoc состоялась на международной конференции AI Journey («Путешествие в мир искусственного интеллекта»).
Новый сервис разработан Центром индустрии здоровья Сбербанка и учёными Лаборатории искусственного интеллекта Сбера . Он работает на базе нейросетевой модели GigaChat и специализированных медицинских моделях.
Сервис универсальный в использовании - его можно будет интегрировать в любое устройство (смартфон или ноутбук) и использовать для мониторинга здоровья человека.
Возможности медицинского ассистента, созданного на базе ИИ, уже смогли проверить на себе участники конференции. Для этого достаточно было просто подойти к экрану с камерой.
Медицинский диагностический сервис способен распознавать ключевые биомаркеры человека: пол, возраст, пульс, индекс массы тела, эмоциональное состояние, риск диабета второго типа, вариабельность сердечного ритма, уровень холестерина и так далее. И сразу же предлагает гипотезы о диагнозах на основе предоставленных фотографий.
В пресс-службе банка рассказали, что в основе работы ассистента лежат такие технологии, как компьютерное зрение, машинное обучение и дистанционная фотоплетизмография (анализ изменения цвета кожи, который связан с кровотоком и предназначен для измерения частоты сердечных сокращений, дыхания и насыщения крови кислородом).
В будущем новый сервис станет отличным помощникам медицинским работникам. Он поможет ускорить первичный скрининг пациентов, определять приоритет оказания медпомощи в зависимости от тяжести заболевания (триаж), отслеживать динамику состояния здоровья больных и проводить качественный мониторинг хронических неинфекционных заболеваний.
Особенно ценной такая технология может стать во время телемедицинских консультаций. Также медицинского ассистента, работающего на базе ИИ, можно применять для проведения предрейсовых и производственных осмотров и в работе страховых компаний, чтобы оценивать потенциальные риски здоровья застрахованных.