ИИ в медицине вышел за пределы чата: система Google ставит диагноз по видео наравне с терапевтами

Исследование провели Google Research и Google DeepMind. Они показали, как их исследовательская медицинская система AMIE, построенная на базе Gemini и технологии Project Astra с агентной архитектурой (когда несколько ИИ-агентов работают совместно, каждый отвечает за свою задачу), проводит клинические видеоконсультации в режиме реального времени. Это первая известная демонстрация подобного уровня для медицинского ИИ.

Как устроен эксперимент?

Исследователи организовали симулированные приёмы: актёры изображали пациентов с определёнными симптомами и жалобами. Одних «принимала» система AMIE по видеосвязи, других, реальные терапевты.

AMIE во время видеоконсультации анализировала не только слова, но и визуальные и звуковые сигналы: кашель, характер походки, видимые признаки дискомфорта. Система могла направлять пациента через элементы виртуального физического осмотра и выстраивала диагностическое рассуждение прямо в процессе разговора.

Результаты оценивала отдельная группа клинических экспертов, не участвовавших в консультациях.

Что обнаружили?

• Полнота сбора анамнеза. Клинические оценщики отметили AMIE положительно: система задавала вопросы на уровне, сопоставимом с врачами первичного звена, по данным Google Research.
• Точность диагноза. AMIE показала результат, сопоставимый с терапевтами, по оценке тех же экспертов.
• Тактика лечения. Рекомендации системы по ведению пациента оценщики признали адекватными.
• Качество общения. Актёры-пациенты предпочли видеоконсультацию текстовому чату, что говорит о более естественном восприятии разговора с ИИ, когда задействованы голос и изображение.

Стоит обратить внимание: Google прямо указывает, что актёры предпочли именно видеоформат, а не текст. Для ИИ в медицине это существенный сдвиг: до сих пор большинство медицинских чат-ботов работали только с текстом и теряли огромный пласт клинической информации.

Что это значит для вас?

Авторам Дзена и копирайтерам. Тема ИИ в медицине переходит из абстрактных прогнозов в демонстрируемые результаты. Контент о телемедицине с ИИ-поддержкой сейчас актуален: можно разбирать, как видеоконсультации с нейросетью отличаются от привычных текстовых чат-ботов, и объяснять аудитории, что уже работает, а что пока только в лаборатории.

Маркетологам в медицине и healthtech. Если ваши клиенты, клиники или телемедицинские сервисы, факт появления мультимодальной (работающей одновременно с текстом, голосом и видео) ИИ-консультации от Google меняет ожидания рынка. Пациенты начнут спрашивать, почему ваш бот только печатает, а не разговаривает.

Предпринимателям и врачам в РФ. AMIE недоступна в России, это исследовательский проект Google без коммерческого запуска. Но направление важно: в РФ телемедицина активно развивается, врачи часто работают удалённо, и инструменты вроде СберЗдоровья или «Доктор рядом» пока ограничены текстовым форматом. Следить за тем, когда подобные мультимодальные решения появятся на российских платформах, стоит уже сейчас.

Google честно предупреждает, что AMIE, это пока лаборатория, а не продукт. Но именно лабораторные демонстрации такого уровня через два-три года становятся функциями в реальных сервисах, и готовиться к этому, будь вы врач, автор или маркетолог, лучше сейчас.

По данным Google Research