Реальная пациентка. Реальная переписка. Две операции в анамнезе и фотография, отправленная ИИ-администратору хирурга.
Показываем, что виртуальный ассистент на базе искусственного интеллекта увидел на снимке, как связал изображение с историей пациента — и в какой момент передал решение пластическому хирургу.
Мы не могли вам этого не показать, так как это "революция возможностей",
поэтому сегодня мы откроем всю реальную внутрянку со скринами)
Пациентка написала, что ей дважды делали нижнюю блефаропластику.
Результатом второй операции она осталась недовольна и задала довольно простой вопрос: «Можно ли это исправить?»
На этом месте большинство администраторов хирурга, скорее всего, ограничились бы стандартным: «Запишитесь на консультацию к специалисту».
И это вполне логично и правильно - так как это уровень, где нужен профессиональный взгляд врача.
Но дальше произошло кое-что интереснее и я хочу вам это показать.
Пациентка отправила фотографию в переписке. И ИИ админ начал её анализировать.
Сначала важная деталь.
ИИ администратор получил не просто фотографию лица.
До этого из диалога с пациенткой ему уже было известно, что:
Затем она прислала фото.
И вот здесь начинается та часть диалога, ради которой мы вообще решили его показать.
ИИ администратор хирурга не ограничился общей фразой о неудачном результате.
Он стал выделять конкретные визуальные признаки.
ИИ администратор обратил внимание на область нижних век и отметил:
выраженное западение тканей в подглазничной области и в районе носослёзной борозды;
визуальное контурирование нижнего края орбиты;
признаки дефицита объёма мягких тканей в зоне нижних век;
асимметрию и неровность рельефа под глазами;
изменение естественного перехода от нижнего века к щеке.
Кроме того, ИИ администратор связал увиденное с информацией из переписки о том, что пациентка уже перенесла два предыдущих вмешательства.
И сформулировал гипотезу: подобная картина может быть связана с изменением объёма тканей после предыдущих операций.
Обратите внимание на формулировку.
Не «причина именно такая».
А «может быть связана».
На предоставленном изображении — селфи-фотография пациентки (анфас, крупный план зоны глаз), присланная для первичной визуальной оценки после двух перенесенных операций нижней блефаропластики.
Визуальные данные (клиническая картина):
Текстовая и цифровая информация:
Контекстуально важные детали для формирования ответа:
[Изображение 2]
Изображение представляет собой селфи пациента в зеркале, сделанное для визуальной оценки состояния зоны вокруг глаз после проведенных операций.
Визуальные данные, значимые для формирования ответа:
Вывод для ответа: Пациентке требуется очная консультация для оценки подвижности тканей, состояния круговой мышцы глаза и определения возможности проведения липофилинга или повторной реконструктивной блефаропластики для восполнения дефицита объема и коррекции рельефа.
Это уже не обычное распознавание картинки в духе:
«На фото женщина».
Виртуальный ассистент хирурга:
Именно сочетание текста и изображения относится к возможностям мультимодального искусственного интеллекта — систем, которые способны учитывать разные типы входных данных в одном контексте.
В медицине такие подходы активно исследуются, в том числе для совместной обработки изображений и клинической информации.
Но дальше интереснее.
Что отметил ИИ | Что это означает простыми словами | Что нельзя подтвердить только по фото |
Дефицит объёма | Под глазами некоторые участки выглядят «пустыми» | Почему именно изменился объём тканей |
Контурирование края орбиты | Контур области под глазом стал визуально заметнее | Анатомическую причину этого изменения |
Неровность рельефа | Переход от века к щеке выглядит неоднородным | Состояние глубоких тканей |
Асимметрия | Правая и левая стороны выглядят неодинаково | Насколько она выражена в движении |
Возможные послеоперационные изменения | ИИ учитывает две предыдущие операции | Характер рубцов и реальное состояние тканей |
Нет.
ИИ администратор в переписках действительно способен анализировать изображение, описывать заметные особенности и связывать их с контекстом.
Но визуальный анализ фотографии и медицинская диагностика — не одно и то же.
Поэтому точнее описать произошедшее так: ИИ администратор провёл предварительный визуальный разбор фотографии, выделил признаки и сформировал гипотезы, которые должен проверить пластический хирург.
Мы привыкли, что чат-бот, который многие врачи уже используют для автоматизации выдачи какой-то информации пациентам:
отвечает на вопрос;
сообщает цену;
спрашивает телефон;
предлагает записаться.
Здесь система делает другой тип работы.
Она получает визуальные данные пациента и пытается структурировать их в контексте конкретной медицинской ситуации.
Можно сколько угодно обсуждать возможности ИИ администратора со стороны.
Но здесь есть ещё один участник.
Тот самый пластический хирург, для которого и работает этот ИИ-ассистент.
Хирурги очень щепетильно относятся к диалогам со своими пациентами.
В пластической хирургии все должно быть очень деликатно и человечно (поэтому многие настороженно пока относятся к подключение себе ИИ онлайн-ассистентов для переписок в соцсетях)
Моя команда разработчиков, которая обучает таких ИИ онлайн-администраторов"держит руку на пульсе".
И мы периодически отправляем скрины переписок, которые ведет ИИ самим хирургам (так как им читать и смотреть все это некогда)
И вот какую реакцию мы получили, когда хирург посмотрел этот аналитический разбор.
Задача | ИИ в показанном диалоге | Пластический хирург |
Учитывать историю обращения | Да | Да |
Анализировать фотографию | Да | Да |
Выделять визуальные особенности | Да | Да |
Формировать предварительные гипотезы | Да | Да |
Проверить тонус тканей руками | Нет | Да |
Оценить ткани в динамике | Ограниченно по присланным материалам | Да |
Оценить рубцы клинически | Нет | Да |
Установить причину изменений | Нет по одному фото | Да, после необходимой оценки |
Выбрать метод коррекции | Нет | Да |
Принять решение об операции | Нет | Да |
И вот здесь, пожалуй, начинается действительно интересный разговор об ИИ онлайн-ассистентах в пластической хирургии.
- «сколько информации ИИ администратор способен подготовить ещё до того, как пациент попадёт к врачу?»
- «похоже такой ИИ реально может быть незаменимым вирутальным ассистентом в переписках с пациентами..» (это для тех хирургов, кто еще присматривается к технологии ИИ администраторов для переписок в соцсетях)
После анализа ИИ-ассистент мягко предложил пациентке прийти на консультацию к хирургу.
Пациентка выбрала онлайн-консультацию.
(листайте, показываем как он это сделал 👇)
ИИ онлайн-менеджер уточнил необходимые данные, собрал контакт и автоматически подготовил краткое summary для команды.
В рабочий чат хирурга пришло структурированное обращение:
То есть команде уже не нужно перечитывать всю переписку, чтобы понять контекст.
👉 Кстати, здесь можно посмотреть короткое интервью администратора хирурга, в команду которого мы тоже внедрили ИИ администратора (онлайн менеджера по перепискам в соцсетях и мессенджерах).
Она как раз там делится тем, как ей удобно стало работать, когда она получает уже такую готовую заявку.
По временным меткам на скриншотах от первого обращения до передачи информации прошло примерно 8 минут.
Стоимость всей переписки, отображённая в системе: 64,95 ₽
Но попробуем посмотреть не на сумму.
За это время ИИ администратор успел:
И именно поэтому этот кейс мы решили сохранить и выложить в открытый доступ.
Как говорится "лучше один раз увидеть, чем сто раз услышать".
Но, конечно, ИИ онлайн-ассистента надо грамотно обучить, как в нашем примере:
- чтобы он не ставил диагнозы
- не выдавал свое мнение за мнение хирурга
Несколько лет назад мы и мечтать не могли о таком помощнике (никто не мог "разгрузить хирурга")
А теперь пациент способен отправить ИИ менеджеру в переписке фотографию после двух операций - и получить структурированный предварительный разбор того, что на ней видно.
Полное интервью дала пластический хирург Е. Вовк, которая сначала не поверила "что такое возможно, а потом как распробовала" смотрите здесь
Юлия Буташова, CEO "Butashova Aesthetic"
Бизнес-стратег по росту потока пациентов из онлайн. AI и digital-консалтинг для пластических хирургов и high-tech медицины.