Реальная пациентка. Реальная переписка. Две операции в анамнезе и фотография, отправленная ИИ-ассистенту.
Показываем, что искусственный интеллект увидел на снимке, как связал изображение с историей пациента — и в какой момент передал решение пластическому хирургу.
Мы не могли вам этого не показать, так как это "революция возможностей",
поэтому сегодня мы откроем всю реальную внутрянку со скринами)
Пациентка написала, что ей дважды делали нижнюю блефаропластику.
Результатом второй операции она осталась недовольна и задала довольно простой вопрос: «Можно ли это исправить?»
На этом месте большинство администраторов хирурга, скорее всего, ограничились бы стандартным: «Запишитесь на консультацию к специалисту».
И это вполне логично и правильно - так как это уровень, где нужен профессиональный взгляд врача.
Но дальше произошло кое-что интереснее и я хочу вам это показать.
Пациентка отправила фотографию.
И ИИ начал её анализировать.
Сначала важная деталь.
ИИ получил не просто фотографию лица.
До этого из диалога ему уже было известно, что:
Затем она прислала фото.
И вот здесь начинается та часть диалога, ради которой мы вообще решили его показать.
ИИ не ограничился общей фразой о неудачном результате.
Он стал выделять конкретные визуальные признаки.
ИИ обратил внимание на область нижних век и отметил:
выраженное западение тканей в подглазничной области и в районе носослёзной борозды;
визуальное контурирование нижнего края орбиты;
признаки дефицита объёма мягких тканей в зоне нижних век;
асимметрию и неровность рельефа под глазами;
изменение естественного перехода от нижнего века к щеке.
Кроме того, ИИ связал увиденное с информацией о том, что пациентка уже перенесла два предыдущих вмешательства.
И сформулировал гипотезу: подобная картина может быть связана с изменением объёма тканей после предыдущих операций.
Обратите внимание на формулировку.
Не «причина именно такая».
А «может быть связана».
На предоставленном изображении — селфи-фотография пациентки (анфас, крупный план зоны глаз), присланная для первичной визуальной оценки после двух перенесенных операций нижней блефаропластики.
Визуальные данные (клиническая картина):
Текстовая и цифровая информация:
Контекстуально важные детали для формирования ответа:
[Изображение 2]
На предоставленном изображении отсутствуют текстовые данные, чеки, реквизиты, даты или числовая информация. Изображение представляет собой селфи пациента в зеркале, сделанное для визуальной оценки состояния зоны вокруг глаз после проведенных операций.
Визуальные данные, значимые для формирования ответа:
Вывод для ответа: Пациентке требуется очная консультация для оценки подвижности тканей, состояния круговой мышцы глаза и определения возможности проведения липофилинга или повторной реконструктивной блефаропластики для восполнения дефицита объема и коррекции рельефа.
Это уже не обычное распознавание картинки в духе:
«На фото женщина».
ИИ:
Именно сочетание текста и изображения относится к возможностям мультимодального искусственного интеллекта — систем, которые способны учитывать разные типы входных данных в одном контексте.
В медицине такие подходы активно исследуются, в том числе для совместной обработки изображений и клинической информации.
Но дальше интереснее.
Что отметил ИИ | Что это означает простыми словами | Что нельзя подтвердить только по фото |
Дефицит объёма | Под глазами некоторые участки выглядят «пустыми» | Почему именно изменился объём тканей |
Контурирование края орбиты | Контур области под глазом стал визуально заметнее | Анатомическую причину этого изменения |
Неровность рельефа | Переход от века к щеке выглядит неоднородным | Состояние глубоких тканей |
Асимметрия | Правая и левая стороны выглядят неодинаково | Насколько она выражена в движении |
Возможные послеоперационные изменения | ИИ учитывает две предыдущие операции | Характер рубцов и реальное состояние тканей |
И вот здесь возникает главный вопрос.
Как ИИ вообще дошёл от фотографии до таких формулировок?
Потому что фотография была только половиной информации.
Вторую половину дал сам диалог.
Условно процесс можно представить так:
фотография → визуальный признак → история пациента → возможная гипотеза → вопрос для проверки хирургом.
Например: ИИ видит изменение рельефа под глазами.
Одновременно система знает о двух предыдущих вмешательствах.
Поэтому она рассматривает послеоперационные изменения как один из возможных контекстов.
Но не останавливается на этом.
Потому что некоторые вещи статичная фотография показать просто не может.
Нет.
ИИ действительно способен анализировать изображение, описывать заметные особенности и связывать их с контекстом.
Но визуальный анализ фотографии и медицинская диагностика — не одно и то же.
Поэтому точнее описать произошедшее так:
ИИ провёл предварительный визуальный разбор фотографии, выделил признаки и сформировал гипотезы, которые должен проверить пластический хирург.
Мы привыкли, что чат-бот, который многие врачи уже используют для автоматизации выдачи какой-то информации пациентам:
отвечает на вопрос;
сообщает цену;
спрашивает телефон;
предлагает записаться.
Здесь система делает другой тип работы.
Она получает визуальные данные пациента и пытается структурировать их в контексте конкретной медицинской ситуации.
Применение искусственного интеллекта в пластической хирургии уже изучается в задачах анализа изображений, оценки результатов, хирургического планирования и поддержки принятия решений.
При этом исследователи отдельно подчёркивают необходимость клинического контроля, проверки качества и осторожности при интерпретации результатов AI.
И теперь самое интересное.
Можно сколько угодно обсуждать возможности ИИ со стороны.
Но здесь есть ещё один участник.
Тот самый пластический хирург, для которого и работает этот ИИ-ассистент.
Хирурги очень щепетильно относятся к диалогам со своими пациентами.
В пластической хирургии все должно быть очень деликатно и человечно (поэтому многие настороженно пока относятся к подключение себе ИИ онлайн-ассистентов для переписок в соцсетях)
Моя команда разработчиков, которая обучает таких ИИ онлайн-ассистентов "держит руку на пульсе".
И мы периодически отправляем скрины переписок, которые ведет ИИ самим хирургам (так как им читать и смотреть все это некогда)
И вот какую реакцию мы получили, когда хирург посмотрел этот аналитический разбор.
В одном из ответов пациентке ИИ онлайн-ассистент объясняет приблизительно следующее.
"После двух трансконъюнктивальных операций изменения могут быть связаны не с тем, что нужно «ещё что-то удалить», а, наоборот, с вопросом объёма и перехода между нижним веком и щекой."
Но окончательно определить возможный способ коррекции ИИ не берётся.
Он возвращает пациента к необходимости осмотра.
Мотивируя свое предложение:
нужно оценить подвижность век;
мимику;
ткани в разных положениях взгляда;
рубцы;
тонус.
Резюмируя свой анализ:
И только после этого хирург сможет ответить, существует ли безопасный вариант коррекции.
Задача | ИИ в показанном диалоге | Пластический хирург |
Учитывать историю обращения | Да | Да |
Анализировать фотографию | Да | Да |
Выделять визуальные особенности | Да | Да |
Формировать предварительные гипотезы | Да | Да |
Проверить тонус тканей руками | Нет | Да |
Оценить ткани в динамике | Ограниченно по присланным материалам | Да |
Оценить рубцы клинически | Нет | Да |
Установить причину изменений | Нет по одному фото | Да, после необходимой оценки |
Выбрать метод коррекции | Нет | Да |
Принять решение об операции | Нет | Да |
И вот здесь, пожалуй, начинается действительно интересный разговор об ИИ онлайн-ассистентах в пластической хирургии.
- «сколько информации ИИ способен подготовить ещё до того, как пациент попадёт к врачу?»
- «похоже такой ИИ реально может быть незаменимым онлайн-ассистентом в переписках с пациентами..» (это для тех хирургов, кто еще присматривается к технологии ИИ онлайн-ассистент для переписок в соцсетях)
После анализа ИИ онлайн-ассистент мягко предложил пациентке прийти на консультацию к хирургу.
Пациентка выбрала онлайн-консультацию.
(листайте, показываем как он это сделал 👇)
ИИ уточнил необходимые данные, собрал контакт и автоматически подготовил краткое summary для команды.
В рабочий чат хирурга пришло структурированное обращение:
То есть команде уже не нужно перечитывать всю переписку, чтобы понять контекст.
👉 Кстати, здесь можно посмотреть короткое интервью администратора хирурга, в команду которого мы тоже внедрили ИИ онлайн-ассистента.
Она как раз там делится тем, как ей удобно стало работать, когда она получает уже такую готовую заявку.
По временным меткам на скриншотах от первого обращения до передачи информации прошло примерно 8 минут.
Стоимость всей переписки, отображённая в системе: 64,95 ₽
Но попробуем посмотреть не на сумму.
За это время ИИ успел:
И именно поэтому этот кейс мы решили сохранить и выложить в открытый доступ.
Как говорится "лучше один раз увидеть, чем сто раз услышать".
Но, конечно, ИИ онлайн-ассистента надо грамотно обучить, как в нашем примере:
- чтобы он не ставил диагнозы
- не выдавал свое мнение за мнение хирурга
Несколько лет назад мы и мечтать не могли о таком помощнике (никто не мог "разгрузить хирурга")
А теперь пациент способен отправить системе фотографию после двух операций - и получить структурированный предварительный разбор того, что на ней видно.
Ответ оказался интереснее, чем мы ожидали.
Он не просто увидел изображение.
Он сопоставил его с историей.
Разложил визуальную картину на отдельные признаки.
Сформировал гипотезы.
И сам остановился там, где начиналась работа врача.
Поэтому главный вопрос после этого эксперимента звучит уже немного иначе.
Если ИИ сегодня умеет делать это — что он будет способен взять на себя завтра?
Полное интервью дала пластический хирург Е. Вовк, которая сначала не поверила "что такое возможно, а потом как распробовала" смотрите здесь
Юлия Буташова, CEO "Butashova Aesthetic"
Бизнес-стратег по росту потока пациентов из онлайн. AI и digital-консалтинг для пластических хирургов и high-tech медицины.