Использование технологии смешанной реальности в хирургии - новый тренд отечественной медицины

Заместитель директора Клиники высоких медицинских технологий им. Н.И. Пирогова СПбГУ по урологии, д.м.н. Нариман Гаджиев в своей хирургической практике использует инновационную отечественную программу в очках смешанной реальности Microsoft HoloLens 2 для достижения наиболее эффективного результата в лечении онкоурологических заболеваний.

Очень часто технологию смешанной реальности мы используем при резекции почек - когда мы удаляем образование почки, пытаясь сохранить почку целиком. Так, к нам поступил пациент в возрасте 56 лет с крупным образованием 3 см нижнего полюса левой почки. Образование носило эндофитный характер, то есть располагалось в ткани почки и не выступало наружу: такие опухоли очень тяжело находить. Мы обратились к технологии смешанной реальности, используя программное обеспечение HLOIA. Это предполагает три этапа: на первом этапе доктор выполняет компьютерную томографию с контрастированием или получает готовую компьютерную томографию от самого пациента с образованием почки. Результаты исследования загружаются в программу-просмотрщик, абсолютно доступный для большинства практикующих врачей. Так, в нашей Клинике для этого применяется отечественная программа INOBITEC, разработанная воронежскими программистами.

Просмотрщик позволяет врачу сегментировать органокомплекс путем прокрашивания структур - почки, опухоли, сосудов - в разные цвета. После сохранения изображения оно отправляется в облачный сервис HLOIA – это второй этап, и на третьем этапе уже готовый цифровой органокомплекс загружается в приложение HLOIA, установленное в очки смешанной реальности. После чего врач, находясь в операционной, одевает очки смешанной реальности, из которых готовая модель - виртуальный органокомплекс - проецируется в любую точку физического пространства.

Затем объект вымышленной реальности - виртуальная почка - помещается на реальную, благодаря чему врач получает получает полную информацию о точном местоположении сосудов, мочеточника, а также о точной локализации опухоли. Данная информация очень важна - именно это позволяет быстро и безопасно найти почечную артерию: её выделение необходимо для перед последующим удалением опухоли для пережимания сосудистой ножки и редуцирования кровотока во избежание кровотечения. Время, которое требуется на обнаружение невидимой для глаза опухоли, также сокращается: точно её иссекая, мы максимально сохраняем почку.

Всё это позволяет выполнить операцию успешно, сохранив почку и удалив образование. Кроме всего прочего, в ходе операции врач может обращаться к модели органокомплекса как к справочной информации - ему не нужно оставлять инструменты, отвлекаться, отходить к монитору, искать снимки пациента - смешанная реальность позволяет ему видеть полную картину одновременно.

Использование технологии смешанной реальности позволяет хирургу лучше подготовиться к операции и сократить время на принятие решений во время операции. Благодаря этому достигается максимальная концентрация внимания врача на процессе и сокращается длительность проведения хирургических вмешательств. Но, что самое главное - минимизируется риск возникновения осложненийНариман Гаджиев

В целом смешанная реальность «Mixed reality» (MR) - это новое технологическое решение, основанное на комбинации дополненной реальности (AR) и виртуальной реальности (VR), которое позволяет создавать виртуальные проекции объектов в реальном физическом мире,

По факту, технология смешанной реальности является элементом радиомики - науки об аналитике и обработке рутинных методов лучевой диагностики с целью извлечения совершенно новых характеристик. Смешанная реальность позволяет создавать индивидуальные модели внутренней анатомии человека на основе диагностических данных, полученных с КТ и МРТ.

Использование программного обеспечения HLOIA и очков смешанной реальности позволили встраивать объекты дополненной реальности в физически существующий мир в ходе оперативного вмешательства. Так образуется единое целое в новой смешанной реальности, с которой можно взаимодействовать.

Разработки уже оценило передовое научное сообщество - так, на прошедшем в Стамбуле Конгрессе по новым технологиям в урологии UROTECH русский проект HLOIA занял почётное второе место. Проект разрабатывается совместно с профессором Игорем Семенякиным, МГТУ им. Н.Э. Баумана и наукоградом Иннополис. Последним нововведением программы является возможность подключения удалённого наставника-ментора, которая позволяет привлекать опытных хирургов во время операции и работать с виртуальной моделью в режиме смешанной реальности совместно.

Анализируя опыт зарубежных коллег и оценивая перспективы использования виртуальных технологий в сфере здравоохранения, становится ясно, что это - серьёзнейший проект государственного значения и масштабов, способный перевернуть понимание и существующий порядок оказания хирургической помощи.