Este documento describe las aplicaciones de realidad virtual y realidad mixta en la formación médica y planificación quirúrgica. Se propone usar estas tecnologías para acelerar la comprensión de tratamientos médicos a través de tutoriales interactivos y para permitir que los médicos practiquen procedimientos quirúrgicos de forma virtual antes de realizarlos en pacientes reales. También se mencionan otras aplicaciones como el apoyo remoto en quirófanos y la rehabilitación de pacientes mediante la superposición de imágenes médicas
2. Qué veremos
2
1. Formación Teórica
2. Formación Práctica
3. Planificación de quirófano
4. Otras aplicaciones de Realidades
3. OBJETIVOS
• Acelerar la comprensión del dispositivo o tratamiento mediante una
aplicación llamativa y muy visual.
• Reducción de las visitas y desplazamientos a hospitales por los formadores
expertos.
CARACTERÍSTICAS GENERALES
o Tutorial con hologramas 3D.
o Comandos de voz para facilitar su uso.
o Avatares que explican el funcionamiento
o Multi-idioma y portable a tabletas IOS y Android (WaveEngine)..
ESCENARIO
1. El médico visualiza un avatar en 3D, que lleva a cabo la introducción y
explicación del dispositivo o tratamiento
2. Visualización de diferentes partes, cómo funciona.
FORMACIÓN TEÓRICA (AR)
5. OBJETIVOS
o Crear un entorno virtual donde los médicos podrán aprender a utilizar un
dispositivo o realizar una intervención como si fuese real.
o Practicar la intervención siguiendo los protocolos médicos.
CARACTERÍSTICAS GENERALES
o Acceso a Modelos 3D
o Aplicar niveles de dificultad (paneles de ayuda)
ESCENARIO
1. Simular un entorno real, donde el médico entrará a un quirófano con un
paciente al que hay que realizar una técnica de laparoscopia de forma
correcta sin lesiones.
2. Realizar una exploración del paciente
3. Reconocer la lesión y aplicar cirugía
4. A la finalización resumen de la lesion y el trabajo realizado por el médico.
FORMACIÓN PRÁCTICA (VR)
8. o Asistencia remota mediante Skype con HoloLens
o Monitorización en quirófano de imágenes DICOM y seguimiento
o apoyo en quirófano
o Superposición de la imagen DICOM con la realidad
o Visor de imágenes DICOM con información de un paciente
o Marketing para hospitales
o Rehabilitación de pacientes de ictus con ciertas parálisis
OTRAS
APLICACIONES
8
12. www.plainconcepts.com
MADRID
Paseo de la Castellana 163, 10º
28046 Madrid. España
T. (+34) 91 5346 836
BILBAO
Nervión 3 , 6º
48001 Bilbao. España
T. (+34) 94 6008 168
BARCELONA
Av. Josep Tarradellas 10, 6º 1ª
08029 Barcelona. España
T. (+34) 93 3607 114
SEVILLA
Avenida de la innovación s/n
Edificio Renta Sevilla, 3º A
41020 Sevilla. España
DUBAI
Dubai Internet City. Building 1
73030 Dubai. EAU
T. (+971) 4 551 6653
LONDON
Impact Hub Kings Cross
24B York Way, N1 9AB
London. UK
SEATTLE
1511, Third Ave
Seattle WA 98101. USA
T. (+1) 206 708 1285
Notas del editor
quiero contaros varios ejemplos de aplicaciones de realidad aumentada y virtual en sanidad para ayudaros a que seáis los primeros en implementar este tipo de tecnologías.
La gente nos pregunta qué ejemplos hay, qué tipo de proyectos podemos hacer, en esta charla os vamos a ayudar a que salgáis con nuevas ideas.
Se trata de ser el primero en utilizar las tecnologías más innovadoras para posicionarse en el mercado y ser un referente para médicos y pacientes, y nosotros os vamos a decir cómo serlo.
Uno de los ejemplos dónde emplear estas tecnologías es en Formación.
Cómo se forma actualmente el personal médico:
Utiliza Vídeos
Formadores de dispositivos que se desplazan a los hospitales
Revisión de imágenes DICOM previo a una intervención quirúrgica (DICOM es el estándar utilizado en medicina para las imágenes)
Por qué no sustituir todo esto con modelos 3D visualizados con HoloLens?.
Se trata de motivar también a los médicos en el uso de nuevas técnicas y dispositivos, que tengan ganas de aprender, y para esto utilizamos HoloLens.
Visualizador de imágenes dicom para ver el detalle de diferentes partes del cuerpo sobre las que se va a interactuar en una operación quirúrgica por ejemplo
En este punto los médicos ya se han formado de la teoría, y ahora hay qu ponerla en práctica utilizando otros métodos de formación
Se trata de formación práctica con RV (gafas tipo oculus, htc vive), donde se consigue que el médico se aisle de la realidad e interiorice mejor los conocimientos. Está utilizado en procesos de curva de aprendizaje muy largas.
En este ejemplo el médico aprende a realizar una técnica de laparoscopia
Se pueden simular las pulsaciones del paciente
Alertas con la pantalla en rojo si está lesionando alguna zona durante la operación
Ayuda mediante paneles con instrucciones
Como indicaba, está utilizado en procesos de curva de aprendizaje muy largas, para que el médico tenga una comprensión más rápida al aislarse el mundo real
En Plain Concepts ya estamos llevando empezando a plantear soluciones de este tipo
La planificación de un quirófano conlleva inversiones muy altas y de larga duración, donde se involucran a muchos stakeholders (tomadores de decisiones).
HoloLens permite facilitar este proceso accediendo directamente al diseño del quirófano y colocando todos los elementos, reduce los tiempos de toma de decisión y la solución final es exactamente la esperada.
Puedes mostrar al cliente la solución final trayéndola al mundo real, y colocándola en el espacio del quirófano a escala real.
En Plain Concepts tenemos soluciones similares, de mobiliario de oficina.
En las dos imágenes que diseñamos en Plain Concepts, la idea era que un paciente pueda visualizar sus imágenes DICOM de un tac o escáner, y el médico tenga el control de lo que visualiza el paciente mediante una tableta. Es una forma de llamar la atención en los pacientes, marketing para el hospital.
´Simular en quirófano que tienes varias pantallas
En este ejemplo que vamos a ver, es necesario realizar una punción con un determinado ángulo, para llegar a la zona donde es necesario tomar la muestra,
hololens ayuda al médico a confirmar el ángulo que lleva la aguja para el momento de la punción.
Espero haberos aportado nuevas ideas para mejorar la sanidad.