30
Realidade Virtual Realidade Virtual em Medicina em Medicina

Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Embed Size (px)

Citation preview

Page 1: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Realidade Virtual Realidade Virtual em Medicinaem Medicina

Page 2: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Renato M.E. Sabbatini, PhD

DiretorNúcleo de Informática Biomédica

Universidade Estadual de Campinas

Brasil

Page 3: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Tipos de Simulação

• Simulação em 3DSimulação em 3DUtilizando um mouse ou joystick, o usuário manipula o Utilizando um mouse ou joystick, o usuário manipula o ângulo de visão na tela 2D.ângulo de visão na tela 2D.

• Realidade AumentadaRealidade AumentadaUtilizando acionadores 3D, o usuário manipula o ângulo Utilizando acionadores 3D, o usuário manipula o ângulo de visão na tela 2D e age sobre a cena digital.de visão na tela 2D e age sobre a cena digital.

• Realidade VirtualRealidade VirtualUtilizando acionadores 3D e visores 3D, o usuário obtém e Utilizando acionadores 3D e visores 3D, o usuário obtém e manipula cenas digitais tridimensionais.manipula cenas digitais tridimensionais.

Page 4: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Áreas de Aplicação

• PlanejamentoPlanejamento• ImagenologiaImagenologia• Endoscopia virtualEndoscopia virtual• Cirurgia virtualCirurgia virtual• BiomecânicaBiomecânica• TelecirurgiaTelecirurgia• Mundos artificiaisMundos artificiais• BiosimulaçãoBiosimulação

Page 5: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Periféricos para Realidade Virtual

Head Mounted Display

• Um visor de LCD para cada olho com visão estereoscópica

• Sensor de posição absoluta da cabeça

• Fones estereofônicos

Page 6: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Periféricos para Realidade Virtual

• Sensores de flexão para os cinco dedos

• Sensor de posição absoluta do punho

DataGlove

Page 7: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Realidade VirtualFeedback Visual/Auditivo

AtuadorAtuador

UsuárioUsuário

ComputadorComputador

Imagem 3D

Sensores

AtuaçãoPosição

Coordenaçãovisuomotora

Page 8: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Integração Visuomotora

Imagem gerada pelo computadorcom posição da DataGlove

Page 9: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Periféricos para Realidade Virtual

Digitalizador 3D

Sensores Especializados

Page 10: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Periféricos para Realidade Aumentada

Óculos com Lentes Polaroid

Joystick 3DTrackball 3D

Page 11: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Periféricos para Realidade Aumentada

ImmersaDeskDisplay 3D sincronizado com óculos Polaroid e joystick 3D

Page 12: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Periféricos para Realidade Virtual

The Cave

Ambiente Imersivo 3DMultiusuário

Page 13: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Realidade VirtualFeedback de Forças

AtuadorAtuador

UsuárioUsuário

ComputadorComputador

Imagem 3D

Sensores

AtuaçãoPosição

Coordenaçãovisuomotora

Feedback

Feedback

Page 14: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Periféricos para Realidade Virtual

Interface Háptica[Toque e Força]

Page 15: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Simulação de Endoscopia

Manipuladores Tridimensionaiscom Sensores Digitais

Endocirurgia Laparoscopia

Page 16: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Simulação de Endoscopia

Manipuladores Visualizadores

Page 17: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Simulação de Cirurgia Videolaparoscópica

Projeto KISMETCentro de Pesquisa de Karlsruhe

Page 18: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Estação de Simulação

Imagensgeradasem 3D

Simulação de Cirurgia Videolaparoscópica

Page 19: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Treinamento por Realidade Virtual

Venopunção

Page 20: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Ureteroscopia

Treinamento por Realidade Virtual

Page 21: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Treinamento por Realidade Virtual

Neuroendoscopia

Biópsia Estereotáxica

Page 22: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Treinamento por Realidade Virtual

Videoartroscopia do Joelho

Page 23: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Simulação de MicrocirurgiasStand com micromanipuladores

Visão do campo cirúrgico simulado

Page 24: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Simulação de Microcirurgias

Page 25: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Realidade AumentadaVirtual Temporal Bone

ImmersaDesk comÓculos Polaroid eJoystick 3D

Page 26: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Simulador Cirurgia ORL

Campo cirúrgico comtomografia

Comando em linguagemnatural mostra deslocamento doinstrumento

Page 27: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Superposição de Imagens

Visão do cirurgiãoTomografia 3D do cérebro

Cirurgião comHMD

Page 28: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Endoscopia VirtualSer Humano Visível

O colon é reconstruído a partir de seções O colon é reconstruído a partir de seções transversais anatômicas, e a movimentação transversais anatômicas, e a movimentação pelo seu interior é simulado por softwarepelo seu interior é simulado por software

Page 29: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Outras Aplicações de RV

• Cateterismo cardíaco

• Treinamento de suturas

• Inserção de cateter na veia subclávia

• Discotomia vertebral laparoscópica

• Colecistectomia laparoscópica

• Treinamento em trauma de guerra

• Simulação de cirurgia craniofacial

Page 30: Realidade Virtual em Medicina. Renato M.E. Sabbatini, PhD Diretor Núcleo de Informática Biomédica Universidade Estadual de Campinas Brasil

Recursos na Internet

• Medicine and VR: A Guide to the Literaturehttp://www.hitl.washington.edu/kb/medvr/

• Medicine and VR Linkshttp://www.hitl.washington.edu/kb/medapps.html

• MedWeb: Virtual Reality in Medicinehttp://www.gen.emory.edu/MEDWEB/keyword/virtual_reality_in_medicine/virtual_reality_in_medicine.html