47
Realidade Virtual Realidade Virtual em Medicina em Medicina

Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

  • Upload
    lyhuong

  • View
    214

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Realidade Virtual Realidade Virtual em Medicinaem Medicina

Page 2: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Renato M.E. Sabbatini, PhDDiretor

Centro Internacional de Tecnologias de Informação e Comunicação em Saúde

Instituto Edumed, Campinas, SPBrasil

Apresentado por:

Page 3: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Tipos de Simulações Realísticas

• Simulação em 3DSimulação em 3DUtilizando um mouse ou joystick, o usuário manipula o Utilizando um mouse ou joystick, o usuário manipula o ângulo de visão na tela 2D.ângulo de visão na tela 2D.

• Realidade AumentadaRealidade AumentadaUtilizando acionadores 3D, o usuário manipula o ângulo Utilizando acionadores 3D, o usuário manipula o ângulo de visão na tela 2D e age sobre a cena digital.de visão na tela 2D e age sobre a cena digital.

• Realidade VirtualRealidade VirtualUtilizando acionadores 3D e visores 3D, o usuário obtém e Utilizando acionadores 3D e visores 3D, o usuário obtém e manipula cenas digitais tridimensionais.manipula cenas digitais tridimensionais.

Page 4: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Telepresença

• É a operação de dispositivos, como robôs, a distância, por meio de uma interface humano-computador imersiva

• Utiliza tecnologia para dar a sensação de que uma pessoa está presente de forma atuante e sentiente em um ambiente distante daquele em que se encontra

Page 5: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Áreas de Aplicação

• PlanejamentoPlanejamento• ImagenologiaImagenologia• Endoscopia virtualEndoscopia virtual• Cirurgia virtualCirurgia virtual• BiomecânicaBiomecânica• TelecirurgiaTelecirurgia• Mundos artificiaisMundos artificiais• BiosimulaçãoBiosimulação

Page 6: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Periféricos para Realidade Virtual

Head Mounted Display

• Um visor de LCD para cada olho com visão estereoscópica

• Sensor de posição absoluta da cabeça

• Fones estereofônicos

Page 7: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Optical See-Through 3D

Page 8: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Periféricos para Realidade Virtual

• Sensores de flexão para os cinco dedos

• Sensor de posição absoluta do punho

DataGlove

Page 9: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Realidade VirtualFeedback Visual/Auditivo

Atuador

Usuário

Computador

Imagem 3D

Sensores

AtuaçãoPosição

Coordenaçãovisuomotora

Page 10: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Integração Visuomotora

Imagem gerada pelo computadorcom posição da DataGlove

Page 11: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Periféricos para Realidade Virtual

Digitalizador 3D

Sensores Especializados

Page 12: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Atuadores Robóticos

Page 13: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Periféricos para Realidade Aumentada

Óculos com Lentes Polaroid

Joystick 3DTrackball 3D

Page 14: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Periféricos para Realidade Aumentada

ImmersaDeskDisplay 3D sincronizado com óculos Polaroid e joystick 3D

Page 15: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Radiologia em 3D

iSpace – Universidade de Rotterdam

Page 16: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Visualização de Sinais Biológicos

Page 17: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Periféricos para Realidade Virtual

The Cave

Ambiente Imersivo 3DMultiusuário

Page 18: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Realidade VirtualFeedback de Forças

Atuador

Usuário

Computador

Imagem 3D

Sensores

AtuaçãoPosição

Coordenaçãovisuomotora

Feedback

Feedback

Page 19: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Periféricos para Realidade Virtual

Interface Háptica[Toque e Força]

Page 20: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Simulação de Endoscopia

Manipuladores Tridimensionaiscom Sensores Digitais

Endocirurgia Laparoscopia

Page 21: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Simulação de Endoscopia

Manipuladores Visualizadores

Page 22: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Simulação de Cirurgia Videolaparoscópica

Projeto KISMETCentro de Pesquisa de Karlsruhe

Page 23: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Estação de Simulação

Imagensgeradasem 3D

Simulação de Cirurgia Videolaparoscópica

Page 24: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e
Page 25: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Treinamento por Realidade Virtual

Venopunção

Page 26: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Treinamento para punção da medula óssea

LSI/Politécnica/USP

Page 27: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Ureteroscopia

Treinamento por Realidade Virtual

Page 28: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Treinamento por Realidade Virtual

Neuroendoscopia

Biópsia Estereotáxica

Page 29: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Treinamento por Realidade Virtual

Videoartroscopia do Joelho

Page 30: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Simulação de MicrocirurgiasStand com micromanipuladores

Visão do campo cirúrgico simulado

Page 31: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Simulação de Microcirurgias

Page 32: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Realidade AumentadaVirtual Temporal Bone

ImmersaDesk comÓculos Polaroid eJoystick 3D

Page 33: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Simulador Cirurgia ORL

Campo cirúrgico comtomografia

Comando em linguagemnatural mostra deslocamento doinstrumento

Page 34: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Simulador de Cirurgia Ocular

Page 35: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Planejamento Cirúrgico

Page 36: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

CADCAM

Sistema de Prototipagem Rápidapor Sinterização 3D a Laser

Page 37: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

CAD/CAM em Cirurgia

Projeto PROMEDPrototipagem RápidaCENPRA Campinas

Page 38: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Superposição de Imagens

Visão do cirurgiãoTomografia 3D do cérebro

Cirurgião comHMD

Page 39: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Realidade Aumentada na Cirurgia do Fígado

Page 40: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Colonoscopia Virtual

O colon é reconstruído a partir de O colon é reconstruído a partir de seções transversais de MRI, e a seções transversais de MRI, e a movimentação pelo seu interior é movimentação pelo seu interior é simulado por softwaresimulado por software

Page 41: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Telepresença na Cirurgia

Page 42: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Cirurgia Robótica

Page 43: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Estação de Trabalho Telepresencial

Page 44: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Controles

VinciSurgical Robot

Page 45: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Videoconferência Telepresencial

Page 46: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Outras Aplicações de RV

•Cateterismo cardíaco•Treinamento de suturas•Inserção de cateter na veia subclávia•Discotomia vertebral laparoscópica•Colecistectomia laparoscópica•Treinamento em trauma de guerra•Simulação de cirurgia craniofacial

Page 47: Realidade Virtual em Medicina - Sabbatini.com · de visão na tela 2D e age sobre a cena digital. • Realidade Virtual Utilizando acionadores 3D e visores 3D, o usuário obtém e

Contato

Renato M.E. [email protected]

http://renato.sabbatini.com (19) 3295-8191