18
3º Congresso Nacional de Biomecânica 11-12 Fevereiro 2009, Bragança Métodos de Segmentação de Imagem para Análise da Marcha Maria João M. Vasconcelos, João Manuel R. S. Tavares [email protected], [email protected]

Métodos de Segmentação de Imagem para Análise da Marcha

  • Upload
    others

  • View
    8

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Métodos de Segmentação de Imagem para Análise da Marcha

3º Congresso Nacional de Biomecânica11-12 Fevereiro 2009, Bragança

Métodos de Segmentação de Imagem para Análise da Marcha

Maria João M. Vasconcelos, João Manuel R. S. Tavares

[email protected], [email protected]

Page 2: Métodos de Segmentação de Imagem para Análise da Marcha

Índice:

• Introdução;

• Métodos estudados;

• Aplicações;

• Conclusões;

• Trabalho futuro.

Maria Vasconcelos, João Tavares 2Métodos de Segmentação de Imagem para Análise da Marcha

Page 3: Métodos de Segmentação de Imagem para Análise da Marcha

Introdução:

Neste trabalho faz-se uma introdução aos métodos de

segmentação de estruturas em sequências de imagem,

adequados para análise da marcha.

Apresenta-se dois métodos de segmentação de imagem,

discutindo as suas vantagens e possíveis aplicações.

Maria Vasconcelos, João Tavares 3Métodos de Segmentação de Imagem para Análise da Marcha

Page 4: Métodos de Segmentação de Imagem para Análise da Marcha

Introduction:

Maria Vasconcelos, João Tavares 4

Geralmente, a identificação de estruturas representadas ao longo

de sequências de imagem representa a primeira fase do processo

computacional de análise de movimento a partir de informação

visual. Assim, o primeiro passo consiste na segmentação das

estruturas para posterior análise.

Se, para os humanos a tarefa de identificar objectos em

movimento em imagens é trivial, o mesmo não acontece em

termos computacionais.

Métodos de Segmentação de Imagem para Análise da Marcha

Page 5: Métodos de Segmentação de Imagem para Análise da Marcha

• IluminaçãoÉ comum existir variação da iluminação ao longo das sequências de imagem

• Oclusão das estruturasPor vezes o sujeito não permanece na cena de estudo ou é sobreposto por

outras entidades

• Fundos dinâmicosQuando a câmara está em movimento ou a cena é variável

• Sombras

• Múltiplas estruturas em movimento

Problemas:

Maria Vasconcelos, João Tavares 5Métodos de Segmentação de Imagem para Análise da Marcha

Page 6: Métodos de Segmentação de Imagem para Análise da Marcha

Métodos:

Maria Vasconcelos, João Tavares 6

A utilização de um algoritmo de detecção de orlas, por si só, não é

suficiente para identificar o sujeito em movimento:

Utilização do algoritmo de detecção de orlas (Canny)

Métodos de Segmentação de Imagem para Análise da Marcha

Page 7: Métodos de Segmentação de Imagem para Análise da Marcha

Métodos:

Maria Vasconcelos, João Tavares 7

•Subtracção de fundos (1)Método típico de segmentação de imagens que implica o cálculo de uma

imagem de referência seguido da subtracção de cada imagem (frame) da

sequência pela imagem de referência e posterior binarização do resultado.

•Detecção de objectos em movimento (2)Método baseado na teoria de decisão de Bayes para detectar objectos em

imagens a partir uma sequência de imagens.

•KaewTraKulPong, P. and R. Bowden. An Improved Adaptative Background Mixture Model for Real-time Tracking with Shadow Detection, 2nd European Workshop on Advanced Video-based Surveillance Systems, 2001.•Li, L. et al. Foreground object detection from videos containing complex background, Proceedings of 11th

ACM International Conference on Multimedia, 2003.Métodos de Segmentação de Imagem para Análise da Marcha

Page 8: Métodos de Segmentação de Imagem para Análise da Marcha

Método de subtracção de fundos (1):

Maria Vasconcelos, João Tavares 8

•Começa por calcular uma imagem de referência utilizando um

modelo adaptativo Gaussiano não-paramétrico pixel-a-pixel

baseado no trabalho apresentado por Grimson et al (1998);

Foram efectuadas algumas alterações às equações de forma a

permitir ao sistema aprender mais rapidamente e de forma mais

eficiente, assim como adaptar-se a cenas mais complexas.

•Grimson Wel, et al. Using adaptive tracking to classify and monitor activities in a site, IEEE Computer Society Conference on Computer Vision and Pattern Recognition, 1998 .•KaewTraKulPong, P. and R. Bowden. An Improved Adaptative Background Mixture Model for Real-time Tracking with Shadow Detection, 2nd European Workshop on Advanced Video-based Surveillance Systems, 2001.

Métodos de Segmentação de Imagem para Análise da Marcha

Page 9: Métodos de Segmentação de Imagem para Análise da Marcha

Método de subtracção de fundos (1):

Maria Vasconcelos, João Tavares 9

Exemplo:

Métodos de Segmentação de Imagem para Análise da Marcha

Page 10: Métodos de Segmentação de Imagem para Análise da Marcha

Método de detecção de objectos em movimento (2):

Maria Vasconcelos, João Tavares 10

•Em primeiro lugar, os pixéis sem alterações na sequência de imagens são

filtrados através da subtracção de fundos e diferenças temporais. Em

seguida, as alterações detectadas são marcadas como pertencendo a pixéis

associados a objectos estacionários ou não, de acordo com as alterações.

•Os pixéis associados são classificados, de acordo com a estatística de

cores calculada através da teoria de decisão de Bayes.

•Os objectos em movimento são segmentados depois de actualizar os

resultados dos pixéis (estacionários e em movimento) e os modelos do

fundo.•Li, L. et al. Foreground object detection from videos containing complex background, 11th ACM International Conference on Multimedia, 2003.

Métodos de Segmentação de Imagem para Análise da Marcha

Page 11: Métodos de Segmentação de Imagem para Análise da Marcha

Método de detecçaõ de objectos em movimento (2):

Maria Vasconcelos, João Tavares 11

Exemplo:

Métodos de Segmentação de Imagem para Análise da Marcha

Page 12: Métodos de Segmentação de Imagem para Análise da Marcha

Resultados obtidos utilizando os dois métodos:

Maria Vasconcelos, João Tavares 12

Método de subtracção de fundos

Método de detecção de objectos em movimento

Métodos de Segmentação de Imagem para Análise da Marcha

Page 13: Métodos de Segmentação de Imagem para Análise da Marcha

Aplicações para análise da marcha:

Maria Vasconcelos, João Tavares 13

Exemplo do seguimento de um pedestre

•Baumberg, A. and D. Hogg. Generating spatiotemporal models from examples. Image and Vision Computing, vol. 14, p. 525-532, 1996.

Métodos de Segmentação de Imagem para Análise da Marcha

Page 14: Métodos de Segmentação de Imagem para Análise da Marcha

Aplicações para análise da marcha:

Maria Vasconcelos, João Tavares 14

Estudo biomecânico de atletas

•Jesus, R.M. et al. Tracking of Human Motion using Multiple Predictors, International Workshop on Articulated Motion and Deformable Objects, 2002.

Métodos de Segmentação de Imagem para Análise da Marcha

Page 15: Métodos de Segmentação de Imagem para Análise da Marcha

Conclusões:

Maria Vasconcelos, João Tavares 15

• Discutiram-se dois métodos para segmentação de objectos em sequências

de imagem e possíveis aplicações relacionadas com análise da marcha;

• Os métodos de segmentação têm de ultrapassar diversos problemas, tais

como: fundos dinâmicos, situações de oclusão ou sequências de imagem com

mais de uma estrutura em movimento;

• Ambos os métodos obtêm resultados satisfatórios utilizando uma sequência

de imagens relativamente pequena (cerca de 45 frames);

• O segundo método obtém melhores resultados que o primeiro quando

existem sombras na cena;

• Existem várias aplicações para análise do movimento humano, como

reconhecimento de pessoas em sistemas de segurança ou análise da marcha.

Métodos de Segmentação de Imagem para Análise da Marcha

Page 16: Métodos de Segmentação de Imagem para Análise da Marcha

Trabalho futuro:

Maria Vasconcelos, João Tavares 16

• Desenvolver metodologias para segmentar pessoas em sequências de

imagem utilizando modelos e actualização das imagens de fundo;

• Desenvolver metodologias para seguimento de pessoas sem utilizar marcas

corporais que sejam robustas a problemas de oclusão;

• Desenvolver mecanismos capazes de ajustar automaticamente os modelos

cinemáticos construídos em função do movimento envolvido.

Métodos de Segmentação de Imagem para Análise da Marcha

Page 17: Métodos de Segmentação de Imagem para Análise da Marcha

Agradecimentos:

Maria Vasconcelos, João Tavares 17

• O primeiro autor agradece a bolsa de Doutoramento, com referência

SFRH/BD/28817/2006, atribuída pela FCT – Fundação para a Ciência e

Tecnologia.

Métodos de Segmentação de Imagem para Análise da Marcha

Page 18: Métodos de Segmentação de Imagem para Análise da Marcha

Métodos de Segmentação de Imagem para Análise da Marcha

Maria João M. Vasconcelos, João Manuel R. S. Tavares

[email protected], [email protected]

3º Congresso Nacional de Biomecânica11-12 Fevereiro 2009, Bragança