Modelo de transcrição da Língua de Sinais Brasileira voltado a implementação de agentes

virtuais sinalizadores

Wanessa Machado do AmaralJosé Mario De Martino

Departamento de Computação e Automação Industrial

Faculdade de Engenharia Elétrica e Computação

Universidade Estadual de Campinas

Acessibilidade

A acessibilidade para deficientes visuais é tema bastante discutido em computação.

As informações são apresentadas visualmente nos ambientes virtuais.

Porque acessibilidade para deficientes auditivos é um problema?

Deficiente auditivo

Para aquele que adquire a surdez antes da alfabetização, materiais escritos são geralmente menos acessíveis que conteúdos visuais.

A língua de sinais é a primeira língua para essas pessoas, e ler material escrito é o equivalente a ler em uma língua estrangeira.

Num ambiente em que as informações são apresentadas apenas de forma escrita, essas pessoas encontram-se em desvantagem.

LIBRAS no computador Material em vídeo é utilizado para apresentar

conteúdo em lingua de sinais nos ambientes computacionais.

No entanto, esta opção possui desvantagens: Utilizar infraestrutura física específica. Intérpretes experientes. Garantir continuidade: mesmo intérpetre, com

mesma roupa, mesmo fundo, etc. Cada detalhe alterado no conteúdo exige regravar

uma sequencia inteira de sinalização . Transmissão e armazenamento.

Animação de humanos virtuais

Animação mostra-se a melhor opção: Conteúdo pode ser criado pro uma única pessoa,

usando apenas um computador. Conteúdo pode ser criado por pessoas não

necessariamente fluente em LIBRAS. Possibilidade de gerar conteúdo em tempo real

(podendo ser alterado mais facilmente). Armazenamento. Controle adicional, como alterar angulo de visão

(bom para quem está aprendendo língua de sinais).

O que descreve um sinal?

Quais são as características de um sinal? Algumas notações existentes:

Stokoe

Signwriting

HamNoSys Sinal casa

Notações existentes

Não foram criadas com o intuito de gerar animações.

São icônicas. Não guardam todas as informações relevantes.

Muitas informações ficam implícitas. É de difícil compreensão. As informações não

são organizadas de maneira hierárquica e com fácil recuperação por um sistema computacional.

Objetivo

Torna-se necessária a criação de uma notação voltada à animação.

Todas as informações relevantes devem ser armazenadas explicitamente.

De preferência as informações devem ser organizadas e de fácil recuperação e compreensão.

Não existir ambiguidades e nem omissão de dados.

Notação proposta

Suspensão

Mãos

Configuração

Localização

Localização: espaço

Localização: contato

Orientação

Movimento Local

Movimento Global

Descrição do sinal ”Computador”<sinal nome=”computador”>

<suspensao numero=”1”><maoDireita>

<configuracao predefinida=”c” /><localizacao>

<espaco vertical=”3” horizontal=”3” /></localizacao><palma orientacao=”vertical” posicao=”dorso”/>

</maoDireita><maoEsquerda espelhada=”sim”/>

</suspensao><movimentoGlobal numero=”1” orientacao=”vertical”

movimento=”circularH” maos=”espelhado” repetir=”2”/></sinal>

Frases

Concatenação: ocorre quando em uma frase existe a omissão de parte de um sinal com a sobreposição do sinal seguinte.

pode acontecer do movimento do sinal A começar antes que o movimento do sinal B termine, ocorrendo a sobreposição destes sinais.

Ex: ”Enquanto andava de bicicleta seu chapéu caiu.”

Descrição de uma frase

Descrevendo uma frase

<sentenca><sinal nome=”bicicleta”><concatenar>

<sinal nome=”bicicleta” omitir=”direita”/><suspensao> (descrição de chapeu cair, mão direita)</suspensao>

</concatenar></sentenca>

Trabalhos Futuros Está em desenvolvimento o software para

animação de uma personagem 3D sinalizadora de LIBRAS que será controlada pela notação apresentada.

Trabalhos Futuros

Avaliar o modelo de transcrição para outras línguas de sinais, como por exemplo a ASL (American Sign Language).