77
LCS EPUSP PTC2547 - Guido Stolfi 1 / 77 Câmeras de TV PTC2547 Princípios de TV Digital Guido Stolfi EPUSP - 2016

Câmeras de TV

  • Upload
    others

  • View
    6

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 1 / 77

Câmeras de TV

PTC2547 – Princípios de TV

Digital

Guido Stolfi

EPUSP - 2016

Page 2: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 2 / 77

Tópicos Abordados

• Parâmetros básicos de uma câmera de TV

• Evolução dos Sensores

• Câmeras Tricromáticas

• Sensores CCD

• Processamento de Sinal

• Desafios e Tendências

• Estado da Arte

Page 3: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 3 / 77

Sistema Óptico de uma Câmera de TV

Lente

Sensor

Varredura

Amplificador

Sinal de

Vídeo

EBT

F4 2

E = Iluminamento no anteparo (nits ou candelas/m2)B = Luminância do objeto (lux ou lumens/m2)T = Transmitância da lenteF = Abertura da lente (f / d)

Page 4: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 4 / 77

Lente “Zoom”

Page 5: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 5 / 77

Características de Sensibilidade

• Eficiência Quântica: Porcentagem de fótons incidentes que provocam sinal elétrico no sensor

• Índice de Exposição (Fotografia):

EF

B TI

X

2802 B = Luminância para produzir nível branco

Tx = Tempo de Exposição (normalmente 1/30")F = Abertura da Lente

Page 6: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 6 / 77

Características Qualitativas de uma Câmera

• Definição: relacionada com a resolução espacial (MTF)

• Reprodução de Tons: fidelidade na reprodução de escalasde intensidade (Linearidade, fator Gama)

• Reprodução Cromática: limites e precisão das regiões de cromaticidade (luminância, tonalidade, saturação)

• Latitude de Exposição: faixa dinâmica (linearidade emregiões de luz alta e baixa)

Page 7: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 7 / 77

Resposta Espacial e Resolução

MTF total =

MTF(sistema óptico)

MTF(sensor)

MTF(varredura)

Resposta do Amplificador / digitalizador

Lente

Sensor

Varredura

Amplificador

Sinal de

Vídeo

Page 8: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 8 / 77

Evolução dos Sensores

Page 9: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 9 / 77

Varredura de Imagens por Disco Rotativo (Paul Nipkov -1884)

Disco de Nipkov

Page 10: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 10 / 77

Varredura de uma Imagem por Disco de Nipkov

Page 11: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 11 / 77

John Logie Baird com protótipo de Televisão (~1925)

Page 12: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 12 / 77

Câmera de Varredura Pontual

• “Image Dissector” (Farnsworth, 1929)

Page 13: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 13 / 77

Philo T. Farnsworth

e o seu “Image Dissector” (1929)

Page 14: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 14 / 77

Transmissão: “Gato Félix” (1930)

Page 15: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 15 / 77

Câmera de Varredura Cumulativa

• Iconoscópio (Zworykin, 1939)

Page 16: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 16 / 77

Sensor Fotoemissivo

LuzIncidente

Isolante

Eletrodo Material Fotoemissivo

Feixe de Elétrons

Glóbulos de

Carga

Coletor

CorrenteFotoemissiva

Fotoemissor

Eletrodo

Feixe de Elétrons

Eo

Ce

Page 17: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 17 / 77

Iconoscópio

Page 18: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 18 / 77

Iconocópios

Vladimir Kosma Zworykin e seus Iconoscópios

Page 19: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 19 / 77

Sensor Fotocondutivo

LuzIncidente

Vidro

Eletrodo Transparente

Material Fotocondutivo

Feixe de Elétrons

Carga

Fotoemissor

Eletrodo

Feixe de Elétrons

Eo

Ce

Elemento Fotocondutor

Page 20: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 20 / 77

Câmera com Sensor Fotocondutivo

Amplificador

Carga

Feixe de Elétrons

Varredura

Page 21: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 21 / 77

Câmera com Sensor Fotocondutivo

Iluminamento doFotocondutor

Ve

1 Quadro

Corrente na CargaDevida a um Elemento de Imagem

I L

Tempo

Page 22: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 22 / 77

Iconoscópio, Orthicon e Vidicon

Page 23: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 23 / 77

Profundidade de Foco

Page 24: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 24 / 77

Profundidade de Foco

Page 25: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 25 / 77

Sensibilidades Espectrais p/ Fotocondutores

Page 26: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 26 / 77

Câmeras Fotocondutoras

Tipo Fotocondutor Aplicações Desvantagens

VidiconTrissulfeto de

AntimônioTelecinagem; Baixo

Custo"Lag" (Retardo)

Newvicon Selenieto de ZincoAlta Resolução; Intrum.

Médicaalta corrente no escuro

Chalnicon Selenieto de Cádmio Sensivel; Vigilância"Lag"; alta corrente no

escuro

SaticonLiga de

Selênio/Arsênico/Telúrio

Mais sensível ao azul; Câmeras RGB de

Estúdio

UltriconMatriz de Fotodiodos

de SilícioResistência a luz forte; Circuito Fechado P/B

"Blooming"

Plumbicon Óxido de Chumbo Tomadas ao Vivo"Lag", pouca resposta no

Vermelho

Page 27: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 27 / 77

Câmeras Tricromáticas

Page 28: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 28 / 77

Câmera a Cores com 3 Sensores

Sensor Azul

Sensor Vermelho

Sensor Verde

Filtros Corretivos

Filtros DicróicosFiltros Corretivos

Prismas

Page 29: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 29 / 77

Processamento de Sinal na Câmera de 3 Sensores

Sensores

Pré-

Amplificadores

Correção

de Cor

Correção de

MTF

Correção

Gama

Apagamento

e Limitação

Codificador

Vídeo

Composto

Page 30: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 30 / 77

Filtros de Separação de Cor

Page 31: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 31 / 77

Características Ideais dos Filtros

Page 32: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 32 / 77

Características Aproximadas por Matrixagem

Resposta Ideal Resposta dos Filtros ópticos

Resposta apósMatriz RGB

R

G

B

Page 33: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 33 / 77

Câmera a Cores com 1 Sensor

Filtro

Amarelo

FiltroCiano

Saída com luzazul

Saída com luzvermelha

Saída com luzverde

Page 34: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 34 / 77

Processamento de Sinal p/ Câmera de 1 Sensor

Luminância

Portadora vermelho

Portadora azul

freq.

Y L

Espectro do Sinal da Câmera

0.5 MHz

2.5 MHz

3.5 MHz

5.0 MHz

Detetores 0.5 MHz

0.5 MHz

Matriz G

R

B

Y

YL

Page 35: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 35 / 77

Câmera a Cores de 1 Sensor (Alternativa)

Filtro

Amarelo

FiltroCiano

Linha 1

Linha 3

Saída

Vermelho

Linha 1

Linha 3

Saída

Azul

Linha 1

Linha 3

90o

90o

Page 36: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 36 / 77

Processamento de Sinal

0.5 MHz

3.6 MHz

4.2 MHz

Detetores 0.6 MHz

0.6 MHz

Matriz

G

R

B

YL

YH

t

t

1 H

90o Matriz

+

-

t

Luminância Y

freq.

YL

Espectro do Sinal da Câmera

H

Portadora Cor

Page 37: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 37 / 77

Sensores CCD

Page 38: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 38 / 77

Dispositivo de Transferência de Carga

1 2 3 4 1 2

- + + - - +

• CCD: Charge Coupled Device

Page 39: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 39 / 77

CCD (Charge Coupled Device)

Bell Laboratories, 1970

Page 40: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 40 / 77

Deslocamento das Cargas no CCD

1 2 3 4 1 2- + + - - +

T0

T1

T2

T3

T4

Page 41: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 41 / 77

Estrutura de um Sensor CCD

1

2

3

4

1

2

3

Sensor

Sensor

Sensor

Linha Campo Par

Linha Campo Par

Linha Campo Ímpar

dreno deoverflow

porta de overflow

portas detransferência

Registrador vertical

Registrador Horizontal

A B C D

Page 42: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 42 / 77

Operação do Sensor CCD

DrenoSensor

Porta de Overflow

Porta de Transferência

RegistradorVertical

Integração de Carga

Por Fotocondução

(Período Ativo)

Transferência

(Retraço Vertical)

Dreno

Porta de Overflow

"Overflow" porexcesso de luz

(Período Ativo)

Page 43: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 43 / 77

Sensibilidade Espectral de Sensores CCD

A Iluminação Frontal c/ portas de Poli-Silício

B Iluminação Posterior

C Iluminação Frontal "fase virtual"

D Iluminação Frontal c/ portas transparentes

Page 44: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 44 / 77

Comparações CCD x Tubo (Final Séc. XX)

CCD Tubo

Sensibilidade f/8 @ 2000 lux f/4 @ 2000 lux

Iluminamento Mínimo 7.5 lux 10 lux

Índice de Exposição ~540 ~150

Resolução Horzontal 700 linhas 700 linhas

Relação S/R sem ponderação

60 dB 56 dB

S/R ponderada 68 dB 64 dB

Artifícios de Imagem "Aliasing", defeitos lineares

Granulação

Colorimetria Melhor resposta no Vermelho

-

Vida Útil Indefinida ~10.000h

Page 45: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 45 / 77

Sensor CMOS (APS – Active Pixel Sensor)

Célula 3T (Amostragem sequencial por linha)

Célula 4T (Permite amostragem simultânea)

Page 46: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 46 / 77

Sensor CMOS (APS – Active Pixel Sensor)

Distorção devida à amostragem sequencial por linha

Foto: H. Lartigue (Obturador de cortina)

Page 47: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 47 / 77

Sensor CCD Tricromático (RGB)

1 pixel

R

G

B

RG

B

RGB

Filtros R, G e B depositados sobre o sensor

Page 48: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 48 / 77

Sensor CCD Tricromático (YL - G - CY)

1 pixel

YL

G

CY

YL

G

CY

YLG

CY

Page 49: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 49 / 77

Sensor CCD Bayer (R G G B)

R

G

B

1 Pixel

R

G

B

Page 50: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 50 / 77

Resolução (MTF) do Sensor CCD

MTF f

W

Ff

W

Ff

h

h

hh

h

hh

( )

sen

MTF f

W

Fvf

W

Ff

v

vv

v

vv

( )

sen

• Wh = Largura do elemento sensor• Fh = Frequencia de Amostragem no sentido horizontal

(Sensores/largura da imagem)• fh = Frequencia espacial (linhas de resolução) na

horizontal

• Wv = Altura do elemento sensor• Fv = Frequencia de Amostragem no sentido vertical

(Sensores/altura da imagem)• fv = Frequencia espacial (linhas de resolução) na

vertical

Page 51: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 51 / 77

Resolução (MTF) do Sensor CCD

Fv

CCD

Tubo

480 linhas

Page 52: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 52 / 77

Resolução (MTF) do Sensor CCD

Page 53: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 53 / 77

Sensor CCD com Micro-Lentes

Page 54: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 54 / 77

Processamento de Sinal

Page 55: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 55 / 77

Deslocamento Espacial G / RB

Page 56: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 56 / 77

Deslocamento Espacial G / RB

Page 57: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 57 / 77

Processamento de Sinal

Page 58: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 58 / 77

Processamento Analógico

Page 59: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 59 / 77

Uniformidade de Campo (“Shading”)

Page 60: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 60 / 77

Controle Dinâmico de Contraste

Page 61: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 61 / 77

Controle Estático de Contraste

0

20

40

60

80

100

120

0 100 200 300 400 500 600

Saíd

a d

e V

íde

o (

%)

Iluminamento (%)

0

20

40

60

80

100

120

0 100 200 300 400 500 600

Saíd

a d

e V

íde

o (

%)

Iluminamento (%)

“Hard Clipping”- Linear até 100%, saturação “dura” acima disso

“Soft Clipping”- Linear até ~100%, saturação progressiva acima disso

Page 62: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 62 / 77

Controle Dinâmico de Contraste

0

20

40

60

80

100

120

0 100 200 300 400 500 600

Saíd

a d

e V

íde

o (

%)

Iluminamento (%)

0

20

40

60

80

100

120

0 100 200 300 400 500 600

Saíd

a d

e V

íde

o (

%)

Iluminamento (%)

“Peak AGC”- Controle Automático de Ganho mantendo amplitude máxima de saída em 100%

“Dynamic Clipping”- 2 faixas de ganho, com ponto de inflexão controlado para manter amplitude máxima em 100%

Page 63: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 63 / 77

Faixa Dinâmica com Controle de Saturação

Page 64: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 64 / 77

Efeitos de Saturação

“Peak AGC”

“Hard Clipping”

“Dynamic Clipping”

Page 65: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 65 / 77

Controle de Nitidez (H/V Enhancement)

Page 66: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 66 / 77

Desafios e Tendências

Page 67: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 67 / 77

Desafios

• Compatibilizar a resposta da câmera de TV com o processo de filmagem em película, para permitir a combinação simultânea de material produzido nesses meios.

• Maximizar a relação Sinal / Ruído apesar da redução das dimensõesdo elemento sensor

• Manter reprodução de tons mesmo com processamento digital

Page 68: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 68 / 77

Desafios

• “High Dynamic Range” (HDR)– Extensão da faixa dinâmica para

níveis de luminância ~10x maiores do que o nível de branco de referência

– Reprodução de altas luzes

– HLG (Hybrid Log-Gamma):

55991073,0

28466892,0

17883277,0

)1()ln(

)10(5,0'

c

b

a

LcbLa

LLE

Page 69: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 69 / 77

HDR - High Dynamic Range

Captura com exposições relativas +2, 0 e -2 pontos

Fotos: Klaus Herrmann

Page 70: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 70 / 77

HDR - High Dynamic Range

Combinação das 3 capturas em uma imagem HDR, porém reproduzida com faixa dinâmica restrita ao projetor

Page 71: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 71 / 77

Percepção de Faixa Dinâmica com Filtro Estrela

Original, captura com “soft clipping” Filtro “estrela” aplicado antes da captura, com “soft clipping”

Page 72: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 72 / 77

Resposta Impulsiva do Filtro Estrela

Resposta da câmera + lente, YMAX = 1

Resposta com Filtro “estrela” , YMAX = 1

Resposta com Filtro “estrela” e “soft clipping”, YMAX = 40

Page 73: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 73 / 77

Desafios

• “Wider Color Gamut” (WCG)– Extensão do espaço de

Crominância

– Reprodução de tons mais saturados

– Padrão ITU-R BT.2020:

R: x= 0,708, y=0,292 ( = 630 nm)

G: x= 0,170, y=0,797 ( = 532 nm)

B: x= 0,131, y=0,046 ( = 467 nm)

Page 74: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 74 / 77

Controle da Profundidade de Foco

• Câmeras com sensores miniaturizados (típicas de Smartphones) possuem ampla profundidade de foco (esq.).

• A possibilidade de restringir a profundidade de foco, destacando o primeiro plano, é um recurso artístico desejado, característico de sensores maiores (dir.)

Fotos: IEEE Spectrum / Rajiv Laroya / Sue Tallon

Page 75: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 75 / 77

Controle da Profundidade de Foco

• Combinando vários sensores miniaturizados, com distâncias focais e posições diferentes, é possível simular câmeras com sensores maiores e lentes intercambiáveis em um espaço reduzido.

Fotos: IEEE Spectrum / Rajiv Laroya / Sue Tallon

Page 76: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 76 / 77

Estado da Arte

Page 77: Câmeras de TV

LCSEP US P

PTC2547 - Guido Stolfi 77 / 77

Estado da Arte

• Câmera 8K – NHK

– 7680 x 4320 pixels (8k)

– 120 quadros por segundo

– Sensores: 30 x 26 mm, com microlentes

– 8000 conversores A/D, 14 bits por cor

– 12 bits pós-correção gama

– HDR, padrão HLG com faixa de 1200%

– WCG, padrão BT.2020

– S/R de 45 dB