31
1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II Seminário da Rede Brasileira de Monitoramento e Avaliação

1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

Embed Size (px)

Citation preview

Page 1: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

1

Carlos Tadeu A. de PinhoFortaleza, Junho de 2010

Indicadores de Programas

Guia Metodológico

Medir resultados para atestar

o alcance de objetivos

II Seminário da Rede Brasileira de Monitoramento e Avaliação

Page 2: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

3

Representar as realidades social, econômica e ambiental;

Mensurar os resultados para gerir o desempenho;

Atestar o alcance de objetivos;

Contribuir para a melhoria contínua de políticas, planos e programas;

Viabilizar a análise comparativa do desempenho.

Para que servem os indicadores? Para que servem os indicadores?

Gerenciar um Programa sem indicadores é como pilotar um avião

sem instrumentos.

Page 3: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

5

Medição precisa, absoluta

• Por definição um indicador é uma aproximação da realidade;

Medir tudo

• Quem quer medir tudo acaba não medindo nada; deve-se medir o que é relevante e útil; medir custa tempo e dinheiro;

Medir por medir

• As medidas devem ter significância, não devem ser apenas uma obrigação ou imposição legal;

Dependência Tecnológica

• O foco deve ser a sistemática, depois o sistema.

Mitos Mitos

Fonte: Guia Referencial para Medição de Desempenho e Manual para Construção de Indicadores – MP/SEGES

Page 4: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

6

O planejamento se refere ao cálculo que precede e preside a ação; difere da

reflexão em razão do pensar sistemático, com método.

Adaptado de Hélio B. Costa, 2008

Planejando as medidas de desempenhoPlanejando as medidas de desempenho

Page 5: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

7

Responde as seguintes questões:

• O que são?• Para que servem?• Quem utiliza?• Quais são as suas

propriedades?• Como são classificados?• Onde podem ser

encontrados?• Quais são as suas limitações?

• Quais são os métodos, técnicas e ferramentas utilizados na sua construção?

• Como aplicar estes instrumentos de planejamento?

Para que serve um Guia Metodológico?Para que serve um Guia Metodológico?

Page 6: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

8

Fonte: SIGPLAN – Módulo de Avaliação

Nos últimos anos, em média + de 30% dos indicadores do PPA não

foram apurados

Nos últimos anos, em média + de 30% dos indicadores do PPA não

foram apurados

Fatores de contextoFatores de contexto

Page 7: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

9

Fatores de contextoFatores de contexto

Fonte: SIGPLAN – Módulo de Monitoramento

2009210 Finalísticos 27 Apoio760 Indicadores

Page 8: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

10

Construção de indicadores feita de forma intuitiva, pouca ênfase em métodos, técnicas e ferramentas como norteadores da prática.

Causas prováveis:

• Falta compreensão do significado e alcance dos indicadores no ciclo de gestão das políticas públicas.

• Inexistência de uma orientação estratégica aos órgãos do Poder Executivo Federal para a construção e uso de indicadores.

Fatores de contextoFatores de contexto

Page 9: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

11

Estabelecer uma

metodologia para a

construção de

indicadores para os

programas do Plano

Plurianual do Governo

Federal, com foco na

aferição de resultados.

ObjetivoObjetivo

Page 10: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

12

Marco Conceitual

Fontes e Publicações

Dimensão Conceitual

Indicadores no PPA

Sistema Estatístico Nacional

Método de Construção

Simulação de Uso

Dinâmica de aplicação do

método: Oficina

Técnicas e Ferramentas

Dimensão Instrumental

ConteúdoConteúdo

Page 11: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

13

Marco Conceitual

Fontes e Publicações

Dimensão Conceitual

Indicadores no PPA

Sistema Estatístico Nacional

Estabelece a fundamentação teórica e possibilita:

uniformizar conceitos, nomenclaturas, propriedades, taxonomias etc.;

possibilitar o entendimento da literatura existente;

incorporar experiências nacionais e internacionais;

viabilizar a continuidade de estudos e o suporte técnico no assunto.

ConteúdoConteúdo

Page 12: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

14

Marco Conceitual

Fontes e Publicações

Dimensão Conceitual

Indicadores no PPA

Sistema Estatístico Nacional

De acordo com o artigo 2o da lei No. 6.183/1974:

“Integram o Sistema Estatístico Nacional todos os órgãos e entidades da Administração Pública direta e indireta, de âmbito federal, estadual ou municipal, e entidades de natureza privada, que exerçam atividades estatísticas e para isso recebam subvenção ou auxílio dos cofres públicos.”

ConteúdoConteúdo

Page 13: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

15

Marco Conceitual

Fontes e Publicações

Dimensão Conceitual

Indicadores no PPA

Sistema Estatístico Nacional

Marco legal

Dimensões Estratégicas

Papéis e responsabilidades

Destaques:

• qualidade e quantidade;

• dimensão territorial;

• transversalidades.

ConteúdoConteúdo

Page 14: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

16

Marco Conceitual

Fontes e Publicações

Dimensão Conceitual

Indicadores no PPA

Sistema Estatístico Nacional

Publicações do IBGE e IPEA

Instituições subnacionais – Seade, Fundação João Pinheiro, SEI, IPARDES, CIDE, FEE etc.

Portais dos órgãos e Poderes na internet.

ConteúdoConteúdo

Page 15: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

17

Marco Conceitual

Fontes e Publicações

Dimensão Conceitual

Indicadores no PPA

Sistema Estatístico Nacional

Método de Construção

Simulação de Uso

Dinâmica de aplicação do

método: Oficina

Técnicas e Ferramentas

Dimensão Instrumental

ConteúdoConteúdo

Page 16: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

18

Método de Construção

Simulação de Uso

Dinâmica de aplicação do

método: Oficina

Técnicas e Ferramentas

Dimensão Instrumental Método de oito passos

Premissas: facilidade de entendimento e uso; aplicável a qualquer contexto.

Fluxograma tipo road map (mapa rodoviário) com rampas de acesso de acordo com a necessidade.

ConteúdoConteúdo

Page 17: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

19

Método de Construção

Simulação de Uso

Dinâmica de aplicação do

método: Oficina

Técnicas e Ferramentas

Dimensão Instrumental Matriz de Priorização

Análise de trade-off

Entrevista semiestruturada

Modelo SMART

Brainstorming

Análise de situações análogas

Opinião especializada

Grupo de Discussão

ConteúdoConteúdo

Page 18: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

20

Método de Construção

Simulação de Uso

Dinâmica de aplicação do

método: Oficina

Técnicas e Ferramentas

Dimensão Instrumental Simulação dos resultados

de cada um dos 8 passos do método

Programa de Segurança Pública nas Rodovias Federais

ConteúdoConteúdo

Page 19: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

21

Método de Construção

Simulação de Uso

Dinâmica de aplicação do

método: Oficina

Técnicas e Ferramentas

Dimensão Instrumental Metodologia de

construção de indicadores por meio de oficina

Piloto com o Programa Nacional de Microcrédito Produtivo Orientado

Papeis e responsabilidades

Duração média de 4 semanas

ConteúdoConteúdo

Page 20: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

22

Marco Conceitual

Fontes e Publicações

Dimensão Conceitual

Indicadores no PPA

Sistema Estatístico Nacional

Método de Construção

Simulação de Uso

Dinâmica de aplicação do

método: Oficina

Técnicas e Ferramentas

Dimensão Instrumental

ConteúdoConteúdo

Page 21: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

23

Guia de Referência RápidaGuia de Referência Rápida

Page 22: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

24

Disponível para DownloadDisponível para Download

Page 23: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

25

“Não se pode administrar o que não se pode medir!”

Morris A. Cohen

Page 24: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

26

Taxonomias Taxonomias

Page 25: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

27

Secretaria de Planejamento e Investimentos Estratégicos

IBGEIBGE

IPEAIPEA

Instituições Federais

Educação, Esportee Cultura

Educação, Esportee Cultura

SaúdeSaúde

Temas Sociais

DesenvolvimentoAgrário

DesenvolvimentoAgrário

Trabalho Previdência Social

Trabalho Previdência Social

Temas Econômicos e

Especiais

Agricultura e PescaAgricultura e Pesca

Indústria, Inovaçãoe Comercio Exterior

MDS, MCTCNPq, INPE,

Turismo

Indústria, Inovaçãoe Comercio Exterior

MDS, MCTCNPq, INPE,

TurismoProteção Social

MDSProteção Social

MDS

SustentabilidadeAmbiental

MMA, IBAMA

SustentabilidadeAmbiental

MMA, IBAMA

DesenvolvimentoUrbano

DesenvolvimentoUrbano

Temas de Infraestrutura

Defesa e SoberaniaDefesa e Soberania

Nações UnidasNações Unidas

OCDEOCDE

Organismos Internacionais

PNUDPNUD

CEPALCEPAL

Banco MundialBanco Mundial

SEADESEADE

FJPFJP

Instituições subnacionais

IPARDESIPARDES

SEISEI

FEEFEE

IJSNIJSN

Instituições Não Governamentais

EconomiaMF, BACENEconomia

MF, BACEN

FGVFGV

FIPEFIPE

FONTES DE ESTATÍSTICAS E INDICADORES NACIONAIS E INTERNACIONAIS

ANIPESANIPES

MineraçãoMineração

Infraestrutura HídricaInfraestrutura Hídrica

TransporteDENATRAN, DENIT

TransporteDENATRAN, DENIT

ComunicaçõesComunicações

EnergiaEnergia

Direitos HumanosCrianças e

Adolescentes; Pessoas

com Deficiência; Idosos

Direitos HumanosCrianças e

Adolescentes; Pessoas

com Deficiência; Idosos

MulheresMulheres

Igualdade RacialIgualdade Racial

Cidadania

CIDECIDE

IPLANCEIPLANCE

DIEESEDIEESE

JustiçaCNJ, STF

Federal, STJ

JustiçaCNJ, STF

Federal, STJ

SegurançaPública, DPF,

DPRF

SegurançaPública, DPF,

DPRF

OITOIT

PaísesPaíses

Entes da Federação

MunicípiosMunicípios

Indicadores EstratégicosIndicadores Estratégicos

CidadesCidades

Diversos

Est

ados

Est

ados

MunicMunic

Page 26: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

28

Dimensões do PlanejamentoDimensões do Planejamento

Page 27: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

29

Fontes e PublicaçõesFontes e Publicações

Page 28: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

30

Método de oito passosMétodo de oito passos

Page 29: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

31

Matriz de PriorizaçãoMatriz de Priorização

Page 30: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

32

Dinâmica de aplicação do método

Dinâmica de aplicação do método

Page 31: 1 Carlos Tadeu A. de Pinho Fortaleza, Junho de 2010 Indicadores de Programas Guia Metodológico Medir resultados para atestar o alcance de objetivos II

33

Problema: alta incidência de doenças sexualmente transmissíveis em determinado público-alvo.

Indicador de Resultado Indicador de Resultado