Metodologia de Monitoramento e Avaliação - M&A

SUMÁRIO

1 PLANEJAMENTO.................................................................................................4

1.1 Plano de Ação para implantação do processo de M&A.....................................4

1.2 Cronograma de implantação do processo de M&A............................................4

2 ETAPAS DO PROCESSO..........................................................................4

2.1 DEFINIÇÃO DO DESEMPENHO..............................................................4

2.1.1 Identificação dos objetos de mensuração.......................................................4

2.1.2 Identificação dos atores e objetos-chave........................................................4

2.2 MENSURAÇÃO DO DESEMPENHO....................................................................4

2.2.1 Identificação dos indicadores de desempenho...............................................4

2.2.2 Priorização dos indicadores............................................................................4

2.2.3 Detalhamento do indicador.............................................................................5

2.3 MELHORIA DO DESEMPENHO.......................................................................5

2.3.1 Definição da coleta de dados / Fluxo de Informação......................................5

2.3.2 Análise e interpretação das informações sobre desempenho.........................5

2.3.3 Comunicação do processo de M&A e seus resultados...................................5

2.3.4 Reuniões de aprendizado e melhoria de desempenho...................................5

2.3.5 Meta-avaliação do modelo..............................................................................5

ANEXOS………………………………………………………………………….……..…6

|

1 PLANEJAMENTO

1.1 Plano de Ação para implantação do processo de M&A

Elaborar Plano de Ação (5W2H) para o planejamento e monitoramento da implantação da Metodologia de Monitoramento e Avaliação (M&A) na Adapar.Arquivo anexo: Plano_de_Acao_Implantacao_do_processo_de_M_A.doc

1.2 Cronograma de implantação

Organizar e gerenciar cronograma de implantação da metodologia de M&A, em cada programa, divisão ou unidade, segundo as etapas do processo, conforme arquivo anexo.Arquivo anexo: Cronograma de Implantação M A.docx

2 ETAPAS DO PROCESSO

2.1 DEFINÇÃO DO DESEMPENHO

2.1.1 Identificação dos objetos de mensuração

Elaborar o canvas de governança do programa, divisão ou unidade, conforme arquivo anexo: Canvas de Governança Adapar.pdf

2.1.2 Identificação dos atores e objetos-chave

Identificar os atores e objetos chave da cadeia de governança, conforme arquivo anexo Atores Princiapais, Campos_Objetos Críticos e Foco de Mensuração.pdf

2.2 MENSURAÇÃO DO DESEMPENHO

2.2.1 Identificação dos indicadores de desempenho

Para realização desta etapa recomenda-se a leitura prévia do anexo “A Cadeia de Valor e Os Es do Desempenho”.

Identificação de indicadores para os objetos chave, conforme arquivo anexo.Arquivo anexo: Identificação dos Indicadores.pdf

2.2.2 Priorização dos indicadores

Priorizar os indicadores, segundo os critérios e ponderações, conforme arquivo anexo.Arquivo anexo: Priorização dos Indicadores - Matriz de Avaliação Qualitativa.pdf

|

2.2.3 Detalhamento do indicador

Detalhar os indicadores priorizados, conforme arquivo anexo.Arquivo anexo: Detalhamento dos Indicadores.pdf

2.3 MELHORIA DO DESEMPENHO

2.3.1 Definição da coleta de dados / Fluxo de Informação

Detalhar a metodologia de coleta de dados, conforme arquivo anexo.Arquivo anexo: Detalhamento da coleta de dados.pdf

2.3.2 Análise e interpretação das informações sobre desempenho

Detalhar a metodologia de análise e interpretação das informações sobre o desempenho do indicador, conforme arquivo anexo.Arquivo anexo: Detalhamento da análise.pdf

2.3.3 Comunicação do processo de M&A e seus resultados

Comunicar o início do processo de M&A e a metodologia de comunicação dos resultados.Arquivo anexo: Estratégia de Comunicação.pdf

2.3.4 Reuniões de aprendizado e melhoria de desempenho

Elaborar o modelo contendo os eventos e produtos de M&A, de acordo com a periodicidade necessário para cada instrumento.Arquivo anexo: Objetivos, eventos e produtos de M&A.pdf

2.3.5 Meta-avaliação do modelo

Avaliar a consistência do modelo de M&A e implantar melhorias.

|

ANEXOS

FLUXOGRAMA DO PROCESSO DE MONITORAMENTO E AVALIAÇÃO

|

CADEIA DE VALOR E OS 6 ES DO DESEMPENHO

A figura abaixo representa a Cadeia de valor e os 6 tipos de indicadores de desempenho considerando as dimensões do esforço e resultado.

A Cadeia de valor e os 6Es do Desempenho possui dimensões que compõem seis categorias básicas de indicadores:

Uma combinação dos elementos da cadeia de valor com as dimensões do desempenho permite identificar seis categorias básicas de indicadores de desempenho:

Efetividade são os impactos gerados pelos produtos/serviços, processos ou projetos. A efetividade está vinculada ao grau de satisfação ou ainda ao valor agregado, a transformação produzida no contexto em geral. Esta classe de indicadores, mais difícil de ser mensurada (dada a natureza dos dados e o caráter temporal), está relacionada com a missão da instituição. Por exemplo, se uma campanha de vacinação realmente imunizar e diminuiu a incidência de determinada doença entre as crianças, a campanha foi efetiva. Indicadores de efetividade podem ser encontrados na dimensão estratégica do Plano Plurianual (PPA);

Eficácia é a quantidade e qualidade de produtos e serviços entregues ao usuário (beneficiário direto dos produtos e serviços da organização). Por exemplo, se, na mesma campanha citada, a meta de vacinação é imunizar 100.000 crianças e este número foi alcançado ou superado, a campanha foi

|

eficaz. Indicadores de eficácia podem ser definidos a partir da Carta de Serviços do órgão;

Eficiência é a relação entre os produtos/serviços gerados (outputs) com os insumos utilizados, relacionando o que foi entregue e o que foi consumido de recursos, usualmente sob a forma de custos ou produtividade. Por exemplo: uma campanha de vacinação é mais eficiente quanto menor for o custo, ou seja, quanto menor for o custo da campanha, mantendo‐se os objetivos propostos. Indicadores de eficiência podem ser encontrados na Carta de Serviços com seus elementos de custos e em informações de sistemas estruturantes do Governo, como o SIAFI;

Execução refere‐se à realização dos processos, projetos e planos de ação conforme estabelecidos. Indicadores de execução podem ser encontrados no monitoramento das ações do PPA;

Excelência é a conformidade a critérios e padrões de qualidade/excelência para a realização dos processos, atividades e projetos na busca da melhor execução e economicidade; sendo um elemento transversal. Indicadores e padrões de excelência podem ser encontrados no Instrumento de Avaliação da Gestão Pública (IAGP); e

Economicidade está alinhada ao conceito de obtenção e uso de recursos com o menor ônus possível, dentro dos requisitos e da quantidade exigidas pelo input, gerindo adequadamente os recursos financeiros e físicos. Indicadores de economicidade podem ser encontrados nas unidades de suprimentos.

Subdimensões dos 6Es do Desempenho

Os 6Es do desempenho podem ser desdobrados em subdimensões que qualificam e auxiliam na caracterização de tipologias de indicadores a serem utilizados. O quadro 3 apresenta as principais subdimensões identificadas e suas respectivas descrições.

Dimensão Subdimensões

E1- Efetividade

1.1. Impacto Final: é o resultado gerado pelos produtos e serviços de um determinado sistema (organização, programa, política pública, rede etc.) no beneficiário final, ou seja, na sociedade. Exemplos: Índice de Desenvolvimento Humano (IDH); PIB per capita; Coeficiente de Gini.

1.2. Impacto Intermediário: é o resultado intermediário gerado pelos produtos e serviços de um determinado sistema (organização, programa, política pública, setor rede etc.) em seu beneficiário 21 Dimensão Subdimensões direto. Exemplos: Coeficiente de mortalidade infantil; Expectativa média de vida da população Habitantes/domicílio; Taxa de Homicídios.

|

Dimensão Subdimensões

E2 - Eficácia

2.1 Quantidade / Volume: é o nível de oferta e disponibilidade de um bem ou serviço gerado por um determinado sistema (organização, programa, política pública, rede etc.). Exemplo: Número de jovens e adultos alfabetizados; Quantidade de habitações construídas; Extensão da Malha rodoviária pavimentada.

2.2 Qualidade do produto / serviço: representa a adequação entre as características dos produtos e serviços entregues, e os requisitos e necessidades dos beneficiários. Exemplos: Qualidade percebida (Percepção/Expectativa), durabilidade, estética, Confiabilidade, Tempestividade, Inovação etc.

2.3 Acessibilidade e Equidade: é a capacidade de disponibilizar bens e serviços equitativamente e fornecê‐los de forma equânime, atendendo igualmente as necessidades dos beneficiários e a sociedade.

2.4 Cobertura: corresponde à relação entre a população atendida sobre a que deveria ser atendida com bens ou serviços públicos gerados por um determinado sistema (organização, programa, política pública, rede etc.).

2.5 Risco: avalia a probabilidade de um determinado sistema assegurar a entrega de bens e serviços para determinados beneficiários e a população.

Dimensão Subdimensões

E3 - Eficiência

3.1 Custo‐efetividade: relação entre os insumos para a prestação de um determinado serviço ou elaboração de um produto e a efetividade, ou seja, entende‐se pelo grau de contribuição de um programa ou ação na consecução de metas e objetivos de impacto fixados para reduzir as dimensões de um problema ou melhorar uma dada situação.

3.2 Produtividade: relação entre o nível de produção (serviços e produtos) e os recursos utilizados, seja o capital humano, imobilizado, investimentos e o tempo.

3.3 Tempo: tempo decorrido entre o início e o fim de um determinado programa, projeto ou processo. Exemplos: Tempo de ciclo, Frequência de entrega, Tempo de desenvolvimento de novos bens e serviços, Desperdício etc.

3.4 Custo unitário: conjunto de custos (fixos, variáveis, reais, atribuídos, específicos e não específicos) a ser imputados a uma atividade por cada unidade de produto ou serviço gerado.

3.5 Custo‐benefício (qualidade do gasto): relação entre os dispêndios realizados por um determinado sistema e os retornos obtidos por conta desses dispêndios, apresenta a relação entre os insumos e os produtos gerados.

|

Dimensão Subdimensões

E4- Execução

4.1 Execução financeira: relação entre o volume de recursos disponibilizados pelo orçamento e o nível de utilização desses recursos visando atender à realização de etapas e/ou atividades de um programa, projeto ou processo (finalísticos ou de suporte). Exemplo: taxa de execução financeira.

4.2 Execução física: relação entre o volume de produtos previstos para serem entregues pelo orçamento e o nível de entrega desses produtos, visando atender à realização dos projetos e/ou atividades. Exemplo: taxa de execução física.

Dimensão Subdimensões

E5- Excelência

5.1 Conformidade em relação a padrões de excelência gerencial: o IAGP é um excelente proxy para a medição da excelência de organizações públicas. É um indicador composto qualitativo e quantitativo que abrange critérios como: Liderança, Estratégia e Planos, Cidadãos, Sociedade, Informação e Conhecimento, Pessoas, Processos.

5.2 Conformidade: representa a adequação dos projetos, ações e processos aos padrões e requisitos definidos. Exemplos: retrabalhos, erros, responsabilidade ambiental, infraestrutura (conforto etc.), medidas e especificações, segurança (acidentes por horas trabalhadas), transparência, confidencialidade, acessibilidade, confiabilidade, inovação, prazo etc.

5.3 Riscos: avalia a probabilidade de ocorrência de falhas ou a entrega de produtos fora das especificações estabelecidas nos processos ou nos programas, de modo que isso possa provocar a insatisfação das partes envolvidas.

5.4 Causalidade: é a avaliação de fatores precedentes que impactam ou influenciam o comportamento ou resultado subsequente, sendo, deste modo, indicadores que avaliam a adequação à padrões, normas e especificações. Exemplo: índice de reajustes devido a falhas no processo. Neste caso, as falhas no processo geram impactos negativos na execução de processos e entrega de serviços.

5.5 Comunicação: é a avaliação de fluxos de informação e seus canais, averiguando a existência ou não de falhas no processo de comunicação. Exemplo: percentual de pessoas com acesso à informações críticas da organização.

|

Dimensão Subdimensões

E6- Economicidade

6.1 Quantidade de recursos: é o nível de oferta e disponibilidade de um produto ou serviço gerado por um determinado fornecedor ou sistema (organização, programa, política pública, setor rede etc.).

6.2 Qualidade dos recursos: representa a adequação entre as características dos produtos e serviços adquiridos, e os requisitos e necessidades da organização (ou Governo). Exemplos: durabilidade técnica, estética, Qualidade percebida (Percepção/Expectativa), Confiabilidade, Tempestividade, Inovação etc.

6.3 Acessibilidade: é a capacidade de captar bens e serviços equitativamente e fornecê‐los de forma equânime, atendendo igualmente as necessidades dos beneficiários e a sociedade.

6.4 Cobertura: é a avaliação do nível de abrangência de um determinado insumo crítico para a execução de programas, projetos, processos, sendo desta forma um insumo que requer alta disponibilidade. Exemplo: quantidade de fornecedores de um determinado insumo.

6.5 Risco: Avalia a possibilidade de ocorrência de falhas no fornecimento de recursos para prover programas, projetos e processos. Exemplo: grau de propensão de não recebimento de insumos críticos.

|

|

|

|

|

|

|

|

|

|

|

|

|