Guia básico para Avaliação de Programas

Escrito por Carter McNamara, MBA, PhD, Autenticidade Consulting, LLC. Copyright 1997-2008.Adaptado do Guia de Campo para Nonprofit Program Design, Marketing e Avaliação.

Este documento fornece orientações para planejar e implementar um processo de avaliação para fins lucrativos ou programas sem fins lucrativos -, há muitos tipos de avaliações que podem ser aplicados a programas, por exemplo, baseada em metas, baseado em processos, baseados em resultados, etc

Uma breve introdução Note-se que o conceito de avaliação de programa pode incluir uma variedade de métodos para avaliar vários aspectos dos programas em organizações sem fins lucrativos ou lucrativos. Existem inúmeros livros e outros materiais que proporcionam uma análise em profundidade das avaliações, seus projetos, métodos, combinação de métodos e técnicas de análise. No entanto, o pessoal não tem que ser especialistas nesses temas para realizar uma avaliação de programas úteis. O "20-80" regra se aplica aqui, que 20% do esforço gera 80% dos resultados necessários. É melhor fazer o que pode vir a ser um esforço de média na avaliação do que para fazer qualquer avaliação em tudo.

Avaliação de Programas

1 . A avaliação centrou-se na utilidade, importância e practicidade.

2. O sucesso está ainda em aberto para a comunicação contínua e adaptar o programa em conformidade. A avaliação dá comunicação contínua.

3. Eles têm de considerar as informações que eles necessitam para tomar decisões sobre questões atuais do programa ou necessidades. E eles têm que estar dispostos a comprometer-se a compreender o que está realmente acontecendo. Note-se que muitas pessoas realizem regularmente alguma natureza da avaliação de programas - eles simplesmente não fazê-lo de uma maneira formal para que eles não tirar o máximo proveito de seus esforços ou fazem conclusões que são imprecisas (alguns avaliadores que discordam que este é a avaliação do programa não se feito metodicamente). Conseqüentemente, eles perdem oportunidades preciosas para fazer mais de diferença para seus clientes e clientes, ou para obter um grande estrondo para seu fanfarrão. Então o que é Avaliação de Programas?

programas são métodos organizados para oferecerem determinados serviços relacionados aos constituintes. Os programas devem ser avaliados para decidir se são realmente úteis para eleitores.

Assim, ainda, qual é a avaliação do programa? A avaliação do programa é cuidadosamente coletar informações sobre um programa ou algum aspecto de um programa, a fim de tomar decisões necessárias sobre o programa. A avaliação de programas podem incluir qualquer ou uma variedade de pelo menos 35 tipos diferentes de avaliação, como para a avaliação das necessidades, acreditação, análise custo / benefício, eficácia, eficiência, formativa, sumativa, com base em objetivos, processos, resultados, etc O tipo de avaliação que se comprometem a melhorar os seus programas depende do que você quiser saber mais sobre o programa. Não se preocupe com o tipo de avaliação você precisa ou está fazendo - se preocupe com o que você precisa saber para tomar as decisões que você precisa para fazer, e preocupe-se sobre como você pode recolher com precisão e entender essas informações.

Onde Avaliação de Programas é Úteis

Motivos freqüentes:

A avaliação de programas pode:

1. Compreender, verificar ou aumentar o impacto dos produtos ou serviços com clientes ou clientes.

2. Melhorar os mecanismos de entrega para ser mais eficiente e menos oneroso - Avaliações, será possível identificar os pontos fortes e fracos do programa para melhorar o programa. 3. Verifique se você está fazendo o que você pensa que está fazendo - Normalmente, os planos sobre como

a prestação de serviços, acabam por alterar substancialmente os planos sejam postas em prática. Avaliações, será possível verificar se o programa está realmente funcionando como originalmente planejado.

Outras razões: A avaliação de programas pode:

4. Facilitar a gestão realmente pensar sobre o seu programa é sobre todos, incluindo os seus objectivos, como se ele atende os objetivos e como ele vai saber se ela tem cumprido as suas metas ou não.

5. Produzir dados ou verificar os resultados que podem ser usados para relações públicas e promoção de serviços na comunidade.

6. Produção de comparações válidas entre os programas para decidir qual deve ser mantida, por exemplo, em face dos cortes orçamentais pendentes.

7. Totalmente examinar e descrever programas eficazes para a duplicação em outro lugar.

Ingredientes básicos: Organização e Programa (s)

Você precisa de uma organização:

Isto pode parecer óbvio demais para discutir, mas antes uma organização embarca na avaliação de um programa, ele deve ter bem estabelecido meios para conduzir-se como uma organização, por exemplo, (no caso de uma organização sem fins lucrativos) a bordo devem estar em boas condições de funcionamento, a organização deverá ser composto e organizado para realizar atividades para trabalhar para a missão da organização, e não deve haver crise atual, que é claramente mais importante para abordar a avaliação de programas.

Programa Need You (s):

Para efetivamente realizar a avaliação de programas, você deve primeiro ter programas. Ou seja, você precisa de uma forte impressão de que seus clientes ou clientes realmente precisam. (Você pode ter usado uma avaliação das necessidades para determinar a essas necessidades - ela própria uma forma de avaliação, mas geralmente o primeiro passo para um bom plano de marketing). Em seguida, você precisa de alguns métodos eficazes para atender cada um desses objetivos. Esses métodos são geralmente sob a forma de programas.

É muitas vezes ajuda a pensar de seus programas em termos de inputs, processos, produtos e resultados. As entradas são os vários recursos necessários para executar o programa, por exemplo, dinheiro, facilidades, os clientes, funcionários do programa, etc O processo é como o programa é realizado, por exemplo, os clientes são servidos, os clientes são aconselhados, as crianças são cuidadas , a arte é criada, os membros da associação são suportados, etc As saídas são as unidades de serviço, por exemplo, o número de clientes atendidos, número de clientes aconselhou, crianças cuidadas, peças artísticas produzidas, ou de membros da associação. Os resultados são os impactos sobre os clientes ou a clientes que recebem serviços, por exemplo, o aumento da saúde mental, e garantir um desenvolvimento seguro, mais rico apreciação artística e perspectivas na vida, o aumento da eficácia entre os membros, etc

Planeamento da avaliação do seu programa

Depende de informações que você precisa para tornar suas decisões e em seus recursos. Muitas vezes, a gestão quer saber tudo sobre os seus produtos, serviços ou programas. No entanto, os limitados recursos geralmente força os gestores a priorizar o que precisa saber para tomar decisões atuais.

Seus planos de avaliação do programa dependerá do que a informação que você precisa para coletar, a fim de tomar decisões importantes. Normalmente, a gestão é enfrentado com ter que tomar decisões importantes, devido ao financiamento diminuiu, as reclamações em curso, as necessidades não satisfeitas dos clientes e dos clientes, a necessidade de polonês prestação de serviços, etc Por exemplo, se você quiser saber mais sobre o que está realmente acontecendo em seus programas, se os programas estão cumprindo seus objetivos, o impacto de seus programas nos clientes, etc? Você pode desejar outras informações ou uma combinação destes. Em última análise, cabe a você.

Mas quanto mais você está focado sobre o que você deseja examinar pela avaliação, o mais eficiente você pode estar na sua avaliação, menor é o tempo que levará você e, finalmente, a menos que lhe custará (seja em seu próprio tempo, o tempo de seus empregados e / ou o tempo de um consultor).

Existem soluções de compromisso, também, a amplitude e a profundidade da informação que obtém. O que você quer mais amplitude, geralmente profundidade a menos que você conseguir (a menos que você tenha uma grande quantidade de recursos para realizar a avaliação). Por outro lado, se você quiser analisar um determinado aspecto de um programa com grande detalhe, você provavelmente não vai conseguir o máximo de informações sobre outros aspectos do programa.

Para aqueles que começam na avaliação de programas ou que têm recursos muito limitados, podem usar vários métodos para obter uma boa mistura de amplitude e profundidade de informações. Eles tanto podem entender mais sobre determinadas áreas de seus programas e não ir à falência fazê-lo.

Considerações-chave: Considere as seguintes questões-chave na concepção de uma avaliação de programa.

1. Para que fins é a avaliação que está sendo feito, ou seja, o que você quer ser capaz de decidir como resultado da avaliação?

2. Quem são as audiências para a informação da avaliação?

3. Que tipos de informações são necessários para tomar a decisão que você precisa para fazer e / ou esclarecer o seu público alvo, por exemplo, a informação realmente entender o processo do produto ou do programa (seus inputs, atividades e saídas), pontos fortes e fracos do produto ou do programa, os benefícios aos clientes ou clientes (resultados), como o produto ou o programa falhou e porquê, etc

4. De que fontes de informação devem ser recolhidos, por exemplo, funcionários, clientes, clientes, grupos de clientes ou de clientes e empregados em conjunto, documentação do programa, etc 5. Como é possível que as informações sejam coletadas de forma razoável, por exemplo, questionários, entrevistas, análise de documentação, observando os clientes ou funcionários, conduzindo grupos de foco entre os clientes ou funcionários, etc

6. Quando é que a informação necessária (assim, até quando ele deve ser recolhido)?

7. Que recursos estão disponíveis para recolher as informações?

Alguns tipos principais de Avaliação de Programas

Ao projetar sua abordagem de avaliação, pode ser útil rever os três seguintes tipos de avaliações, que são bastante comuns nas organizações. Note que não se deve conceber a sua abordagem de avaliação simplesmente escolhendo qual dos três tipos que você irá usar - você deve conceber a sua abordagem de avaliação cuidadosa por abordar as considerações acima da tecla.

Gols-Based Evaluation

Muitas vezes os programas são criados para atender um ou mais objetivos específicos. Esses objetivos são freqüentemente descritos nos planos de programa original.

Meta-avaliações com base são avaliados à medida em que os programas estão cumprindo as metas ou objetivos pré-determinados. Perguntas a fazer na concepção de uma avaliação para ver se você atingiu seus objetivos, estão:

1. Como foram as metas do programa (e objectivos, se aplicável) estabelecida? Foi o processo eficaz?

2. Qual é o estado de progresso do programa para a realização dos objetivos? 3. Será que os objetivos serão alcançados de acordo com os prazos especificados na execução do programa ou plano de operações? Se não, então porquê?

4. Do pessoal dispõe de recursos suficientes (dinheiro, equipamentos, instalações, formação, etc) para atingir os objetivos?

5. Como prioridades deve ser alterado para colocar mais foco em atingir os objetivos? (Dependendo do contexto, esta questão pode ser encarada como uma decisão de gestão do programa, mais de uma questão de avaliação.)

6. Como deve ser mudado Linha do tempo (deve ter cuidado sobre como fazer essas mudanças - sabe por que os esforços estão em atraso antes prazos são alterados)?

7. Como deve ser mudado objetivos (ser cuidadoso sobre como fazer essas mudanças - não sei por que esforços estão a alcançar os objetivos antes de alterar as metas)? Se algum metas ser adicionado ou retirado? Por quê?

8. Como devem ser estabelecidas metas para o futuro?

Processo de avaliações com base

Processo de avaliações baseadas são totalmente orientada para a compreensão de como um programa de obras - como é que produzem esse resultado que ele faz. Estas avaliações são úteis se os programas são de longa data e ter mudado ao longo dos anos, empregados ou clientes relatam um grande número de queixas sobre o programa, parece haver grandes ineficiências na prestação de serviços do programa e eles também são úteis para retratar com precisão para o exterior partes como um programa realmente funciona (por exemplo, para replicação em outros lugares).

Existem inúmeras questões que podem ser abordados em uma avaliação do processo. Estas perguntas podem ser selecionadas com cuidado considerando que é importante para saber sobre o programa. Exemplos de perguntas para perguntar ao conceber uma avaliação de entender e / ou examinar de perto os processos de seus programas, são:

1. Em que base os empregados e / ou clientes de decidir que produtos ou serviços são necessários?

2. O que é exigido dos trabalhadores, a fim de entregar o produto ou serviços?

2. Como são funcionários treinados sobre como entregar o produto ou serviços?

4. Como os clientes ou clientes entram no programa?

5. O que se exige de clientes ou clientes?

6. Como os funcionários selecionar quais produtos ou serviços que serão prestados ao cliente ou cliente?

7. Qual é o processo geral de que os clientes ou clientes percorrer com o produto ou o programa?

8. O que os clientes ou clientes consideram ser os pontos fortes do programa?

9. O que o pessoal não consideram ser os pontos fortes do produto ou do programa?

10. O que são ouvidas as queixas típicas dos empregados e / ou clientes?

11. O que empregados e / ou clientes recomendam para melhorar o produto ou o programa?

12. Em que base emplyees e / ou o cliente decidir que o produto ou serviços não são mais necessários?

Baseados em resultados de avaliação

A avaliação de programas com foco nos resultados é cada vez mais importante para organizações sem fins lucrativos e pediu por resultados funders.An baseado em sua avaliação facilita a perguntar se a sua organização está fazendo realmente as atividades do programa certo para trazer os resultados que você acredita (ou melhor ainda, você verificado) a ser necessárias por seus clientes (e não apenas exercício de actividades ocupada que parece razoável a fazer no momento). Os resultados são os benefícios para os clientes da participação no programa. Os resultados são geralmente em termos de reforço da aprendizagem (conhecimento, percepções / atitudes e habilidades) ou condições, por exemplo, a alfabetização aumentou, a auto-suficiência, etc Os resultados são freqüentemente confundidos com as saídas do programa ou unidades de serviços, por exemplo, o número de clientes que passou por um programa.

A United Way of America (http://www.unitedway.org/outcomes/) fornece uma excelente visão de avaliação baseada em resultados, incluindo a introdução de resultados de medição, resultado de um modelo de programa, por que medir resultados, a utilização dos resultados da evolução do programa pelas agências, oito passos para o sucesso de medição de resultados, exemplos de resultados e indicadores de resultados de vários programas e os recursos necessários para medir resultados. As informações a seguir é um resumo de alto nível de informação deste site.

Para realizar uma avaliação dos resultados-based, você deve primeiro piloto, ou de teste, este método de avaliação sobre um ou dois programas no máximo (antes de fazer todos os programas).

Os passos gerais para realizar uma avaliação baseada em resultados incluem a:

1. Identificar os principais resultados que você deseja examinar ou verificar para o programa em avaliação. Você pôde refletir sobre sua missão (o objectivo global da sua organização) e pergunte-se o impacto que terá sobre os seus clientes como você trabalhar no sentido de sua missão. Por exemplo, se a sua missão primordial é dar abrigo e recursos para mulheres maltratadas, em seguida, perguntar-se quais os benefícios que isso terá sobre as mulheres, se você efetivamente proporcionar-lhes abrigo e outros serviços ou recursos. Como último recurso, você pode se perguntar: "Quais as atividades principais que estamos fazendo agora?" e, em seguida, para cada atividade, perguntar "Por que estamos fazendo isso?" A resposta a esta "Porquê?" pergunta é geralmente um resultado. Este "último recurso" abordagem, porém, pode acabar justificando atividades ineficaz você está fazendo agora, ao invés de examinar o que você deve fazer em primeiro lugar.

2. Escolha os resultados que você deseja examinar, priorize os resultados e, se o tempo e os recursos são limitados, pegue os dois para quatro resultados mais importantes a examinar agora. 3. Para cada resultado, especificar que medidas observáveis ou indicadores, vai sugerir que você chegar a esse resultado chave com seus clientes. Isso é muitas vezes o mais importante e esclarecedor passo em resultados baseados avaliação. No entanto, muitas vezes é o mais desafiador e até mesmo passo confuso, também, porque de repente você está indo de um conceito bastante intangível, por exemplo, aumento da auto-suficiência, para atividades específicas, por exemplo, apoiar os clientes a obter-se para o trabalho, ficar longe das drogas e do álcool, etc Ela ajuda a ter um advogado-diabo "durante esta fase de identificação de indicadores, ou seja, alguém que pode questionar porque você pode assumir que um resultado foi alcançado porque certos indicadores associados estiveram presentes.

4. Especifique um destino "meta" dos clientes, ou seja, o número ou a porcentagem de clientes de se comprometer a alcançar resultados específicos, com, por exemplo, "aumentou a auto-suficiência (resultado um) para 70% dos adultos, Africano das mulheres americanas que vivem no interior da cidade de Minneapolis como evidenciado pelas seguintes medidas (indicadores) ... "

5. Identificar quais informações são necessárias para mostrar esses indicadores, por exemplo, você precisa de saber quantos clientes do grupo alvo passaram pelo programa, como muitos deles de forma fiável comprometeu seu próprio transporte para o trabalho e ficou fora das drogas, etc Se o seu programa é novo, pode ser necessário para avaliar o processo do programa para verificar se o programa é de fato realizado de acordo com seus planos originais. (Michael Patton, destacado pesquisador, escritor e consultor em avaliação, sugere que o tipo mais importante de avaliação para realizar esta avaliação pode ser a aplicação para verificar se o programa acabou por ser implementada como originalmente planejado.)

6. Decidir como essa informação pode ser recolhida de forma eficiente e realista (consulte Seleccionar quais métodos usar abaixo). Considere a documentação do programa, a observação do pessoal de programa e clientes no programa, questionários e entrevistas sobre os clientes perceberam benefícios do

programa, estudos de caso de falhas do programa e os sucessos, etc Você pode não precisar de todas as anteriores. (consulte Visão geral dos métodos para recolher informações abaixo).

7. Analisar e relatar os resultados (veja Análise e interpretação das informações abaixo).

Resumo dos métodos para recolher informações

A tabela a seguir fornece uma visão geral dos principais métodos utilizados para a coleta de dados durante as avaliações.

Método Objetivo geral Vantagens Desafios

questionários, inquéritos, checklists

entrevistas

revisão da documentação

observação

quando precisa rapidamente e / ou facilmente obter muitas informações de pessoas de uma maneira não ameaçadora, pode concluir de forma anónima

quando quiser compreender plenamente as impressões de alguém ou experiências, ou saber mais sobre as suas respostas aos questionários

quando querem impressão de como o programa opera sem interromper o programa, é de análise dos pedidos, finanças, memorandos, atas de informação, etc

para coletar informações precisas sobre como um programa realmente funciona, particularmente sobre os processos

explorar um tema em profundidade através de discussão em

-barato para administrar

-fácil de comparar e analisar - questionários da amostra já existem,

- Não tem história completa

-maior alcance e profundidade de informações

-desenvolve-relacionamento com o cliente

-pode ser flexível com o cliente pode levar muito tempo

-get abrangente e histórico

-Não interessa interromper programa ou rotina do cliente no programa

-informações já existe

programa como eles estão realmente ocorrendo

pode-se adaptar a eventos como eles ocorrem, pode ser difícil de interpretar comportamentos

forma rápida e confiável obter comum impressões

- muitos não puderam obter feedback cuidado

-são impessoais

-pode ser difícil de analisar e comparar

-pode ser onerosa

-entrevistador pode gerir respostas do cliente

-alguns vezes sobre a informação, muitas vezes leva muito tempo-informação pode estar incompleta-necessidade de ser bastante claro sobre o que procura-meios não-flexível para obter os dados, os dados restrito ao que já existe

-pode ser complexa para categorizar observações- podem influenciar o comportamento dos participantes do programa-pode ser caro

podem ser difíceis de analisar as respostas

-necessidade de bom

grupos de foco

estudos de caso

grupo, por exemplo, sobre as reações a uma experiência ou sugestões, reclamações entendimento comum, etc;

para compreender ou descrever as experiências do cliente em um programa, e realizar análise global através da comparação cruzada dos casos em plena

pode ser eficiente para obter escala muito e profundidade de informações em curto espaço de tempo

- Pode transmitir informações-chave sobre os programas

retrata a experiência do cliente na entrada do programa, processo e resultados-poderoso meio para retratar programa para pessoas de fora

facilitador para a segurança e encerramento

-dificuldade para agendar as pessoas

-geralmente consomem muito tempo para coletar, organizar e descrever

representa a profundidade da informação, ao invés de largura

Sempre comece com seus objetivos de avaliação:

Ao analisar os dados (a partir de questionários, entrevistas, grupos focais, ou qualquer outro), sempre a partir de revisão de suas metas de avaliação, ou seja, o motivo pelo qual você se comprometeu a avaliação, em primeiro lugar. Isso irá ajudá-lo a organizar seus dados e concentrar sua análise. Por exemplo, se você quiser melhorar o seu programa, identificando seus pontos fortes e fracos, você pode organizar os dados em pontos fortes do programa, os pontos fracos e sugestões para melhorar o programa. Se você quiser compreender como funciona o programa, você pode organizar os dados na ordem cronológica em que os clientes passam por seu programa. Se você estiver realizando uma avaliação com os resultados, você pode categorizar os dados de acordo com os indicadores para cada resultado.

Básicos de análise "quantitativa" da informação (para outras informações que o comentário, por exemplo, as classificações, rankings, sim, nenhum, etc):

1. Faça cópias de seus dados e guardar a cópia mestra de distância. Use a cópia para fazer edições, recorte e colagem, etc

2. Tabular as informações ou seja, somar o número de avaliações, rankings, sim, nenhum para cada questão.

3. Para avaliações e rankings, computação consideram uma média ou média, para cada questão. Por exemplo, "Para a pergunta n º 1, a classificação média foi de 2,4". Isto é mais significativo do que a indicação, por exemplo, como muitos entrevistados classificam 1, 2 ou 3.

4. Considerar o encaminhamento do conjunto de respostas, por exemplo, 20 pessoas, classificado "1", 30 classificados "2", e 20 pessoas, classificado "3".

Básicos de análise "qualitativa" a informação (respostas dos entrevistados verbal nas entrevistas, grupos de foco, ou um comentário escrito em questionários):

1. Leia através de todos os dados.

2. Comentários organizar em categorias semelhantes, por exemplo, preocupações, sugestões, pontos fortes, pontos fracos, experiências semelhantes, insumos programa, recomendações, saídas, indicadores de resultados, etc

3. Gravadora as categorias ou temas, por exemplo, preocupações, sugestões, etc

4. Tentativa de identificar padrões, ou associações e relações causais nos temas, por exemplo, todas as pessoas que participaram dos programas da noite tinha preocupações semelhantes, a maioria das pessoas veio da mesma área geográfica, a maioria das pessoas estavam na mesma faixa salarial, quais processos ou eventos inquiridos experiência durante o programa, etc

5. Manter todos os comentários durante vários anos após a conclusão do processo necessário para referência futura.Informações Interpretação:

1. Tentativa de colocar as informações em perspectiva, por exemplo, comparar os resultados com o esperado, os resultados prometidos; pessoal de gestão ou programa; qualquer padrão comum para os seus serviços; metas do programa original (especialmente se você está realizando uma avaliação de programa); indicações de realizar resultados (especialmente se você está realizando uma avaliação dos resultados); descrição de experiências do programa, pontos fortes, pontos fracos, etc (especialmente se você está realizando uma avaliação do processo).

2. Considere as recomendações para ajudar a equipe do programa melhorar o programa, as conclusões sobre as operações do programa ou objetivos da reunião, etc

3. Record conclusões e recomendações em um documento do relatório, e as interpretações associar para justificar suas conclusões ou recomendações.

Relatório de Avaliação de Resultados

1.O nível e âmbito de aplicação do conteúdo depende de quem o relatório destina-se, por exemplo, para os banqueiros, os investidores, empregados, clientes, clientes, público, etc

2. Certifique-se os empregados têm a oportunidade de examinar cuidadosamente e discutir o relatório. Traduzir recomendações aos planos de acção, incluindo o que vai fazer o que sobre o programa e até quando.

3. Banqueiros ou financiadores provavelmente vai exigir um relatório que inclui um sumário executivo (este é um resumo das conclusões e recomendações, não é um anúncio de que seções de informações estão no relatório - que é uma tabela de conteúdos); descrição de theorganization eo programa sob avaliação; explicação dos objectivos de avaliação, métodos e procedimentos de análise; anúncio das conclusões e recomendações; e quaisquer anexos relevantes, por exemplo, a inclusão de questionários de avaliação, guias de entrevista, etc O banqueiro ou financiador pode querer o relatório a ser entregue como uma apresentação, acompanhada por uma síntese do relatório. Ou, o banqueiro ou financiador pode querer rever o relatório sozinho.

4. Certifique-se de registrar os planos de avaliação e atividades em um plano de avaliação que pode ser referenciado quando uma avaliação de programa semelhante é necessário no futuro.

Conteúdo de um Relatório de Avaliação – Exemplo

Um exemplo do conteúdo do relatório de avaliação está incluída posteriormente seguir neste documento. Clique em Conteúdo de um Plano de Avaliação, mas não se esqueça de olhar para a próxima seção "Quem deve proceder à avaliação".

Quem deve realizar a avaliação?

Idealmente, a gerência decide quais são os objetivos de avaliação deve ser. Em seguida, um especialista em avaliação ajuda a organização a determinar quais os métodos de avaliação deve ser, e como os dados resultantes serão analisados e reportados para a organização. A maioria das organizações não têm recursos para realizar a avaliação ideal.

Ainda assim, eles podem fazer os 20% do esforço necessário para gerar 80% do que precisa saber para tomar uma decisão sobre um programa. Se eles podem pagar nenhuma ajuda externa em tudo, ele deve ser para identificar os métodos de avaliação adequados e como os dados podem ser coletados. A organização pode encontrar um recurso menos dispendioso para aplicar os métodos, por exemplo, conduzir entrevistas, mande e analisar os resultados dos questionários, etc

Se nenhuma ajuda externa podem ser obtidos, a organização ainda pode aprender muito na aplicação dos métodos e análise de resultados em si. No entanto, existe uma forte probabilidade de que os dados sobre os pontos fortes e fracos de um programa não será interpretado razoavelmente se os dados são analisados pelo pessoal responsável por assegurar que o programa é uma boa. Os gerentes de

programas será "policiamento" a si mesmos. Este cuidado não é para gestores de programas de falhas, mas reconhecer os fortes preconceitos inerentes a tentar objectivamente olhar e público (pelo menos dentro da organização) relatório sobre os seus programas. Portanto, se possível, ter alguém que não os gestores do programa olha e determinam os resultados da avaliação.

Conteúdo de um Plano de Avaliação

Desenvolver um plano de avaliação para garantir o seu programa de avaliações são realizadas de forma eficiente no futuro. Note-se que os bancos ou financiadoras podem querer ou beneficiar de uma cópia do plano.

Certifique-se de seu plano de avaliação está documentado para que você possa regular e eficaz realizar suas atividades de avaliação. Record informação suficiente no plano para que alguém de fora da organização pode entender o que você está avaliando e como. Considere o seguinte formato para o seu relatório:

1. Página de Título (nome da organização que está sendo, ou tem um produto / serviço / programa que está sendo, avaliou, data)

2. Tabela de Conteúdos

3. Sumário Executivo (uma página, concisa das conclusões e recomendações)

4. Objectivo do relatório (que tipo de avaliação (s) foi realizado, as decisões que estão sendo ajudados pelos resultados da avaliação, que é tomada a decisão, etc)

5. Fundo sobre Organização e produto / serviço / programa que está sendo avaliada uma História) Descrição da Organização

b) do produto / serviço / Descrição do programa (que está sendo avaliado) i) Declaração problema (no caso da descrição, sem fins lucrativos da necessidade da comunidade que está sendo atendida pelo produto / serviço / programa)

ii) a meta global (s) Programa de produto / serviço /

iii) Resultados (cliente / ou impacto do cliente) e medidas de desempenho (que podem ser medidos como indicadores para os resultados)

iv) Actividades / Tecnologias do produto / serviço / programa (descrição geral de como o produto / serviço / programa é desenvolvido e entregue)

v) Pessoal (descrição do número de pessoal e funções na organização que são relevantes para o desenvolvimento e fornecimento do produto / serviço / programa)

6) Gols Avaliação global (por exemplo, que perguntas estão sendo respondidas pela avaliação)

7) Metodologia

a) Tipos de dados / informações que foram coletadas

b) Como os dados / informações foram coletadas (que instrumentos foram utilizados, etc)

c) Como os dados / informações foram analisadas

d) Limitações da avaliação (por exemplo, adverte sobre os resultados / conclusões e como utilizar os resultados / conclusões, etc)

8) interpretações e conclusões (a partir da análise dos dados / informação)

9) Recomendações (a respeito das decisões que devem ser feitas sobre o produto / serviço / programa)

Apêndices: o conteúdo dos anexos depende dos objetivos do relatório de avaliação, por exemplo: a) Os instrumentos utilizados para coletar dados / informações

b) Data, por exemplo, em formato tabular, etcc) Depoimentos, comentários feitos pelos usuários do produto / serviço / programad) Os estudos de caso dos usuários do produto / serviço / programae) Toda a documentação relacionada

Armadilhas para Evitar

1. Não recusaria a avaliação, porque parece muito "científico". Não é. Normalmente, o primeiro 20% do esforço vai gerar 80% do primeiro plano, e isso é muito melhor do que nada.

2. Não há nenhum projeto de avaliação "perfeito". Não se preocupe com o plano de ser perfeito. É muito mais importante para fazer alguma coisa, do que esperar até que todos os detalhes foram testados.

3. Trabalhe duro para incluir algumas entrevistas em seus métodos de avaliação. Questionários não captam a "história", e história é normalmente a representação mais poderoso dos benefícios de seus serviços.

4. Não entrevista apenas os sucessos. Você vai aprender muito sobre o programa por entender suas falhas, desistências, etc

5. Não jogue fora os resultados da avaliação uma vez que um relatório foi gerado. Resultados não ocupam muito espaço, e podem fornecer informações preciosas mais quando se tenta compreender as mudanças no programa.