Avaliação e Monitoramento de Projetos

Programa Regional de Formação para o Desenvolvimento Econômico Local com

Inclusão Social - Brasil

Gerência de Fomento e Desenvolvimento

2014

Conteúdo

• Conceitos de avaliação e monitoramento

• Fases de avaliação– Inicial– Intermediária– Final

• Instrumentos– Sistema do Marco Lógico– Gerenciamento de riscos

Avaliação de Projetos

Conceitos e Etapas de Avaliação

Avaliação

Avaliação• Conjunto de operações que permite, de um lado,

compilar e armazenar ordenadamente a informação relativa ao projeto e, de outro lado, analisá-la para tomar decisões que afetam sua evolução.

– Fonte: PTI / BID, 2014

Etapas de avaliação

• PlanejamentoAvaliação inicial

• Monitoramento e controle, replanejamento

Avaliação intermediária

• Termo de encerramento, memória e lições aprendidas

Avaliação final

AvaliaçãoAvaliação

inicial

Permite a delimitação do âmbito de ação e verifica a coerência interna do projeto.

Avaliação intermediária

Monitoramento• Verifica a coincidência

entre ações realizadas e planejadas.

Processo• Verifica os resultados

intermediários.

Estratégia• Avalia a propensão e o

comprometimento dos atores locais com a iniciativa.

Avaliação final

Permite estimar os resultados alcançados e o êxito do projeto.

Fonte: CNI, 2009.

Avaliação de Projetos

Componentes e instrumentos

Escopo - Planejamento

Que objetivos vou atender?

Quem vou atender?

Em que lugar vou atender?

Quais atividades vou executar?

Positivo

Que objetivos não vou atender?

Quem não vou atender?

Em que lugar não vou atender?

Quais atividades não vou executar?

Negativo

Que mais?

Escopo

• Pode fazer parte do escopo do projeto:– Objetivos geral e específicos– Premissas– Limites– Restrições– Lista positiva e negativa– Estrutura analítica do projeto– Matriz de responsabilidades e de comunicação (RACE)

– IMPORTANTE: se possível, um termo de abertura do projeto contendo essas informações e com assinatura de aceite dos parceiros.

Hora do exemplo

Planejamento do monitoramento

• Indicadores–Faz parte dessa atividade

a incorporação de um sistema de indicadores que permita verificar posteriormente o acompanhamento do projeto.

–Fonte: PTI / BID, 2014.

Indicadores – aspectos relevantes

• O que pode ser um indicador:– Número (contagem)– Proporção (porcentagem) – Taxa– Média – Mediana– Razão – Índice (composição de indicadores)

• Fonte: Measure Evaluation, 2008

Indicadores – exemplos– Número (n◦ de escolas primárias)– Proporção (n◦ de escolas primárias/n◦ total de escolas) – Taxa (n◦ de acidentes com morte/ n◦ de acidentes totais)– Média (50 viagens de 5 pessoas – 10 viagens por pessoa)– Mediana – medida de tendência central– Razão - n◦ de jovens universitários na rede/ n◦ de jovens

não universitários na rede– Índice (composição de indicadores)- INPC

• Fonte: Measure Evaluation, 2008

Cream

Claro

Relevante

Econômico

Adequado

Monitorável

Indicadores – Aspectos relevantes

Indicadores – aspectos relevantes

SMART

Specific

Measurable

Achievable

Relevant

Time Based

• Tᵒ T¹ Tⁿ...

Linha de base

Avaliação de Projetos

Instrumentos

Sistema do Marco Lógico• Definição• Instrumento que ajuda aos formuladores de

projetos a entender melhor a natureza dos problemas que estão tratando de resolver.

• Fonte: BID, 1997.

COMPONENTES

FINALIDADE

OBJETIVO

ATIVIDADES

OBJETIVOS INDICADORES MEIOS VERIFICAÇÃO PRESSUPOSTOS

Sistema do Marco Lógico

• Contexto• O Marco Lógico surgiu no contexto da cooperação

internacional, em virtude de alguns problemas relacionados aos projetos, levantados no final dos anos setenta pela Agência Americana de Cooperação Internacional / United States Agency for International Developments (USAID).

• Fonte: Seplan / AM

Sistema do Marco Lógico

• Contexto• Informe anual de 1994 do BID

informa que:

– 145 de 352 projetos (41,2%) ou;– US$ 5.500 milhões (29,6%) do

saldo não desembolsado

• Encontram-se em estado de execução lenta, atrasada ou situação problemática.

Fonte: BID, 1997.

• Contexto• Segundo pesquisa do PMI

(Project Management Institute) em torno de 30% dos projetos não atingem seus objetivos e, aproximadamente 17% são completamente descontinuados.

• Fonte: PMI, Pulse 2008.

Sistema do Marco Lógico

Sistema do Marco Lógico

• Ferramentas de Diagnóstico• Análise das partes

interessadas• Análise dos problemas

• Ferramentas de Identificação• Análise de objetivos• Análise de alternativas

Estrutura

Análise das partes interessadas

Grupo/ Organização

Interesses

Ameaças

Oportunidades

Recursos

Representação Formal

Hora do Exercício

Análise do problema

• Primeira questão:• O que é um problema?

– Dica importante:– Não confundir causa do problema com efeito ou possível solução

– Exemplo:

• Faz falta um semáforo

• Há uma alta taxa de acidentes

Hora do Exercício

Árvore de efeitos

Fonte: Measure Evaluation, 2008

Árvore de efeitos

Fonte: Measure Evaluation, 2008

Árvore de efeitos

Fonte: Measure Evaluation, 2008

Árvore de efeitos

Fonte: Measure Evaluation, 2008

Árvore de causas

Fonte: Measure Evaluation, 2008

Árvore de causas

Fonte: Measure Evaluation, 2008

Análise de objetivos

• Representa a situação esperada.• Constrói-se a situação contrária à árvore de

problemas.

– Efeitos se transformam em fins;– Causas se transformam em meios.

Árvore de objetivos

Fonte: Measure Evaluation, 2008

Árvore de objetivos

Fonte: Measure Evaluation, 2008

Identificação de ações

Fonte: Measure Evaluation, 2008

Análise de alternativas

• O processo participativo da avaliação inicial / planejamento deve permitir que se avalie a melhor alternativa de projeto para a solução do problema.

• Deve-se considerar os aspectos de viabilidade:– Técnicos viabilidade – Institucionais recursos, apoio– Sociais viabilidade, apoio– Ambientais impacto, viabilidade– Financeiros viabilidade

Análise de alternativas

• Deve-se considerar, além da viabilidade, a urgência / necessidade e a precedência (Pareto) das possíveis alternativas de solução.

Sistema do Marco Lógico• Matriz do Marco Lógico

Componentes

Finalidade

Objetivo

Atividades

Objetivos Indicadores Meios verificação Pressupostos

Marco Lógico

• Finalidade – é uma expressão da solução do problema detectado. – Exemplo: reduzir a taxa de mortalidade infantil em

determinada população de respectiva localidade.

• Objetivo – representa o efeito direto do projeto. A mudança que se espera com o projeto.– Exemplo: incidência de enfermidades derivadas de

impurezas na água reduzidas.

Marco Lógico

• Componentes – são os resultados específicos, os produtos a serem entregues com o recurso designado.– Exemplo: obras, estudos, serviços, capacitação.

• Atividades – conjunto de atividades / tarefas que contribuem para cada componente seja entregue.

Hora do Exemplo

Gerenciamento de riscos• O risco do projeto é um evento ou condição incerteza

que, se ocorrer, terá um efeito positivo ou negativo sobre pelo menos um objetivo do projeto, como tempo, custo, escopo ou qualidade.

• Fonte: PMI, 2004

Escopo

Custo

Qualidade

Tempo

Gerenciamento de riscos

BAIXO ALTO

ALTA

PR

OB

AB

ILID

AD

E

IMPACTO

Fonte: Salles, 2004

Gerenciamento de riscos

Planejamento Identificação Análise qualitativa

Análise quantitativa

Plano de respostas

Monitoramento e controle

Análise qualitativaEscore de Risco

  Impacto

Probabilidade 0,1 (MB) 0,3 (B) 0,5 (M) 0,7 (A) 0,9 (MA)

0,9 (MA) 0,09 0,27 0,45 0,630,63 0,81

0,7 (A) 0,07 0,21 0,35 0,49 0,630,63

0,5 (M) 0,05 0,15 0,25 0,35 0,45

0,3 (B) 0,03 0,09 0,15 0,21 0,27

0,1 (MB) 0,01 0,03 0,05 0,07 0,09

0,21 0,49

0,35

0,27

Análise quantitativaDescrição Probabilidade Impacto Valor esperado

Greve de fornecedores

50% $500.000 250.000 (+)

Protótipo funciona de 1ª

20% $200.000 $40.000 (-)

Inundações em março

90% $5.000 $4.500 (+)

Valor esperado $214.500 (+)

Análise quantitativa

Valor base = R$5.000.000

Melhor caso = R$4.800 (valor base – oportunidades = $5.000.000 – 200.000)

Valor esperado = R$5.214.500

Pior caso = R$5.505.000 (valor base + ameaças)

Análise quantitativaUma árvore de decisão é um diagrama que descreve as principais interações entre decisões e possibilidades.

A análise de árvore de decisão usa a noção do Valor Esperado para determinar o conjunto de resultados.

É um diagrama de todos os atos, eventos e resultados possíveis.

Uma árvore de decisão é um diagrama que descreve as principais interações entre decisões e possibilidades.

A análise de árvore de decisão usa a noção do Valor Esperado para determinar o conjunto de resultados.

É um diagrama de todos os atos, eventos e resultados possíveis.

Decisão

Evento

D1

D2

E1

E2

E1

E2

O1

O2

O1

O2

Análise quantitativa

• Viagem de avião – Curitiba / Brasília• Cia A – passagem custa $750• Cia B – passagem custa $1.000• Custos de atraso:• Histórico de chegada no horário• Cia A – 60%• Cia B – 90% • Custo de atraso - $1.050

Análise quantitativa

Plano de respostas

Negativos

•Aceitar•Transferir•Mitigar

Positivos

•Aceitar•Compartilhar•Melhorar

Monitoramento e controle

• Importante:

• Riscos mudam ao longo do projeto, novos riscos aparecem e aqueles previstos no início podem também desaparecer.

Monitoramento e controle

• Determinar se:

• Respostas estão sendo implementadas conforme planejamento

• Respostas estão atendendo os objetivos, ou novas respostas são necessárias

• Premissas do projeto ainda são válidas• Surgiram riscos não previstos

Hora do exemplo

Avaliação Final

• A avaliação é um processo contínuo, a avaliação final é o momento de verificar quanto se atingiu do esperado e os porquês (lições aprendidas)

Template

Obrigado

Marcelo Percicotti

marcelo.percicotti@pr.senai.br

(41) 3271 - 9141