Avaliação de Políticas SociaisRepensando os problemas socias e os métodos para combatê-losLUIGI CENATTI GIANNI

9 milhões de crianças com menos de 5 anos morrem por ano...

... O equivalente ao terremoto no Haiti a cada 8 dias.

1. A ajuda financeira pode acabar com a pobreza?

Fonte: "Can the West Save Africa?," Journal of Economic Literature, American Economic Association

Vs.

2. Como imunizar pessoas?

3. Como acabar com a malária?

4. Como manter as crianças na escola?

1. A ajuda financeira pode acabar com a pobreza?2. Como imunizar pessoas?

3. Como acabar com a malária?4. Como manter as crianças na escola?

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Quebrando o problema...

Pobreza

Educação

Básica Superior

Saúde Renda

Quebrando o problema...

Educação BásicaAusência

de Professores

Ausência de Alunos

Qualidade do Ensino

Quebrando o problema...

Ausência de Alunos

Entendendo o problema...

FORMULANDO HIPÓTESES PARA A CAUSA DO PROBLEMA

1. Renda familiar baixa: crianças precisam trabalhar.

2. Pais não entendem os ganhos da educação.

3. Crianças passando fome.

4. ...

FORMULANDO HIPÓTESES PARA AS SOLUÇÕES DO PROBLEMA

1. Bolsas pagas às famílias se crianças forem à escola.

2. Informar os pais dos ganhos da educação.

3. Financiar refeições na escola.

4. ...

Escolhendo indicadores...

PORCENTAGEM DE CRIANÇAS COM PRESENÇA MÍNIMA

MÉDIA (E DESVIO PADRÃO) DAS NOTAS

40% 5,93

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Experimentos Randômicos

GRUPO DE CONTROLE

GRUPO DE TESTE

Experimentos Randômicos

Tempo

% de crianças com presença mínima

40

60

Política social é aplicada

Impacto da política

80

Por quê randomizar?

Impacto da política

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Estruturando o experimento...

• Qual a unidade de randomização?• Coleta de dados• Problemas de Crossover e Spillover

• Qual o método de randomização?• Loteria básica• Phase-In, Two-Stage Randomization...

• Qual o tamanho da amostra?

• A estrutura de avaliação é justa?

Quando não utilizar o método

• Ao avaliar políticas macroeconômicas

• Quando é anti-ético negar à população acesso ao tratamento

• Se o experimento difere de suas condições normais

• Se o experimento é caro

• Se a amostra é muito pequena

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Implicações na gestão pública

• Validade interna e externa• Custo-benefício Anos de estudo por

US$ 100,00

Política 1 Política 2 Política 3

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Mantendo as crianças na escola...

FORMULANDO HIPÓTESES PARA A CAUSA DO PROBLEMA

1. Trabalho infantil

2. Barreiras culturais

3. Condições de saúde

4. Qualidade do ensino

FORMULANDO HIPÓTESES PARA AS SOLUÇÕES DO PROBLEMA

1. Compra de uniformes

2. Bolsas para famílias de crianças que compareciam na escola

3. Informar pais

4. Bolsas de mérito para mulheres

5. Desparasitação (Deworming)

6. Refeições na escola

7. Compra de livros

8. Investimento em professores

Mantendo as crianças na escola...

Compra de uniformes

Bolsas para famílias

Desparasitação

Refeições na escola

Compra de livros

Investimento em professores

Bolsas de mérito p/ mulheres

Informar pais

Mantendo as crianças na escola...

Mantendo as crianças na escola...

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Imunização

• Pais precisavam caminhar até os postos de saúde, e constantemente os encontravam fechados.

• Pais não tinham motivação para voltar.

• Pais se preocupavam com saúde dos filhos.

Imunização

Grupo de Controle

IntervençõesIntervenções com incentivos

Imunização

Controle Interv. Interv. c/ Incentivos

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Combate à malária...

Distribuindo mosquiteiros (bed nets):

• Se as pessoas precisarem pagar pelos mosquiteiros, elas vão comprá-los?

• Se as pessoas os ganharem de graça, elas vão utilizá-los?

• Mosquiteiros de graça diminuem a chance das pessoas adquirirem mais no futuro?

Combate à malária...

Se as pessoas precisarem pagar pelos mosquiteiros, elas vão comprá-los?

Combate à malária...

Se as pessoas os ganharem de graça, elas vão utilizá-los?

Combate à malária...

Mosquiteiros de graça diminuem a chance das pessoas adquirirem mais no futuro?

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Corrupção no Brasil...

• Não existem informações disponíveis facilmente sobre casos de corrupção

• Transparência é essencial para a democracia• 676 municípios foram auditados. Em 376, os

resultados foram publicados em jornais e rádios.

• Para cada violação adicional, a chance de um candidato ser reeleito diminuia em 20%

AGENDA TEORIA

• Quebrando o problema• Entendendo o problema• Escolhendo indicadores• Experimentos Randômicos• Por quê randomizar?• Estruturando o experimento• Quando não utilizar o método• Implicações na gestão pública

PRÁTICA

• Mantendo as crianças na escola• Imunização• Combate à malária• Corrupção no Brasil

CONCLUSÕES

Conclusões

“... She has broken out of the ivory tower to do something economists rarely do: gather real data to see what really works in.”

The 2011 Time 100 Most Influtential People

Conclusões

Relembrando o método:

1. Quebrar o problema em diversas partes;2. Formular hipóteses para as causas;3. Formular hipóteses para as soluções;4. Escolher indicadores, e colher dados da situação atual;

5. Estruturar o experimento randômico;

6. Discutir validade externa do experimento;

7. Calcular custo-benefício.

Conclusões

Avaliação de Políticas SociaisRepensando os problemas socias e os métodos para combatê-losLUIGI CENATTI GIANNI

lcg@neo.ufsc.br

www.neo.ufsc.br

/neoempresarial