Módulo 03 - Teoria da Mudança 20171003

Prévia do material em texto

Teoria da Mudança
Carolina Morais Araújo
Gerente do J-PAL no Brasil
Revisão: Tipos de avaliação
Impact Evaluation
Cost-Effectiveness Analysis
Avaliação de Necessidades
Avaliação Teórica
Avaliação de Processos 
Avaliação de Impacto
Avaliação de Eficiência
2
Estrutura
• O que é a Teoria da Mudança?
• Como fazer uma Teoria da Mudança?
• Por que a Teoria da Mudança é importante?
3
O que é a Teoria da Mudança?
O que é a Teoria da Mudança?
• A Teoria da Mudança é uma descrição ampla e ilustrada de como se 
espera que aconteça uma mudança num contexto particular
• A Teoria da Mudança é um meio de sabermos até onde vamos (resultados)
e como chegamos (processos)
• Detalha todas as mudanças implícitas que têm que ocorrer entre as 
atividades de um programa e seus objetivos de longo prazo
5
Objetivos da Teoria da Mudança
• Comunicação e descrição da intervenção
• Desenho de Intervenção e Planejamento Estratégico
• Monitoramento e Avaliação
6
7
Fonte: Oxfam America, 
Freedom From Hunger
A Teoria da 
Mudança 
pode ter 
diferentes 
formas…
8
A Teoria da Mudança pode ter diferentes formas…
Fonte: AmplifyChange 
9
A Teoria da Mudança pode ter diferentes formas…
Fonte: Infographic (artofagency.com)
Outra abordagem: o marco lógico
10
Objetivos Indicadores
Fonte de 
verificação
Premissas
Impacto
Propósito
Componentes
Atividades
Nosso exemplo de Teoria da Mudança
11
Resultado final
Problema/ 
Necessidade
Insumo/ 
Atividade
Produto
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado final
Como construir uma Teoria da Mudança?
Exemplo: Programa Um Laptop por Aluno
Fonte: 
http://one.
laptop.org 13
Cinco passos
1. Definir o propósito
2. Completar a cadeia causal
3. Identificar premissas e riscos
4. Resumir a hipótese causal
5. Definir indicadores
14
1. Definir o propósito
O que é o propósito?
• É a mudança macro que queremos realizar com nosso programa
• Também pode ser pensado como a “razão pela qual existe nosso 
programa”
• Muitas vezes, assemelha-se à missão da organização que implementa o 
programa
15
1. Definir o propósito
Um laptop por aluno:
• Melhorar a educação básica de regiões vulneráveis
16
2. Completar a cadeia causal
17
Resultado final
Problema/ 
Necessidade
Insumo/ 
Atividade
Produto
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado final
Problemas/ Necessidades
• Explicitam as carências que 
queremos enfrentar, não o 
objetivo que queremos alcançar
• Especificam a população-alvo
• Relacionam-se diretamente aos 
resultados finais do programa
Problema/ 
Necessidade
Insumos/ 
Atividade
Produto
Resultado 
final
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado 
final
18
Exemplo: Um Laptop por Aluno
19
Problema/ 
necessidade
Baixo desempenho escolar
Resultados finais
• São as mudanças de longo 
prazo que queremos conseguir 
provocar com nosso programa
• São o avanço no estado de 
desenvolvimento de nossa 
população-alvo
• Estão diretamente relacionados 
às necessidades
Problema / 
Necessidade
Insumos / 
Atividade
Produto
Resultado 
final
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado 
final
20
Exemplo: Um Laptop por Aluno
21
Problema/ 
necessidade
Resultado final
Baixo desempenho escolar
Melhor desempenho escolar
2. Completar a cadeia causal
Do final 
ao início
Problema / 
Necessidade
Insumos / 
Atividades
Produto
Resultado final
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado final
22
Útil na etapa de desenho do programa
Pensar na Teoria da 
Mudança nos obriga a 
focar nos resultados que 
queremos provocar e 
comprovar a credibilidade 
das nossas premissas
Identificar a melhor 
estratégia para 
conseguir o 
resultado desejado
23
2. Completar a cadeia causal
Do início 
ao fim
24
Problema/ 
Necessidade
Insumos/ 
Atividades
Produto
Resultado final
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado final
Resultados intermediários
• Mudanças que se realizam devido à 
intervenção e que são necessárias 
para se chegar ao resultado final
• Mudanças em
– Atitudes
– Conhecimentos
– Capacidades
– Comportamentos
• Essas mudanças são um dos 
principais focos das 
avaliações de impacto
Problema/ 
Necessidade
Insumos/ 
Atividade
Produto
Resultado 
final
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado 
final
25
Exemplo
26
Problema/ 
necessidade
Resultados 
finais
Resultados 
intermediários
Baixo desempenho escolar
Melhor desempenho 
escolar
Mais presença e
matrícula
Mais tempo 
dedicado a lições 
e leituras
Aulas mais 
interessantes e de 
melhor qualidade
Uso de laptops em casa Uso de laptops em aula
• Resultados diretos 
das atividades 
programadas
• Muitas vezes, são 
uma reformulação 
das atividades do 
ponto de vista dos 
beneficiários
Produtos
Problema/ 
Necessidade
Insumos/ 
Atividade
Resultado 
Intermediário
Resultado 
Intermediário
Resultado 
Intermediário
Resultado 
final
Resultado 
final
Produto 2Produto 1
28
Problemas/ 
necessidade
Resultados
finais
Resultados 
intermediários
Produtos
Baixo desempenho escolar
Melhor desempenho 
escolar
Uso de laptops em casa
Alunos e professores 
com laptops
Professores capacitados
Uso de laptops em aula
Mais frequência 
e matrículas
Mais tempo 
dedicado a lições 
e leituras
Aulas mais 
divertidas e de 
melhor qualidade
• Os recursos e as 
ações importantes 
para se chegar aos 
produtos do programa, do 
ponto de vista de quem o 
implementa
Insumos/atividades Problema/ 
Necessidade
Insumos/ 
Atividades
Produto
Resultado 
final
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado 
final
30
Problemas/
necessidades
Resultados finais
Resultados 
intermediários
Produtos
Insumos/
atividades
Baixo desempenho 
escolar
Melhor desempenho 
escolar
Uso de laptops em casa
Alunos e professores com laptops
Curso para professores sobre 
uso de laptops em aula
Professores capacitados
Uso de laptops em aula
Mais 
presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Entrega de laptops com 
material pedagógico
2. Completar a cadeia causal
31
Desenho e 
implementação 
do programa
Impactos do 
programa
Problema/ 
Necessidade
Insumos/ 
Atividades
Produto
Resultado final
Resultado 
Intermediário
Produto
Resultado 
Intermediário
Resultado 
Intermediário
Resultado final
Como construir uma Teoria da Mudança?
3. Identificar premissas e riscos
Premissas
Condições externas necessárias que devem ser cumpridas para que a 
cadeia causal estabelecida na Teoria da Mudança seja válida
Riscos
Efeitos negativos não esperados gerados pelo programa
No contexto de uma avaliação de impacto
Premissas e riscos podem ser perguntas depesquisa que uma avaliação 
de impacto pode responder
33
34
Baixo desempenho escolar
Melhor desempenho 
escolar
Uso de laptops em casa
Alunos e professores com laptops
Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
Professores capacitados
Uso de laptops em aula
Premissa: as escolas contam com acesso à rede elétrica
Risco: os alunos usam mais os laptops para escutar música e jogar, 
reduzindo o tempo dedicado a lições e leitura
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
4. Resumir a hipótese causal
Formulação:
“Se [atividades] geram [produtos], isto deveria levar a 
[resultados intermediários] que ao final melhorarão 
[resultados finais], contribuindo para [propósito]”
“Se a entrega de laptops nas escolas permite que mais alunos e 
professores possuam um computador, isto deveria levar a um 
aumento da motivação dos alunos, que, ao usar mais os 
laptops, estudarão mais e melhor, o que ao final melhorará seu 
rendimento escolar, contribuindo para a melhora da educação 
básica em regiões vulneráveis”
35
5. Definir indicadores
Para avaliar se um programa é bem-sucedido ou não, é 
necessário medir resultados tangíveis
Devemos desenvolver indicadores que nos permitam
• Quantificar os insumos/atividades
• Avaliar a implementação do programa
• Quantificar os resultados e impactos
• Registrar as percepções de quem está no programa
36
N° de laptops enviados para escolas
37
Baixo desempenho escolar
Melhor desempenho escolar
Uso de laptops em casa
Alunos e professores com laptops Professores capacitados
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em aula
Número de horas de uso 
dos laptops na escola
Pontuação em provas de matemática e português
Curso para professores sobre uso 
de laptops em aula
Entrega de laptops com material 
didático a alunos e professores
Número de horas de uso dos 
laptops em casa
N° de professores capacitados
N° de cursos organizados
N° de alunos e professores que 
possuem um laptop
Taxa de presença 
em sala de aula
Frequência de uso dos laptops 
em casa
Taxa de satisfação de alunos
Pontuação em provas de matemática e português
Por que a Teoria da Mudança é 
importante?
• Permite identificar perguntas de avaliação, geralmente 
relacionadas às premissas identificadas pela teoria da mudança
• Ajuda a definir que dados coletar e que variáveis medir
• Ajuda a entender o “porquê” de um programa gerar determinados 
resultados
• Importante para definir conhecimento mais generalizável e 
mecanismos para replicar programas em diferentes contextos
39
Ajuda a desenhar a avaliação de impacto
Baixo desempenho escolar
Melhor desempenho 
escolar
Uso de laptops em casa
Alunos e professores com laptops Professores capacitados
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em aula
?
Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
40
Melhor desempenho 
escolar
Uso de laptops em casa
Alunos e professores com laptops Professores capacitados
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em aula
Não há 
impacto
Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
41
Baixo desempenho escolar
Melhor desempenho 
escolar
Uso de laptops em aula
Alunos e professores com laptops Professores capacitados
Mais tempo 
dedicado a lições 
e leituras
Mais presença 
e matrícula
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em casa
Entrega de laptops a 
alunos e professores
Alunos e professores com laptops Professores capacitados
Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
42
Baixo desempenho escolar
Não há 
impacto
Melhor desempenho 
escolar
Uso de laptops em casa
Alunos e professores com laptops Professores capacitados
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em aula
Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
 
Não há 
impacto 43
Baixo desempenho escolar
Melhor desempenho 
escolar


Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
Alunos e professores com laptops Professores capacitados


Uso de laptops em casa
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em aula



44
Baixo desempenho escolar

Não há 
impacto
Melhor desempenho 
escolar
Impacto 
positivo
Alunos e professores com laptops Professores capacitados
Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
Uso de laptops em casa
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em aula
45
Baixo desempenho escolar
Uso de laptops em casa
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em aula
Melhor desempenho 
escolar






Impacto 
positivo
Alunos e professores com laptops Professores capacitados
Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
46
Baixo desempenho escolar
 
Uso de laptops em casa
Mais presença e 
matrícula
Mais tempo 
dedicado a 
lições e leituras
Aulas mais 
divertidas e de 
melhor qualidade
Uso de laptops em aula
Melhor desempenho 
escolar







Impacto 
positivo
Alunos e professores com laptops Professores capacitados
Curso para professores sobre 
uso de laptops em aula
Entrega de laptops com material 
pedagógico a alunos e professores
47
Baixo desempenho escolar

Conclusões
Em resumo
• A Teoria da Mudança torna explícito o caminho que se espera para um 
programa gerar impacto
• Os cinco passos para construir uma Teoria da Mudança são: definir o 
propósito, construir a cadeia causal, identificar as premissas e os riscos, 
descrever a hipótese causal e definir indicadores
• A Teoria da Mudança pode ajudar a desenhar uma avaliação de impacto 
que não apenas meça se um programa é efetivo ou não, mas também 
quais são os mecanismos necessários para que o impacto aconteça
49
Pontos em comum da Teoria da Mudança
• Consiste em um mapa dinâmico sobre o programa
• Mostra relação de causa e efeito entre os diferentes 
elementos e resultados de uma intervenção
• É um instrumento não apenas descritivo, mas explicativo
50