Prévia do material em texto
01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF1 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44609 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.1. Por que é importante avaliar o impacto de um programa social? Marque as alternativas que julgar corretas. A. Porque a avaliação de impacto identifica a natureza e o alcance das necessidades. B. Porque a avaliação de impacto permite melhorar o programa. C. Porque a avaliação de impacto nos diz se o programa foi implementado segundo o planejado. D. Porque a avaliação de impacto é útil para tomar decisões acerca de alocação de recursos. E. Porque a avaliação de impacto gera conhecimento público. As alternativas corretas são B, D e E. A opção A está incorreta porque se refere à avaliação de necessidades. A alternativa C está incorreta porque se refere à avaliação de processos. As alternativas B, D e E são mencionadas nas aulas como razões da importância de se avaliar impacto. Avançar Progresso na lição: 3% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF2 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44611 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.2. Baseando-se nas recomendações mostradas no primeiro módulo deste curso, indique, em cada uma das cinco situações a seguir, se devemos ou não avaliar o impacto: 1. Será implementado um programa piloto Avaliar impacto 2. O programa não está maduro e ainda pode ter seu desenho modificado Não avaliar impacto 3. Já existe evidência suficiente sobre a efetividade da intervenção Não avaliar impacto 4. Existe incerteza sobre a melhor estratégia de intervenção para atacar um problema Avaliar impacto 5. O programa já existe, mas novos serviços ou beneficiários vão ser incorporados a ele Avaliar impacto Explicação: Uma avaliação de impacto é adequada para avaliar um piloto de um programa (situação 1) quando há incerteza quanto à melhor estratégia para atacar um problema ou quanto à adição de novos serviços ou beneficiários a um programa. Uma avaliação de impacto não é adequada se o desenho do programa não está maduro e ainda pode ser modificado (situação 2), já que ela demanda estabilidade na intervenção mensurada. Quando já existe evidência suficiente acerca da efetividade de uma intervenção (situação 3), uma avaliação de impacto pode não ser necessária, sendo mais custo-efetivo usar a evidência já existente para informar o melhor desenho do novo programa. Em casos de incerteza quanto à melhor estratégia de intervenção (situação 4), uma avaliação rigorosa de impacto pode guiar decisões subsequentes, contando com métodos adequados para a comparação de diferentes formas (como é o caso de um desenho de avaliação com múltiplos tratamentos). Finalmente, se o programa já existir e planejar incorporar novos serviços ou beneficiários (situação 5), a avaliação pode servir justamente para ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF3 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44659 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.3. O que representa o contrafactual? A. Representa a diferença nos participantes antes e depois da implementação do programa. B. Representa o estado do mundo experimentado depois da implementação do programa. C. Representa o estado do mundo que se haveria experimentado se o programa não tivesse sido implementado. D. Representa o estado do mundo antes da implementação do programa. A alternativa correta é a C. O contrafactual é hipotético e representa o estado do mundo que se haveria experimentado se o programa não tivesse sido implementado. Comparar o contrafactual com o resultado do programa nos leva ao impacto do programa. Como o contrafactual é hipotético, os métodos de avaliação de impacto tratam de construir um grupo de controle que se aproxime do contrafactual. Avançar Progresso na lição: 8% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF4a https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44613 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.4a. Utilizando os dados apresentados a seguir, calcule o impacto de um programa de alimentação escolar no desempenho acadêmico das crianças, segundo os diferentes métodos de avaliação de impacto. Antes e depois Por este método, qual é o impacto do programa? O impacto do programa é 2. O método Antes e depois é calculado pela diferença de pontuação das crianças participantes depois (7) e antes do programa (5). Avançar Progresso na lição: 11% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF4a https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44613 2/2 EV.G | Escola Virtual.Gov Seguindo as tendências educacionais mais recentes, a Escola Virtual.Gov oferece uma plataforma MOOC que sustenta a oferta de cursos de curta e média duração, abertos e gratuitos, como alternativa de formação mais aderente ao desenvolvimento rápido de competências para o trabalho. SOBRE A EV.G Portal da Escola Catálogo de Cursos Adesão Institucional Instituições Participantes Política de Privacidade UTILIDADES Validação de Documentos Fale Conosco CatálogoÁrea do aluno Organizado por Escola Nacional de Administração Pública – Enap Português - Brasil (pt_br) https://www.escolavirtual.gov.br/ https://www.escolavirtual.gov.br/catalogo https://www.escolavirtual.gov.br/adesao https://www.escolavirtual.gov.br/instituicoes-participantes https://www.escolavirtual.gov.br/politica-privacidade https://www.escolavirtual.gov.br/documentos/validacao https://www.escolavirtual.gov.br/fale-conosco https://www.escolavirtual.gov.br/catalogo https://www.escolavirtual.gov.br/aluno/inicio https://www.enap.gov.br/ 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF4b https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44615 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.4b. Utilizando os dados apresentados a seguir, calcule o impacto de um programa de alimentação escolar no desempenho acadêmico das crianças, segundo os diferentes métodos de avaliação de impacto. Diferença simples Por este método, qual é o impacto do programa? O impacto do programa é -1. O método de Diferença Simplesé calculado pela diferença entre as pontuações dos participantes (7) e dos não participantes (8) após o programa. Avançar Progresso na lição: 14% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF4c https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44617 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.4c. Utilizando os dados apresentados a seguir, calcule o impacto de um programa de alimentação escolar no desempenho acadêmico das crianças, segundo os diferentes métodos de avaliação de impacto. Diferenças em diferenças Por este método, qual é o impacto do programa? O impacto do programa é 1. O método da Diferenças em Diferenças é calculado em alguns passos: (i) primeiro calcula-se a diferença entre participantes e não participantes antes do programa (5-7 = -2); (ii) depois, calcula-se a diferença entre participantes e não participantes depois do programa (7-8 = -1); (iii) por fim, calcula- se a diferença entre os dois efeitos (passo 2 – passo 1: (-1- (- 2) = -1+2 = 1). Avançar Progresso na lição: 16% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF5 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44619 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.5. Por que a alocação aleatória é o método mais confiável para se estimar o contrafactual? A. Porque assegura que, na avaliação do impacto do programa, encontraremos um número estatisticamente diferente de zero. B. Porque ajuda a garantir que os grupos de tratamento e de controle sejam sistematicamente similares antes do início do programa. C. Porque permite construir um grupo sistematicamente diferente do grupo ao qual se direcionará o programa. D. Porque sabemos que os únicos fatores que podem afetar o grupo de tratamento são os efeitos do programa. A alternativa correta é a B. A alocação aleatória, por meio de um sorteio dos beneficiários que comporão o grupo de controle e tratamento, permite construir dois grupos estatisticamente similares nas características observáveis e não observáveis. Se a aleatorização for bem feita, o grupo de controle, que não receberá o programa, é um contrafactual válido do grupo que receberá. Assim, podemos concluir que, depois da intervenção, as diferenças entre os dois grupos serão atribuídas unicamente ao efeito do programa. Essa alocação não assegura que o programa tenha um impacto, e tampouco podemos assegurar que o programa será o único fator que afetará o grupo de tratamento. Avançar Progresso na lição: 19% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44621 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.6. Por que a Teoria da Mudança é uma ferramenta útil para avaliações de impacto? Marque todas as alternativas que julgar corretas. A. A Teoria da Mudança nos ajuda a definir os indicadores para medir os impactos do programa. B. A Teoria da Mudança nos ajuda a determinar se a amostra da avaliação tem poder estatístico suficiente. C. A Teoria da Mudança nos ajuda a identificar os mecanismos que levam aos impactos do programa. D. A Teoria da Mudança nos ajuda a mitigar atrito e cumprimento imperfeito da avaliação. As alternativas corretas são A e C. Como vimos no módulo 3, uma das etapas da Teoria da Mudança é definir indicadores para todos os componentes da cadeia causal, o que nos permite definir como vamos medir os impactos do programa. Por meio da Teoria da Mudança, também podemos identificar os mecanismos pelos quais o programa pode levar aos impactos desejados. A Teoria da Mudança não é uma ferramenta para calcular poder estatístico, nem para mitigar desafios de implementação da avaliação. Avançar Progresso na lição: 22% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF7 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44623 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.7. Para cada desenho de aleatorização, escolha uma possível dificuldade quanto à sua adoção. 1. Pode dificultar a medição de efeitos a longo prazo. Por Etapas 2. Mede o impacto daqueles que responderam ao estímulo. Estímulos 3. Pode exigir amostras muito grandes para comparar variações de tratamento. Múltiplos Tratamentos 4. O grupo que não recebe o programa pode não cooperar com a avaliação. Loteria Básica Explicação: No quarto e quinto vídeos da aula 4 (Como aleatorizar?) são explicadas as possíveis restrições de cada desenho de aleatorização. No desenho de loteria básica, o grupo que não recebe o programa (por não ter a expectativa de um dia recebê-lo) pode não cooperar com a avaliação. Já a aleatorização por etapas, que visa justamente oferecer ao grupo de controle o acesso futuro ao programa, tem a dificuldade de manutenção desse tipo de grupo por muito tempo, restringindo a capacidade da avaliação em medir impactos a longo prazo. O desenho de múltiplos tratamentos tem como limitação a necessidade de criar vários grupos de tratamento, exigindo, portanto, um número de observações maior do que seria necessário se houvesse apenas um tratamento. Finalmente, o desenho por estímulos, por definição, mede o impacto daqueles que responderam ao estímulo. Avançar Progresso na lição: 24% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109040 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109024 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF8 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44661 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e PolíticasSociais Exame Final Feedback EF.8. Qual seria o procedimento adequado de aleatorização quando há risco de que o grupo de controle, que não deveria receber o programa, seja indiretamente afetado por ele? A. Aleatorização estratificada B. Aleatorização em nível de grupos ou clusters C. Desenhar a avaliação por estímulos D. Usar um desenho de tratamentos múltiplos A alternativa correta é a B. Quando há o risco de o grupo de controle ser afetado por externalidades do programa, este risco pode ser reduzido aleatorizando-se em um nível maior (grupos ou clusters). As outras alternativas não ajudam a diminuir esse risco. Avançar Progresso na lição: 27% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF9 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44625 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.9. Qual seria o procedimento adequado de aleatorização quando não se pode negar o acesso ao programa a nenhum beneficiário? Por exemplo, quando o programa é um direito garantido por lei. A. Aleatorização estratificada. B. Aleatorizar em nível de grupos ou clusters. C. Desenhar a avaliação por estímulos. D. Usar um desenho de tratamentos múltiplos. A alternativa correta é a C. O desenho de estímulos é útil quando não é possível designar o acesso a um programa de forma aleatória. Um exemplo disso é quando um programa é um direito cujo acesso não pode ser negado. Ao entregar um estímulo de forma aleatória, é possível obter uma porcentagem de participação maior no grupo de tratamento do que no grupo de controle. Isso permite medir o impacto do programa entre aqueles que respondem ao estímulo e, ao mesmo tempo, manter o programa aberto a todos os interessados. As outras alternativas não ajudam a resolver a situação. Avançar Progresso na lição: 30% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF10 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44627 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.10. Para fazer uma avaliação de impacto, precisamos definir uma amostra. Qual das alternativas a seguir expressa uma implicação de se calcular o impacto de um programa por meio de uma amostra? A. O impacto real do programa é maior conforme o tamanho amostral aumenta. B. O impacto calculado a partir de amostras varia de uma amostra a outra. C. Só precisamos de uma amostra para conhecer o impacto real do programa. D. Se a aleatorização é realizada por agrupamento (ou cluster), o poder estatístico aumenta. A alternativa correta é a B. Como fazemos uma avaliação de impacto a partir de uma amostra, o impacto calculado varia de uma amostra para outra. Esse é o motivo pelo qual sempre existe incerteza na avaliação de impacto: como só podemos observar uma parte da população, o impacto medido do programa leva em conta apenas aquela parcela da população. Por isso, cada amostra obtida pode, a depender de seu caso, representar maior ou menor aproximação do real impacto. Avançar Progresso na lição: 32% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF11 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44629 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.11. Indique se as circunstâncias abaixo aumentam ou reduzem o poder estatístico em uma avaliação aleatorizada. 1. Graças a um acréscimo no orçamento, podemos aumentar o tamanho amostral de nossa avaliação. Aumenta 2. A taxa de participação (porcentagem de pessoas do grupo de tratamento que efetivamente o recebem) será menor do que se havia estimado. Reduz 3. A variável de resultado apresenta maior variância do que se calculou inicialmente. Reduz 4. Como a intervenção é muito cara, para um mesmo tamanho amostral teremos mais pessoas no grupo de controle que no grupo de tratamento. Reduz 5. Para evitar externalidades, a aleatorização será realizada por agrupamento, e não em nível individual. Reduz 6. O tamanho do impacto esperado pela avaliação é menor que o calculado inicialmente. Reduz Explicação: O tamanho amostral aumenta o poder estatístico porque aumenta a precisão dessas estimativas (item 1). Uma baixa taxa de participação reduz o poder estatístico porque menos pessoas recebem efetivamente o tratamento (item 2). Uma variância maior reduz o nosso poder estatístico porque os indivíduos são mais heterogêneos, o que torna mais difícil observar um impacto generalizado em todos os participantes (item 3). O poder estatístico é maximizado quando os indivíduos são alocados igualmente entre os grupos de controle e de tratamento (item 4). A aleatorização por agrupamento (ou cluster) reduz o poder estatístico sempre que a CIC é positiva (item 5). Um tamanho de efeito menor reduz o poder estatístico; assim, é necessário um tamanho amostral maior para manter o nível de poder estatístico (item 6). ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF12 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44663 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.12. A balança de uma cooperativa de sementes está danificada. O gerente busca uma nova balança e encontra 4 alternativas. Para determinar qual a melhor, ele se pesa 5 vezes em cada balança e anota os resultados. Seu peso verdadeiro é de 75,0 kg. Escolha a descrição mais adequada para os resultados de cada balança: A. Precisa e exata B. Imprecisa e exata C. Precisa e inexata D. Imprecisa e inexata Explicação: Exatidão se refere ao viés da resposta, ou seja, a desvios médios do valor verdadeiro (que subestimam ou superestimam o valor verdadeiro). Quanto menor o viés, maior a exatidão. Os resultados das balanças A e B são exatos porque sua média é igual ao valor verdadeiro. As médias da balança C e da balança D são maiores que a média verdadeira, por isso as duas balanças são inexatas. Precisão se refere à variabilidade da resposta, à diferença entre os valores gerados em repetidas medições do mesmo objeto. Quanto menor a variabilidade, maior a precisão. A diferença entre os diferentes resultados é muito maior no caso das balanças B e D que nos casos das balanças A e C. Por isso, B e D são imprecisas e A e D são precisas. ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto| - Turma FEV/2020: Exame Final: feedback EF13 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44665 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.13. Indique como se podem evitar as seguintes fontes de erro de medição em questionários: A. Categorias sobrepostas. Sempre fazer pilotos da aplicação para assegurar que as características são excludentes. B. Efeito telescópio. Usar eventos importantes para marcar o período de referência. C. Imprecisão. Sempre definir conceitos. D. Viés de desejabilidade social. Perguntar indiretamente e assegurar a privacidade. E. Viés de lembrança. Pedir aos entrevistados que registrem informação em um diário ou guardem recibos. F. Premissas. Usar filtros e saltos. Para revisar os principais erros de medição e como evitá-los no levantamento de dados para a avaliação, volte ao módulo 6 (Medição). Avançar Progresso na lição: 41% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109040 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109040 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109040 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF14 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44667 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.14. Por que é importante dar atenção aos aspectos operacionais da implementação da avaliação? Marque todas as alternativas que julgar corretas. A. Os aspectos operacionais são essenciais para a boa implementação da avaliação B. Os aspectos operacionais são necessários para assegurar que o programa terá impacto positivo. C. Considerar os aspectos operacionais permite adaptar a avaliação quando as coisas não acontecem como o planejado. D. Os aspectos operacionais ajudam a determinar a qualidade da avaliação de impacto. As alternativas corretas são A, C e D. Os aspectos operacionais contribuem para o funcionamento correto da implementação do programa porque permitem monitorar as atividades que serão realizadas e o seu andamento. Além disso, proporcionam flexibilidade para uma adaptação oportuna às mudanças imprevistas. A qualidade da avaliação de impacto depende desses aspectos. No entanto, dar atenção aos aspectos operacionais não assegura que o programa tenha um impacto positivo, já que isso depende de outros elementos, como a teoria por trás do programa. Avançar Progresso na lição: 43% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109047 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109047 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109047 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109047 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109047 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109047 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109047 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF15 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44631 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.15. Selecione os objetivos relacionados a cada uma das etapas do levantamento de dados. A. Linha Base. Verificar se há equilíbrio entre o grupo de controle e de tratamento, e poder estatístico suficiente. B. Linha de Acompanhamento. Monitorar com a avaliação de processos ou medir se há impacto antes do término do programa. C. Linha de Saída. Avaliar os impactos finais do programa. Explicação: É importante conhecer o propósito de cada uma das etapas do levantamento de dados. Se quiser revisar esse tema, você pode ver o quarto vídeo da aula 7 (Aspectos Operacionais). Avançar Progresso na lição: 46% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109047 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF16 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44669 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.16. Qual das seguintes alternativas descreve uma situação de cumprimento imperfeito? A. Alguns dos indivíduos alocados no grupo de tratamento optam por não participar da intervenção. B. Alguns dos indivíduos do grupo de tratamento mudam de residência depois de terem recebido o programa, não podem ser localizados e, assim, não podem ser entrevistados. C. Alguns indivíduos do grupo de controle se beneficiam indiretamente da intervenção, apesar de não recebê-la diretamente. D. Em média, os grupos de tratamento e de controle são iguais em quase todas as características, mas são ligeiramente diferentes em outras.. A resposta correta é a alternativa A. O cumprimento imperfeito ocorre quando pessoas do grupo de tratamento não o recebem ou quando pessoas do grupo de controle participam dele. A alternativa B é um exemplo de atrito amostral (as pessoas recebem o programa, mas saem da amostra); a alternativa C retrata externalidades (as pessoas não recebem o programa, mas se veem afetadas por ele de maneira indireta); e a alternativa D se refere a um desafio de desenho da avaliação (não de implementação, como as demais alternativas). Avançar Progresso na lição: 49% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF17-a https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44633 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.17. Em relação ao atrito amostral, responda se as seguintes afirmativas são verdadeiras ou falsas. 1) Existe atrito amostral quando algumas das pessoas alocadas no grupo de tratamento procrastinam e não recolhem o benefício de um programa. A. Verdadeiro B. Falso A opção é falsa. O atrito amostral ocorre quando não é possível obter dados para a avaliação de participantes dos grupos de tratamento ou de controle. O motivo para isso pode ser variado (não querem responder à pesquisa, mudam-se para outra localidade, entre outros) e pode ocorrer inclusive com indivíduos que receberam a intervenção. Avançar Progresso na lição: 51% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF17-b https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=446351/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.17. Em relação ao atrito amostral, responda se as seguintes afirmativas são verdadeiras ou falsas. 2) O atrito amostral tem como consequência a perda de poder estatístico. A. Verdadeiro B. Falso A opção é verdadeira. O atrito causa perda de unidades da amostra da avaliação, o que diminui seu poder estatístico. Avançar Progresso na lição: 54% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF18 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44637 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.18. Quais das seguintes estratégias ajudam a combater o atrito amostral? Marque todas as alternativas que julgar corretas. A. Fazer entrevistas mais longas e detalhadas. B. Aplicar piloto dos questionários em uma amostra menor, antes de usá-los entre os participantes da avaliação. C. Utilizar somente um método de levantamento de dados. D. Escolher um momento estratégico para realizar as entrevistas com os beneficiários. As respostas corretas são B e D. De acordo com o explicado no vídeo C da módulo 8 (Desafios após o desenho), o atrito amostral pode ser prevenido por meio de aplicações de pilotos (que revelam situações como tempo demasiado longo de aplicação do questionário, por exemplo) e da definição estratégica do período de pesquisa de campo (evitando períodos de baixa disponibilidade dos entrevistados). As alternativas A e C são incorretas porque, para prevenir o atrito, deveríamos fazer o contrário: fazer entrevistas mais curtas e utilizar vários métodos de levantamento de dados. Avançar Progresso na lição: 56% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF18 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44637 2/2 EV.G | Escola Virtual.Gov Seguindo as tendências educacionais mais recentes, a Escola Virtual.Gov oferece uma plataforma MOOC que sustenta a oferta de cursos de curta e média duração, abertos e gratuitos, como alternativa de formação mais aderente ao desenvolvimento rápido de competências para o trabalho. SOBRE A EV.G Portal da Escola Catálogo de Cursos Adesão Institucional Instituições Participantes Política de Privacidade UTILIDADES Validação de Documentos Fale Conosco CatálogoÁrea do aluno Organizado por Escola Nacional de Administração Pública – Enap Português - Brasil (pt_br) ☰ https://www.escolavirtual.gov.br/ https://www.escolavirtual.gov.br/catalogo https://www.escolavirtual.gov.br/adesao https://www.escolavirtual.gov.br/instituicoes-participantes https://www.escolavirtual.gov.br/politica-privacidade https://www.escolavirtual.gov.br/documentos/validacao https://www.escolavirtual.gov.br/fale-conosco https://www.escolavirtual.gov.br/catalogo https://www.escolavirtual.gov.br/aluno/inicio https://www.enap.gov.br/ 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF19 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44639 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.19. Para cada exemplo, selecione se o uso da evidência é direto ou indireto. A. A avaliação mostrou resultados positivos e incita a decisão de expansão do programa. Uso Direto B. O programa foi avaliado com resultados mistos que estimulam a mudança de seus componentes. Uso Direto C. Não sabemos se o nosso programa terá os impactos esperados, assim consultamos avaliações de programas similares em outros contextos. Uso Indireto Explicação: Como é explicado na aula 9 (Uso de evidência), o uso direto se refere à utilização dos resultados da avaliação para tomar uma decisão sobre esse mesmo programa avaliado, como nos dois primeiros exemplos. O uso indireto se refere à utilização dos resultados da avaliação de um programa para informar decisões sobre outro programa, como se faz no terceiro exemplo. Avançar Progresso na lição: 59% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF20 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44671 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.20. Segundo o modelo apresentado neste curso, se queremos usar evidência de outro contexto para informar o desenho de um novo programa, quais são algumas das perguntas que devemos nos fazer? Marque todas as alternativas que julgar corretas. A. Os dois programas partem do mesmo problema? B. Quão similares são os programas? C. A população alvo e as condições locais de ambos programas são comparáveis? D. Os dois programas funcionam por meio dos mesmos mecanismos? Todas as alternativas estão corretas e são perguntas que devemos fazer quando desejamos usar os resultados de uma avaliação de impacto como subsídio para o desenho de um outro programa. Isso é discutido no módulo 9 (Uso da evidência). Avançar Progresso na lição: 62% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF21 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44641 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.21. Suponha que você trabalhe em uma ONG que quer iniciar um programa de distribuição de cloro para famílias de baixa renda, visando melhorar o acesso a água potável. Qual é o tipo de avaliação mais adequado a cada objetivo? A. Medir os efeitos da distribuição de cloro em indicadores importantes de saúde das famílias. Avaliação de Impacto B. Averiguar se o cloro está sendo distribuído ou não aos beneficiários. Avaliação de Processos C. Elaborar um modelo para descrever como a distribuição de cloro pode levar a resultados de interesse (por exemplo, reduzir a incidência de diarreia nas crianças). Avaliação Teórica D. Comparar as melhoras em saúde por dólar investido no programa de distribuição de cloro às melhorias em saúde por dólar investido em outros programas de saneamento. Avaliação de Eficiência E. Identificar a prevalência de diarreia na subpopulação que atualmente não tem acesso à água potável. Avaliação de Necessidades Explicação: O tema é tratado nos vídeos das aulas 1 (Por que avaliar impacto?) e 3 (Teoria da Mudança), nos quais os professores apresentam e detalham a quais tipos de avaliação e a quais perguntas respondem as avaliações de necessidade, teórica, de processos, de impacto e de eficiência. A questão A é uma avaliação de impacto porque busca responderse o programa alcançou os objetivos para os quais foi desenhado. A questão B é uma avaliação de processos porque busca responder se o programa foi implementado como o planejado. A questão C é uma avaliação teórica porque busca responder se a teoria por trás do programa é factível. A questão D é uma avaliação de eficiência, já que busca responder se o impacto foi conseguido de ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109003 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF22 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44673 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.22. O que podemos dizer do impacto do programa? O gráfico a seguir mostra os resultados do programa de distribuição de cloro. A linha amarela representa os valores da variável de interesse para os participantes do programa ao longo do tempo. Um aumento nessa variável significa uma melhora no estado de saúde dos participantes. A. O impacto é positivo. B. O impacto é negativo. C. O impacto é desconhecido. A alternativa correta é a C. O gráfico indica que a saúde dos participantes melhorou depois da implementação do programa. No entanto, como não conhecemos o contrafactual, não podemos saber se essa melhoria em saúde é decorrente do ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF23 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44644 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.23. Sua ONG deseja produzir uma Teoria da Mudança de como o seu programa de distribuição de cloro melhorará a saúde das famílias beneficiárias. Complete a cadeia causal, associando cada item em seu lugar adequado. Por exemplo: "As casas não têm acesso à água potável." (Problema / Necessidade) 1. Resultado Intermediário 2. Insumo / Atividade 3. Resultado Final 4. Problema / Necessidade 5. Produto 6. Problema / Necessidade 7. Resultado Intermediário 8. Insumo / Atividade 9. Resultado Final 10. Produto O passo a passo de como elaborar uma Teoria da Mudança é descrito no módulo 3 (Teoria da Mudança). Avançar Progresso na lição: 72% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF24 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44675 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback Suponha que vamos fazer uma avaliação de impacto do programa de distribuição de cloro e, paralelamente, realizamos uma avaliação de processos. Encontramos que, por problemas de planejamento, quase um terço das casas beneficiadas pelo programa não recebe cloro, e um grupo ainda maior de famílias não recebeu capacitação para o uso de cloro. EF.24. Verdadeiro ou falso: a situação descrita acima é um exemplo de falha de teoria do programa. A. Verdadeiro. B. Falso. Falso. A situação descrita não é uma falha de teoria, e sim de implementação. Os problemas estão relacionados aos insumos/atividades e produtos do programa. Como se explica nos vídeos do módulo 3 (Teoria da Mudança), estes aspectos são parte da implementação do programa. Avançar Progresso na lição: 74% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109017 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF25 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44646 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.25. Indique qual é o desenho de aleatorização mais apropriado para cada uma das seguintes situações: A. O programa de distribuição de cloro é expandido e, com o tempo, eventualmente atingirá toda a população de beneficiários. Por Etapas B. O programa de distribuição de cloro deve estar disponível a todos os que desejam recebê-lo, mas o uso do cloro pode ser facilmente aumentado se for proporcionado algum incentivo. De Estímulos C. O programa de distribuição de cloro tem excesso de solicitações e não há recursos suficientes para cobrir todas as casas. Loteria Básica D. A ONG tem dois modelos de distribuição de cloro e quer saber qual é o mais efetivo. Tratamentos Múltiplos O módulo 4 (Como aleatorizar) explica em que situações cada desenho de aleatorização é útil. Loteria básica: quando não há recursos suficientes para cobrir todas as pessoas elegíveis para o programa. Por etapas: quando, ao final do programa, todos os candidatos devem recebê-lo, mas este é implementado por etapas. Múltiplos tratamentos: quando queremos analisar como se comparam um tratamento e outro e/ou como se complementam. Estímulos: quando é praticamente e/ou eticamente impossível designar o acesso a um programa de forma aleatória, mas é possível aumentar a participação com algum incentivo distribuível de forma aleatória. Avançar Progresso na lição: 77% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109024 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF26-a https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44677 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.26. Temos que tomar decisões sobre o desenho da avaliação de impacto do programa de distribuição de cloro. Para cada decisão, escolha a alternativa que maximiza o poder estatístico. 1) Tamanho amostral (soma dos grupos controle e tratamento) A. Usar uma amostra total de 100. B. Usar uma amostra total de 200. C. Usar uma amostra total de 300. A alternativa correta é a C. Uma amostra maior permite maior poder estatístico. Avançar Progresso na lição: 80% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EC26-b https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=446481/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.26. Temos que tomar decisões sobre o desenho da avaliação de impacto do programa de distribuição de cloro. Para cada decisão, escolha a alternativa que maximiza o poder estatístico. 2) Proporções de alocação. A. 60% no grupo de controle e 40% no de tratamento. B. 50% no grupo de controle e 50% no de tratamento. C. 40% no grupo de controle e 60% no de tratamento. A alternativa correta é a B. O poder estatístico é maximizado quando a amostra é dividida equitativamente entre tratamento e controle. Avançar Progresso na lição: 82% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EF26-c https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44650 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.26. Temos que tomar decisões sobre o desenho da avaliação de impacto do programa de distribuição de cloro. Para cada decisão, escolha a alternativa que maximiza o poder estatístico. 3) Nível de aleatorização A. Aleatorizar em nível individual. B. Aleatorizar por comunidade (nível intermediário entre individual e municipal). C. Aleatorizar por município. A alternativa correta é a A. Para uma dada amostra, há menos poder estatístico ao se aleatorizar em um nível mais alto (ou maior), gerando agrupamentos. Avançar Progresso na lição: 85% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EC27-a https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44652 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.27. Na avaliação do programa de distribuição de cloro, suponha as seguintes perguntas e identifique os problemas descritos como ameaças à exatidão ou à precisão da avaliação: 1. No último mês, quantas vezes algum dos seus filhos teve diarreia? 2. Com que frequência você consome água purificada? (Sempre/Muitas vezes/De vez em quando/Nunca) 1) Para a primeira pergunta, nem todas as pessoas lembram bem quando e/ou quantas vezes seus filhos tiveram diarreia. Por isso, 20% dos entrevistados superestimam a sua resposta e outros 20% subestimam sua resposta. A. Exatidão B. Precisão A alternativa correta é a B. O problema da primeira pergunta remete à precisão, pois apresenta uma amostra que foge à média tanto positiva quanto negativamente - não enviesando, portanto, os resultados. Como se explica na segunda parte da aula 6 (Medição), a precisão se refere à variabilidade da resposta, à diferença entre os valores gerados em repetidas medições do mesmo objeto. Avançar Progresso na lição: 88% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109040 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: Feedback EC27-b https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44654 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.27. Na avaliação do programa de distribuição de cloro, suponha as seguintes perguntas e identifique os problemas descritos como ameaças à exatidão ou à precisão da avaliação: 1. No último mês, quantas vezes algum dos seus filhos teve diarreia? 2. Com que frequência você consome água purificada? (Sempre/Muitas vezes/De vez em quando/Nunca) 2) Para a segunda pergunta, 30% das pessoas respondem que sempre consomem água purificada, não porque efetivamente o fazem, mas porque sentem vergonha de admitir que nunca o fazem. A. Exatidão B. Precisão A alternativa correta é a A. O problema da segunda pergunta remete à exatidão, já que gera desvios sistemáticos do valor verdadeiro. Como se explica na segunda parte da aula 6 (Medição), a exatidão se refere ao viés da resposta, ou seja, a desvios não aleatórios do valor verdadeiro (sub ou superestimando a média). Avançar Progresso na lição: 91% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109040 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF28 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44656 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.28. Suponhamos que o programa de distribuição de cloro tem um impacto positivo sobre a saúde das famílias. Indique se as seguintes situações podem fazer com que o impacto do programa seja superestimado, seja subestimado, tenha efeitos ambíguos ou não enviese a estimativa do impacto. A. Antes do levantamento final de dados, os indivíduos menos saudáveis dentro do grupo de tratamento tendem a migrar para as cidades para buscar trabalho, saindo da amostra. Superestima a estimativa de impacto. B. 20% dos indivíduos do grupo de tratamento e 20% dos indivíduos do grupo de controle abandonam o estudo. Tem efeitos ambíguos sobre a estimativa de impacto. C. Durante a intervenção, alguns indivíduos no grupo de controle acessam a água com cloro das casas do grupo de tratamento. Subestima a estimativa de impacto. Na primeira situação, se aqueles indivíduos menos saudáveis dentro do grupo de tratamento tendem a migrar antes do levantamento final de dados, o impacto será superestimado, pois, em média, o grupo de tratamento será mais saudável do que seria se estivesse completo (sem migração). Na segunda situação, embora nos dois grupos se perca a mesma proporção amostral, o efeito do impacto será ambíguo e dependerá das características de quem abandonou a amostra em cada grupo. Na última situação, se alguns indivíduos do grupo de controle tiveram acesso à água com cloro, o impacto será subestimado, pois, em média, o grupo de controle será mais saudável do que seria se não tivesse tido acesso à água com cloro. Avançar Progresso na lição: 93% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback EF29 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44679 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.29. Durante a avaliação de impacto do programa de distribuição de cloro, você descobre que algumas famílias no grupo de tratamento não receberam a intervenção e que algumas famílias do grupo de controle a estão recebendo.Qual das seguintes opções é a mais apropriada para garantir a integridade de uma avaliação de impacto? A. Eliminar as famílias que não cumprem com os protocolos de aleatorização do estudo. B. Mudá-las de grupo: mover os indivíduos do grupo de controle tratados ao grupo de tratamento e vice-versa. C. Deixar os indivíduos em seus respectivos grupos e fazer a análise de dados levando em conta este desafio. A resposta correta é a alternativa C. De acordo com o explicado no módulo 8 (Desafios após o desenho), eliminar (alternativa A) ou trocar (alternativa B) membros do cumprimento imperfeito provoca viés de seleção sobre o estudo. A alternativa é, portanto, manter o estudo e as alocações inicialmente previstas, levando em conta o cumprimento imperfeito na etapa de análise de dados. Avançar Progresso na lição: 96% ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077 01/03/2020 avaliacao_impacto | - Turma FEV/2020: Exame Final: feedback Ef30 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077&pageid=44658 1/2 Painel / Meus cursos / Avaliação de Impacto de Programas e Políticas Sociais / Encerramento / Exame Final Avaliação de Impacto de Programas e Políticas Sociais Exame Final Feedback EF.30. A equipe do programa está estudando se é factível trocar a entrega de cloro às famílias pela instalação de dispensadores de cloro comunitários, para diminuir os custos de entrega. Ao fazer uma revisão da evidência existente sobre esse tema, são encontrados dados sobre o seguinte programa: Em um país distinto ao do programa que foi pesquisado, mas com uma população de características similares, avaliou-se a instalação de poços comunitários de água potável em lugares cuja população utilizava água contaminada de um rio, Inicialmente, as pessoas utilizaram os poços de água potável com regularidade, mas esse uso diminuiu com o tempo. Ao investigarem a razão dessa diminuição, os pesquisadores se deram conta de que os poços estavam localizados em zonas inseguras, e as pessoas deixaram de usá-los por medo ou intimidação. É possível usar essa evidência para o desenho do programa de entrega de cloro? A. Não, porque o contexto é diferente. B. Não, porque o programa é diferente. C. Não, porque o programa não foi bem implementado. D. Sim, porque nos indica um possível problema que devemos evitar no desenho do nosso programa. A alternativa correta é a D. É possível usar os resultados desse estudo, pois, apesar de fazerem referência a contexto e intervenção diferentes, eles indicam um problema que pode ser relevante em nosso programa: se decidirmos instalar dispensadores comunitários de cloro, o lugar escolhido deve ser bem estudado para que a comunidade não deixe de usá-lo por fatores externos ao programa. ☰ https://mooc.escolavirtual.gov.br/my/ https://mooc.escolavirtual.gov.br/course/view.php?id=4103 https://mooc.escolavirtual.gov.br/course/view.php?id=4103#section-6 https://mooc.escolavirtual.gov.br/mod/lesson/view.php?id=109077