1 RODRIGUES_2011 Avaliacao de PP no Brasil antecedentes cenarios e perspectivas

Prévia do material em texto

EDNA CRISTINA DO PRADO ELIONE MARIA NOGUEIRA DIÓGENES (ORGANIZADORAS) Avaliação de Políticas Públicas: Interface entre Educação & Gestão Escolar Antonia Eunice de Jesus do Nascimento Edna Cristina do Prado Elione Maria Nogueira Diógenes Graça Gomes Inalda Maria dos Santos Lea Carvalho Rodrigues Kryslane dos Santos Souza Nora Krawczyk Vagna Brito de Lima Maria Betânia Gomes da Silva Brito UFAL Maceió/AL, 2011AVALIAÇÃO DE POLÍTICAS PÚBLICAS NO BRASIL: ANTECEDENTES, CENÁRIO ATUAL E PERSPECTIVAS Lea Carvalho Rodrigues O meu intuito nesta breve exposição é apresentar a proposta teórico-metodológica que vimos desenvolvendo no Mestrado em Avaliação de políticas Públicas (MAPP) da Universidade Federal do Ceará (UFC). Para tanto, estruturei a exposição de forma a abarcar OS seguintes temas: 1) Uma abordagem breve sobre O campo da avaliação das políticas públicas no Brasil; 2) uma reflexão sobre a utilização de modelos exógenos na avaliação das políticas públicas no Brasil; 3) apresentação dos principais pressupostos que orientam a avaliação de políticas públicas orientadas por modelos desenvolvidos primeiramente nos Estados Unidos; 4) apresentação da proposta do MAPP. Sobre campo da avaliação das políticas públicas no Brasil, vale dizer que se trata de uma área de produção de conhecimento ainda em formação, tendo em vista a própria avaliação ser uma experiência recente no Brasil. Poderíamos mesmo dizer que quanto à formação de um pensamento próprio, ou ao desenvolvimento de instrumentais de avaliação, é ainda incipiente¹. Para se ter uma idéia, a primeira produção bibliográfica mais acabada sobre tema é de 2006, a obra de Nilson Holanda, quem dentre OS muitos feitos Sobre a pesquisa em politicas públicas, no Brasil, de uma forma mais ampla, c.f. (Sc 2003).constantes de sua vasta biografia conta com de ter sido presidente como uma fonte de informações para que OS sujeitos sociais do Banco do Nordeste do Brasil BNB e fundador da Escola Nacional embasem suas lutas em prol do controle social das políticas públicas. de Administração Pública ENAP. A referida obra, intitulada Mas não podemos deixar, de forma alguma, de reconhecer Avaliação de programas: conceitos básicos sobre a avaliação "ex- papel tão importante e decisivo na conformação dessa área, quando post" de programas e projetos, volta-se, especificamente, para a nada praticamente havia ainda de produção mais sistematizada sobre avaliação de programas e projetos e se preocupa com as definições princípios teórico-metodológicos na avaliação de políticas públicas, conceituais básicas na área, bem como aborda desde planejamento de pesquisadores da Fundação Oswaldo Cruz Fiocruz, em especial e 0 monitoramente até a avaliação propriamente dita, seus princípios OS vinculados à Escola Nacional de Saúde Pública Sérgio Arouca, teóricos e metodológicos. daquela mesma fundação, tendo uma publicação em especial se Mais recentemente, conjunto de publicações dos membros firmado como essencial ao desenvolvimento da área de avaliação de do colegiado do Programa de Pós-Graduação em Políticas Públicas políticas públicas. Trata-se da obra Avaliação por triangulação de da Universidade Federal do Maranhão, vem se tornando referência métodos: abordagem de programas sociais (MINAYO, ASSIS na área, com destaque para as formulações da professora Maria &SOUZA [org], O acréscimo que esta obra traz aos Ozanira da Silva e Silva, como a recente publicação, em 2008, da pesquisadores da área está na sua perspectiva inovadora frente às obra Pesquisa Avaliativa: aspectos No capítulo abordagens mais tradicionais, que privilegiam O caráter técnico- de sua autoria, sobre a avaliação de políticas e programas sociais, a operativo da avaliação e que já tratamos com mais vagar autora trata detalhadamente das concepções, fundamentos e técnicas (RODRIGUES, 2008) e que retomatemos mais adiante. A perspectiva de avaliação, firmando sua concepção quanto ao entendimento de da triangulação de métodos, explorada pelas autoras na referida obra, que "toda política pública é uma forma de regulação ou intervenção representou a abertura aos pesquisadores brasileiros de abordagens na sociedade" (SILVA E SILVA, 2008. p. 90), negando que a mesma menos ortodoxas no trato das políticas públicas. Isto porque, tais se restrinja a um recurso de legitimação política ou "intervenção estatal orientações tratam de privilegiar diálogo entre diferentes subordinada à lógica de acumulação capitalista" (SILVA E SILVA, perspectivas teórico-metodológicas e a valorização do contexto. Vale p.90). contrário, vê a política pública como resultante de pressões destacar que esta perspectiva originalmente desenvolvida por Norman sociais, contemplando ações e interesses diversos. Como contribuição Denzin, no início da década de 1970, foi um passo importante para substantiva a uma área de estudos ainda em formação, no Brasil, a firmar a pesquisa qualitativa nos Estados Unidos, e está na base de autora, em seu texto, tece uma forte argumentação em torno aos propostas como a dos chamados Mixed Methods e a incorporação seus pressupostos de que toda a avaliação de políticas e programas do paradigma hermenêutico na avaliação de politicas. Mais que isto, sociais comporta duas dimensões basilares: uma técnico-metodológica a abertura agora é para a convivência de diferentes paradigmas e outra política, ressaltando que ambas se apresentam de forma análise, como a proposta presente na perspectiva dialética. (GREENE, articulada no processo avaliativo. Com isto a autora enfatiza que a 2007; CRESWELL & CLARK, 2007). avaliação pode tanto ser um instrumento de controle das políticas No Brasil, vale ainda destacar, que a produção de pesquisa sobre públicas pelo Estado da aplicação de recursos e seus resultados -, de políticas públicas tem a área da educação como pioneira. 38 Avaliação de Politicas Publicas: 39 Interface entre Educação & Cestio EscolarEvidentemente, temos a considerar as especificidades da área da educação em uma ingerência mais forte das agências multilaterais, pautadas que tem a avaliação como fundamento de sua prática: o ensino e a em propostas hegemônicas no período de corte neoliberal que aprendizagem. José Dias Sobrinho (SOBRINHO, 2003) enfatiza que a defendem como medida primeira de saneamento das economias avaliação originalmente tem sentido de medir, mas não podemos nos combalidas a Reforma do Estado. que também expressa poder de selecionar, tão evidente quando se refere a provns e concursos, O que indica a importância de atentarmos Como enfatiza Holfling, as teses neoliberais "absorvendo aos sentidos e significados que termo No âmbito da educação, movimento e as transformações da história do capitalismo, retomam as teses clássicas do liberalismo e resumem na conhecida expressão mostra 0 autor que a avaliação transformou-se de instrumento de medir desempenho de alunos, a uma etapa seguinte em que foram 'menos Estado e mais mercado' sua concepção de Estado e de incorporados a avaliação dos professores, dos conteúdos, das metodologias governo" (HOLFLING, 2001.p.7). Segundo a autora, na ao e das estratégias de ensino; a momentos posteriores em que foram keynesianismo e ao Estado de Bem-Estar Social nele inspirado, as priorizados OS objetivos e, portanto, as decisões; até ponto em que a idéias neoliberais se pautaram na defesa das liberdades individuais, avaliação, diz autor, se torna profissionalizada, a partir dos anos 1970, com forte crítica à intervenção estatal e elogio às virtudes reguladoras gerando uma produção teórica que começa a se consolidar em tomo a do mercado, ganhando fòrça, visibilidade e aceitação no contexto da revistas específicas e livros, ao mesmo tempo em que se constituem crise do capitalismo da década de 1970 porque se apresentava como organizações profissionais, chegando-se, enfim, à meta-avaliação, quando a fórmula para sair daquela "a própria avaliação se transforma em objeto de estudo por parte da Assim, é preciso considerar que contexto político- comunidade a ela dedicada" (SOBRINHO, 2003, p.23). econômico vivido pelo Brasil nos anos 1980 e 1990 impulsionou É exatamente nesse período que ocorre no Brasil a estudos na área da avaliação. Mas isto se deu num contexto de mobilização e participação do movimento docente no sentido de crescente dependência do país frente às agências financiadoras discutir e implementar a avaliação do ensino superior. Isto se deu internacionais, como Banco Internacional para a Reconstrução e Desenvolvimento BIRD e Banco Interamericano de com a criação de fóruns inter-institucionais dos quais resultou a criação da revista Avaliação, na década de 1980 (RISTOFF, 2008). Desenvolvimento BID, que passaram a exigir, com mais critério, a No Brasil, esta primeira produção sobre tema avaliação se elaboração de sistemas de monitoramento de avaliação dos projetos desenvolveu com foco na educação superior, abarcando temas como: por eles financiados, bem como se refere ao período de perspectivas teórico-metodológicas, avaliação institucional, divulgação implementação da Reforma do Estado, no governo Fernando e troca de resultados empíricos. Henrique Cardoso, quando se concretizou a Reforma Administrativa e a profissionalização do quadro de servidores e capacitação de pessoal Ao final da década de 1980 início da de 1990, a temática da apto a realizar avaliações internas se apresentou como uma avaliação das políticas públicas se intensifica nos da América necessidade para governo (c.f. FARIAS, 1998, 2001). Latina, com destaque para a área da administração pública. O contexto na região é de início da democratização, mas mesmo tempo as Sobre a Reforma do Estado, no Brasil, ver texto de Fernando Lustosa da Costa, intitulado economias estão premidas pelo endividamento externo, que resulta Condicionantes da Reforma do Estado no Brasil, em: Consultado em: 15/11/2010 as 02:03 40 CRISTINA PRADO MARIA de Politicas Públicas: 41 Interface entre Educação & Gestio EscolarNos últimos oito anos, no período do governo Lula, com a retomada de projetos e programas de desenvolvimento, sobretudo políticas públicas, com base nos modelos desenvolvidos nos com início das obras do Programa de Aceleração do Crescimento Estados Unidos. Isto porque nos Estados Unidos, assim como na PAC e a ampliação da agenda das políticas sociais, as pesquisas se França e Inglaterra, houve um crescimento da área no campo multiplicaram e cresce a produção com foco nas políticas públicas governamental e também no campo científico a partir dos anos e em sua avaliação. Mas ainda é um conhecimento que se constrói de 1970. Lembrando ainda que a gênese dos estudos sobre avaliação forma fragmentada em programas de pós-graduação e núcleos de na área de políticas públicas remonta ao pós-guerra e ao período pesquisa vinculados a múltiplas tradições disciplinares: educação, da guerra-fria, quando modelos metodológicos da ciência política saúde, ciências sociais e economia, principalmente. foram trazidos da área militar, com foco nas estratégias, e Destaca-se, entretanto, nos últimos cinco anos, a criação de cursos transportados ainda para a esfera administrativa³. de graduação em públicas (USP, UFRJ e UFRN) e de pós- Uma das características desses modelos é seu caráter graduações específicas, sobretudo no âmbito dos Mestrados Profissionais, instrumental, e quanto a isto destaca-se que no âmbito internacional, entre OS quais destaco Mestrado em Avaliação de Políticas Públicas da tradicionalmente OS pesquisadores se voltaram primordialmente para Universidade Federal do Ceará MAPP/UFC, o primeiro programa de uma análise de tomada de decisão ou de resultados, bem como de pós-graduação especificamente voltado ao tema, e Mestrado em conteúdos e gênese de desenvolvimento das políticas em detrimento Politicas Públicas Gestão do conhecimento e Desenvolvimento Regional de uma abordagem processual e contextualizada. da Universidade do Estado da Bahia Assim, a marca dessas abordagens é: O que julgo importante destacar é que em razão dessa Análise de dados coletados em formatos padronizados juventude da no Brasil, acabam por se reproduzir, sem uma Abordagens lineares perspectiva crítica, modelos exógenos pautados por: i) perspectivas Testes de hipóteses generalizantes aplicáveis a qualquer país ou situação; ii) paradigmas Análises centradas na mensuração de: positivistas de análise; iii) predomínio de referenciais economicistas, instrumentais e/ou Resultados frente aos objetivos formulados (eficácia); As posturas acima refletem predomínio do chamado ii) relação metas/resultados; paradigma gerencialista, marcado por uma concepção instrumental iii) relação custos/beneficios (eficiência); e da avaliação, cuja função é medir, acompanhar e "avaliar" êxito das iv) avaliação de impactos (efetividade em relação ao reformas administrativas norteadas pelos princípios e valores proposto/previsto). neoliberais. Ou seja, representa a subordinação do Estado à Verifica-se, desta forma, que foco da investigação racionalidade instrumental do mercado, sua lógica produtivista e de concentra-se naquilo que foi planejado e que é esperado alcançar mensuração exclusivamente econômica da relação como resultado das ações e perde-se a oportunidade de perceber Vale esclarecer que a referência a modelos exógenos diz imprevisto na formulação da ou, ainda, de compreender respeito aos principais pressupostos que orientam a avaliação de A respeito (SOUZA, 42 de Politicas Públicas: 43 Interface entre Educação & Escolarcomo a proposta original se efetiva na prática e que isto revela de inconsistências na sua própria formulação. Modelos experienciais, como OS propostos por Raul Lejano (LEJANO, 2006) que focam na integração e articulação com a ação; Ou seja, nessas abordagens há pouco ou mesmo nenhum Percepção dos significados das políticas por diferentes espaço para a crítica à própria política, desde sua formulação, è menos audiências. Quanto a este item suporte é buscado na prática ainda aos nos quais a mesma está alicerçada. O dado novo é visto quase sempre como entrave, resistência, etc. etnográfica da proposta interpretativa de Clifford Geertz (1978); Consideração dos diferentes tipos de conhecimento que Contudo, há que se considerar que existem vertentes teóricas orientam organizações na sua prática (DVORA YANOW, 2004; minoritárias nesses países que são referência na construção de HELEN INGHRAM). mecanismos de avaliação São novas abordagens que dão ênfase à análise de contexto social, econômico, político, cultural, como Sobre caráter dialógico da avaliação, com necessidade de já nos referimos no início deste artigo aos seguidores da perspectiva espaços de participação (LEJANO, 2006). proposta por Denzin nos anos 1970, O que, nos anos mais recentes, É esta vertente que vem orientando a prática de ensino e de resultou em abordagens que articulam diferentes paradigmas e pesquisa desenvolvida no Mestrado em Avaliação de Políticas Públicas metodologias de avaliação. Há ainda pesquisadores que dão especial da UFC e sobre a qual serão a seguir apresentados OS eixos basilares. enfoque à análise organizacional estrutura de funcionamento, dinâmica, relações de poder, interesses e valores que permeiam as instituições NOVAS BASES CONCEITUAIS NA AVALIAÇÃO DE envolvidas na elaboração e implementação de políticas (YANOW, 2004). POLÍTICAS PÚBLICAS Esta vertente inovadora contemporânea com proeminência Além de partilhar pressupostos do paradigma interpretativo, na área de avaliação de públicas caracteriza-se por adotar: a proposta do MAPP se assenta na visão interdisciplinar da pesquisa, Paradigma interpretativo: parte do pressuposto que na no trato metodológico e no suporte dado conhecimento produzido é multidimensional e nega a existência de pelos modelos experienciais propostos por Lejano (2006), com foco uma verdade absoluta. Dessa forma, postula que toda a explicação no empírico e no afastamento dos modelos positivistas de análise. Mas de sucessos e fracassos das políticas públicas é parcial. ainda inova ao postular a importância das bases conceituais da política, Métodos e Técnicas de Pesquisa qualitativa com foco na da noção de trajetória e da sofisticação na construção de indicadores. utilização dos seguintes instrumentais metodológicos: etnografia, O eixo da proposta está alicerçado nos seguintes pressupostos: estudo de situações sociais, estudo de redes sociais, recurso às técnicas a) Que é fundamental a clareza quanto à concepção de avaliação; de observação de campo, realização de entrevistas aprofundadas e b) Que as noções de contexto e processo são as que permitem com grupos focais. afastar-se dos modelos lineares; Recurso às técnicas de: c) Que entender as bases conceituais de uma política ou Mixed methods ou da Triangulação de dados (GREENE, programa permite situá-la contextualmente e entender inconsistências 2007; CRESWELL, 2007); em sua formulação e dificuldades em sua implementação; 44 EDNA DO MARIA de Políticas Públicas: 45 Interface entre Educação & Cestão Escolard) Que a noção de trajetória é fundamental, pois permite que mesmo controle do processo estando ainda nas mãos das acompanhar o trânsito da política pelas vias institucionais e a apreensão instâncias federais, que autor critica em nome da das relações de poder, redes de interesses e seus constrangimentos. descentralização, fato dos municípios terem pouca autonomia, Quanto a este último pressuposto, quero aqui trazer um não coibiu, pelo contrário, as irregularidades e descumprimento exemplo que torna clara a pertinência desta assertiva. Ao participar de exigências colocadas pelo Não coibiu OS desvios, de uma banca de defesa de dissertação na Universidade do Estado atendimento às exigências colocadas pelos programas apenas com da Bahia UNEB, intitulada "Políticas Públicas de Desenvolvimento interesse na obtenção de recursos, não comprometimento com Educacional: uma análise dos resultados do Índice de a educação de qualidade, que, como apresenta autor, retrata Desenvolvimento da Básica", de autoria de José Francisco situação de inúmeros outros municípios. Barretto Neto, ficou clara a pertinência da utilização da noção de Nesse sentido, considero que, no caso brasileiro, a questão trajetória para a avaliação de políticas públicas. Nessa dissertação, da educação, assim como da saúde, e outras, não podem autor teve como objetivo estudar as políticas públicas educacionais desconsiderar esta dimensão. Ela é central para entendimento de de Ensino Fundamental no período de 1997 a 2005 e as condições sucessos e fracassos de políticas. Daí a importância de entender a objetivas que levaram dois municípios do estado da Bahia a obterem forma como agem OS grupos políticos locais em relação às políticas resultados extremamente diferenciados na aferição do Índice de gestadas na esfera federal; como se formam as redes de articulação Desenvolvimento da Educação Básica IDEB 2005, um tendo obtido entre instâncias públicas e interesses privados, que estão na base a melhor avaliação no estado (4,3) e a outra a pior (0,3). das irregularidades e dos desvios; e a isto se acrescente clientelismo, Ora, constata referido autor a falha na coleta e fornecimento filhotismo, paternalismo, problemas estruturais de nossa de informações que leva a concluir pela distorção dos resultados. organização social e de nossa cultura política. Ora, quanto a este aspecto, chega-se a uma importante constatação: Foi tendo em mente estas preocupações que elaborei uma da necessidade de um cuidado muito especial na referência aos índices proposta de avaliação aprofundada de políticas públicas sociais oficias para tecer grandes conclusões. Do ponto de vista (RODRIGUES, 2008), que aqui retomo, a seguir, para detalhar melhor metodológico, mostram ainda a necessidade de, ao se avaliar uma alguns pontos e articular às propostas de outros dois membros do política, desconstruir esses índices, questioná-los em seus pressupostos colegiado do e em sua total capacidade explicativa; e isto só se consegue se a proposta metodológica incluir estudos mais aprofundados que QUESITOS ESSENCIAIS PARA UMA AVALIAÇÃO exponham essas fissuras, e daí a importância do qualitativo estar aliado APROFUNDADA DAS POLÍTICAS PÚBLICAS DE aos dados quantitativos e secundários. Fica clara em sua análise a CARÁTER SOCIAL importância da dimensão política como fator impactante nos resultados da implementação de políticas na área da educação. Os Em primeiro lugar, há que se atentar para a necessidade dados apresentados pelo autor, referentes às políticas gestadas com a de clareza quanto à concepção de avaliação. Quanto a este ponto, criação do FUNDEF PCNs, transporte escolar, etc. -, mostram quero deixar claro que não compartilho conceito de avaliação 46 DO MARIA de Politicas 47 Interface entre Educação & Gestiocomo julgamento de valor e sim de avaliação como O momento político e as condições sócio-econômicas de compreensão. Avalia-se para conhecer e desta forma tal formulação da política. Atenção especial deve ser dada à articulação perspectiva retira foco da avaliação dos atendimentos aos entre as instâncias local, regional, nacional internacional e transnacional; objetivos da política e centra-se no processo de sua Apreensão do modelo econômico e social que concretização, ou seja, a vivência da política. sustentou a política à época de sua formulação; Do ponto de vista do instrumental metodológico, tal Levantamento de outras políticas e programas perspectiva pede uma postura multi e de preferência interdisciplinar, correlacionados à política em foco; de forma que se tenha acesso a uma multiplicidade de técnicas de Articulação do marco legal 30 contexto pesquisa: surveys, observações de campo, entrevistas, grupos focais, A análise de contexto permite avaliar a coerência entre base fotografias e filmagens, análise de conteúdo, etc. conceitual e contexto, bem como entender sucesso ou fracasso de Quanto à análise de Conteúdo de Políticas e Programas, uma política ou programa em razão, por exemplo, de disfunções dadas apresentamos (RODRIGUES, 2008) em três aspectos: na esfera política bem como na ocorrência de mudanças políticas e Formulação: objetivos, critérios, dinâmica de implantação, econômicas que inviabilizem a proposta inicial. acompanhamento e avaliação; Outro aspecto bastante importante diz respeito à trajetória Bases Conceituais: paradigmas orientadores, concepções institucional da política ou programa. Esta dimensão compreensiva e valores expressos, bem como conceitos e noções centrais que pretende dar a perceber grau de coerência e/ou dispersão do sustentam essas políticas; programa ao longo do seu trânsito pelas vias institucionais. No Coerência interna: não contradição entre as bases exemplo acima citado, da avaliação dos resultados do IDEB em dois conceituais, a forma de implementação, OS critérios estabelecidos para municípios da Bahia, ficou clara a dispersão dos propósitos seu acompanhamento, monitoramento e avaliação. formulados quando estes se confrontam com OS interesses locais. Esses três aspectos dizem respeito à análise do material Nesta perspectiva, um programa gestado na esfera federal, institucional na forma de leis, portarias, documentos internos, para ser avaliado, necessita a reconstituição de sua trajetória, de forma projetos, relatórios, atas de reuniões, fichas de acompanhamento, que pesquisador possa aferir as mudanças nos sentidos dados aos dados estatísticos e outros. objetivos do programa e à sua dinâmica conforme vai adentrando No entanto a realização de pesquisas tem ainda apontado para espaços diferenciados e, ao mesmo tempo, descendo nas hierarquias institucionais até chegar à base, que corresponde ao contato direto a necessidade de atentar a um quarto aspecto: Diferenciais de poder, que diz respeito à apreensão da ou não de mecanismos entre agentes institucionais e sujeitos receptores da política. presentes na formulação da política, no seu marco legal, que procuram Para a apreensão da trajetória institucional é fundamental a equalizar os interesses em jogo. realização de pesquisa de campo com a realização de entrevistas com diferentes agentes e representantes de instituições envolvidas na Outro quesito diz respeito à Análise do Contexto da formulação formulação e implementação de uma mesma política. da política e quanto a este aspecto orienta-se a atentar para: Avaliação de Públicas: 49 48 EDNA to PRADO MARIA Interface entre Educação & Gestio EscolarA noção de trajetória explorada por Gussi é apoiada em políticas e que, segundo penso, mais impactam OS seus resultados, Bourdieu, que a explora no sentido da trajetória de vida, da biografia, embora seja de dificil mensuração. Quando estive na região amazônica, mas que pode ser trasladada para qualquer outra situação em que se em 2005, eu conversava com vários pesquisadores que se voltavam tenha como foco a experiências e processos de longa duração (GUSSI, estudo de políticas e programas sociais para as populações 2008). Assim, o autor traz esta noção para refletir o Programa ribeirinhas e eles me relatavam as condições especiais vividas por de Microcrédito do Banco do Nordeste do Brasil (BNB), entendendo aquelas populações que inviabilizam a aplicação de critérios gerais, que a trajetória do programa sob análise "não tem um sentido único pensados a partir das condições encontradas em ouras regiões do e está circunscrito a ressignificações, segundo seus distintos país. Como pensar em estabelecer metas de produção, por exemplo, posicionamentos nos vários espaços institucionais que percorre, ou para populações que dependem da vicissitude do tempo, do seja, de acordo com seus deslocamentos na instituição" (GUSSI, dos rios, da condição das embarcações, do trato com uma 2008.p. 34). O autor se dedica, então, a acompanhar a trajetória temporalidade que não se adéqua de forma alguma à estabelecida institucional do programa acompanhado suas diversas fases: a sua nos grandes centros urbanos ou suas proximidades? concepção, formulação e operacionalização final. A apreensão dessas Assim, a apreensão dessa configuração coloca, ainda, fases se dá por meio da realização de entrevistas com funcionários algumas questões em destaque que dizem respeito: i) às inseridos nesse processo e atuantes em cada fase, contemplando, possibilidades de articular, na avaliação, as perspectivas e objetivos portanto, todos OS níveis hierárquicos. Como esclarece autor, de propostas generalizantes às particularidades locais; ii) às Para tanto, investigam-se perfis desses possibilidades de implementação de políticas, de forma localizada, funcionários, suas trajetórias profissionais e que levem em conta seu percurso temporal e territorial. Esta etapa afiliações teóricas, as relações sociais dentro da da pesquisa corresponde a um momento mais avançado de organização, OS diferentes grupos profissionais e hierárquicos, suas múltiplas alianças, conflitos sistematização dos dados já coletados e está aberta à manipulação e embates, assim como as relações de poder de uma série de instrumentos metodológico-analíticos que entre as diferentes hierarquias administrativas possibilitem atingir um maior nível de abstração, síntese e e funcionais. (GUSSI, 2008.p.34). criatividade. Poderão ser formulados esquemas, desenvolvidos gráficos, experimentados modelos variados, aliados a Como se pode verificar dessa proposta, ao recompor esta técnicas qualitativas de análise. Seria caso, por exemplo, de aliar trajetória é importante que se atente para OS aspectos culturais mapeamento da distribuição espacial da população atendida por inerentes a esses espaços institucionais e organizacionais. determinada política em acordo com recorte empírico formulado -, aos índices sócio-econômicos e às redes de interesses e relações Outro aspecto importante diz respeito ao espectro temporal de poder detectadas na pesquisa de campo. e territorial que conforma a política ou programa. A importância está no fato de que a apreensão da configuração temporal e territorial É nesse sentido, por exemplo, que a professora Alicia do percurso da política estudada diz respeito às especificidades locais Gonçalves, da UFPB, vem desenvolvendo uma problematização e sua historicidade. Este é um dos aspectos menos priorizados pelas quanto à formulação de indicadores de avaliação: para além dos 50 CRISTINA DO MARIA DIGGENES de Politicas 51 Interface entre Educação & Escolar1 iação a, ca Jm cting pdf. / e Barra 53SOUZA, Celina. Estado do campo da pesquisa em politicas públicas GEERTZ, Clifford. A interpretação das culturas. Rio de Janeiro: no Brasil. RBCS Vol. 18 51 fevereiro/2003. Zahar Editores, 1978 SOUZA, Celina. públicas: uma revisão da literatura". GREENE, Jennifer C. Mixed Methods in Social Inquiry. San Sociologias, n. 16 Porto Alegre jul./dez. 2006 Francisco: Jossey-Bass, 2007. YANOW, Dvora. Translating Local Knowledge at Organizational GUSSI, Alcides Fernando. Apontamentos teóricos e metodológicos Peripheries, British Journal of Management, Vol. 15, S9-S25 (2004). para a avaliação de programas de micro-crédito. AVAL- Revista Avaliação de Políticas Públicas, no. 1, jan-jun/2008. LEJANO, Raul. Frameworks for Policy Analysis. Mergint Text and Context. New York: Routledge, 2006. MINAYO, Maria Cecilia S.; ASSIS, Simone G.; SOUZA, Edinilsa R. (org.) Avaliação por triangulação de métodos: abordagem de programas sociais. Rio de Janeiro: Editora Fiocruz, 2005. Dilvo I. Avaliação institucional: pensando princípios. In: Newton Cesar Balzan e José Dias Sobrinho (org.), Avaliação institucional: teorias e experiências. São Paulo: Cortez, 2008 Ed. Ed., 1995), 37-51. RODRIGUES, Lea Propostas para uma avaliação em profundidade de políticas públicas sociais. AVAL- Revista Avaliação de Políticas Públicas, no. 1. SILVA E SILVA, Maria Ozanira da. Avaliação de políticas e programas sociais: uma reflexão sobre conteúdo teórico e metodológico da pesquisa avaliativa. In: Maria Ozanira da Silva e Silva (org.), Pesquisa avaliativa: aspectos teórico-metodológicos. São Paulo, SP: Veras Editora; São Luis, MA: GAEPP (Grupo de Avaliação e Estudo da Pobreza e de Políticas Direcionadas à Pobreza), 2008, p.89 177. SOBRINHO, José Dias. Avaliação: políticas educacionais e reformas da educação superior. São Paulo: Cortez, 2003. Avaliação de Públicas: 55 Interface entre Educação & Gestão Escolar 54