Valores e espaço público: referenciais e instrumentos para a avaliação de projetos sociais

As realizações das organizações sociais apresentam a natureza dual de projetarem valores sociais relevantes, associados a resultados, através dos quais pretendem impactar pessoas. Essa concepção da gestão social - como reprodutora de valores e produtora de bens públicos visando o cumprimento de uma missão - sugere que a avaliação deva considerar os vínculos entre os valores e os benefícios para inferir métricas do impacto social dos projetos. Essa vinculação e o conceito de espaço público permitem tratar as questões da intangibilidade dos benefícios, da escala local dos projetos e da imitação dos métodos adaptados, que se mostram insuficientes para captar os valores sociais relevantes. Enfatizamos os trabalhos de H. Putnam e A. Sen para sugerir um referencial avaliativo como um conjunto de conceitos e instrumentos para o mapeamento dos bens públicos e valores desenvolvidos pelas organizações sociais. Como exemplo, apresentamos uma experiência avaliativa desenvolvida em Belo Horizonte (MG).

Avaliação do risco da arrecadação federal por meio de macrocarteiras de tributos

Este artigo emprega o modelo média-variância de Harry Markowitz na formação de macrocarteiras de tributos com participações ótimas de agregados tributários na arrecadação federal. Essas macrocarteiras ótimas, ou macrocarteiras eficientes, são aquelas que produzem a menor instabilidade do crescimento da arrecadação para uma determinada taxa de crescimento esperada, ou uma maior taxa de crescimento esperada para uma determinada instabilidade aceitável da arrecadação. Avaliamos o efeito das participações ótimas propostas pelo nosso modelo para a arrecadação das receitas de um conjunto de agregados tributários e comparamos seu perfil de crescimento com os resultados obtidos pelo governo federal. Nossos resultados experimentais mostraram que, no contexto analisado, a estrutura tributária da arrecadação federal opera em um nível subótimo de instabilidade-crescimento. Através da diversificação eficiente das receitas dos agregados tributários foi possível obter, no perfil conservador, um crescimento acumulado de arrecadação 28 pontos percentuais acima do crescimento acumulado realizado dos mesmos agregados tributários e com apenas 25% da sua instabilidade - um risco quatro vezes menor. No perfil moderado, foi alcançado um crescimento acumulado 33 pontos percentuais acima, para o mesmo nível de instabilidade.

A avaliação de programas de capacitação: um estudo de caso na administração pública

Este artigo apresenta e discute o emprego da Metodologia Multicritério de Apoio à Decisão - Construtivista (MCDA-C) na avaliação de programas de capacitação desenvolvidos na administração pública, por meio de sua aplicação em um estudo de caso na Polícia Militar de Santa Catarina, especificamente, na avaliação do processo de capacitação dos policiais militares instrutores do Programa Educacional de Resistência às Drogas (Proerd). No que diz respeito ao enquadramento metodológico, este trabalho, quanto à natureza do objetivo, é exploratório, e pela natureza do artigo, prático. A lógica de pesquisa foi indutiva e a coleta de dados utilizou dados primários, obtidos por meio de entrevistas semiestruturadas com os gestores do programa. Já a abordagem do problema se deu de forma quali-quantitativa. Esta pesquisa é aplicada, e o principal procedimento técnico utilizado foi o estudo de caso. Como resultados, o modelo construído, com 62 critérios de avaliação, permitiu apurar que o processo de capacitação do Proerd alcançou 69 pontos na avaliação global, além de evidenciar as principais preocupações dos decisores em relação ao programa de treinamento e o quanto cada um desses fatores contribui para o sucesso da capacitação, individual e globalmente, revelando, ainda, como gerenciar as oportunidades de aperfeiçoamento criadas.

Avaliação, informação e responsabilização no setor público

O presente artigo discute o papel que os sistemas de avaliação de políticas públicas e programas governamentais podem desempenhar no aperfeiçoamento de mecanismos de controle da gestão pública. Procura-se verificar se a implantação de sistemas de avaliação contribui para reduzir a assimetria de informações entre cidadãos e políticos e entre políticos e burocratas. São discutidos os casos do Sistema de Avaliação de Rendimento Escolar do Estado de São Paulo (Saresp) e do Sistema de Monitoramento e Avaliação (SMA) do Programa Estadual de Doenças Sexualmente Transmissíveis e Aids (DST/Aids), do mesmo estado. A análise desses casos sugere que os sistemas de avaliação podem contribuir para uma maior transparência da gestão pública e para a responsabilização dos agentes públicos pelos resultados das políticas e programas governamentais, mas que o grau com que avanços nessa direção ocorrem relaciona-se não apenas com características próprias da avaliação - particularmente com as formas de apresentação e de divulgação dos dados da avaliação -, mas também com a dinâmica dos atores envolvidos na gestão da avaliação e no processo de formulação e implementação da política pública considerada.

Impactos da Política Nacional de Irrigação sobre o desenvolvimento socioeconômico da região Norte de Minas Gerais: uma avaliação do Projeto Gorutuba

Este trabalho teve como objetivo identificar e avaliar os impactos socioeconômicos, diretos e indiretos, da Política Nacional de Irrigação. Especificamente, analisou-se a efetividade do Projeto Público de Irrigação Gorutuba, localizado no Norte de Minas Gerais. A pesquisa adota como metodologia a avaliação ex post facto, de impacto. Utilizando um modelo quase experimental, buscou-se, por meio da abordagem multivariada, comparar o município de Porteirinha, beneficiado com a implantação do Projeto Gorutuba, com municípios não beneficiados (grupo controle). Porteirinha ficou agrupado no cluster 6, juntamente com outros 13 municípios, todos pertencentes à região norte do estado, o que pode ser considerado uma evidência do bom desempenho do modelo para formação do grupo controle. A pesquisa evidenciou que o projeto alcança, em parte, os resultados esperados. Embora os resultados permitam reforçar a importância da agricultura irrigada na promoção do desenvolvimento regional, por meio dos impactos na produção agropecuária, na geração de empregos e crescimento populacional, identificou-se que os indicadores dos municípios analisados refletiram a ocorrência de crescimento econômico sem, entretanto, ter ocorrido melhoria dos indicadores sociais de Porteirinha (município beneficiado).

Dinâmica dos financiamentos habitacionais nos municípios do Rio Grande do Sul de 2006 a 2010: uma avaliação do Programa "Minha Casa, Minha Vida"

O déficit habitacional no Brasil é um problema crônico, apesar dos diversos programas implementados a fim de solucionar essa questão. Este estudo objetiva analisar os elementos impulsionadores dos financiamentos habitacionais e seus impactos, em termos regionais, no estado do Rio Grande do Sul, no período de 2006 a 2010, por meio da combinação de três procedimentos: o método estrutural-diferencial, a técnica de krigagem e a regressão espacial. Os resultados indicam que as faixas de crédito que mais cresceram foram as de valor intermediário, que os municípios de menor nível de renda foram os mais beneficiados com o crédito e que houve um deslocamento dos valores dos imóveis para as regiões menos valorizadas, reduzindo as desigualdades regionais. Ou seja, o programa "Minha Casa, Minha Vida" intensificou o volume de crédito, mas não alterou os aspectos estruturais dos financiamentos.

Trajetória e avaliação dos programas federais brasileiros voltados a promover a eficiência administrativa e fiscal dos municípios

O artigo apresenta a trajetória dos programas do governo federal direcionados à modernização administrativa e fiscal dos municípios brasileiros desde os anos 1930. O foco do trabalho, contudo, são os programas implantados nos governos Fernando Henrique Cardoso (1995-2002) e Lula (2003-10) voltados a incrementar as capacidades administrativas e fiscais das cidades. O argumento central é que esses programas sempre foram concebidos e executados pelas burocracias federais propondo soluções para os municípios que representam a visão "modernizadora" do governo central para os problemas de gestão dos governos locais. Essas iniciativas têm duplicado esforços e não contribuem para enfrentar as carências administrativas municipais, o que limitou seu alcance e gerou poucos resultados desde sua reinserção na agenda do governo federal a partir de 1997.

Estrutura lógica como metodologia para avaliação de políticas públicas: uma análise do Pronaf

O Programa Nacional de Fortalecimento da Agricultura Familiar (Pronaf) incluiu agricultores familiares no quadro das políticas públicas, ao seguir as tendências das políticas da década de 1990 de democratizar acesso a recursos financeiros. A sustentabilidade foi inserida no programa. Neste estudo, o propósito geral foi analisar os objetivos do Pronaf, no contexto do desenvolvimento econômico. Considerou-se que o Pronaf não permitiria avaliar a relação entre atividades desenvolvidas e resultados obtidos pelo programa. Assim, seria inconsistente. Além de analisar documentos oficiais, outros objetivos específicos foram analisar a consistência do Pronaf e, em caso de inconsistência, propor uma matriz de estrutura lógica. Nenhum projeto foi encontrado, apenas a legislação. A análise desta não permitiu o preenchimento da matriz e isso indica inconsistência. Propôs-se uma matriz completa.

Avaliação da implementação do Programa Nacional de Fortalecimento da Agricultura Familiar - novas perspectivas de análise

Este trabalho apresenta os resultados da avaliação da implementação do Programa Nacional de Fortalecimento da Agricultura Familiar (Pronaf) desenhada a partir dos eixos conteúdo, contexto, capacidade, compromisso e clientes/coalizões. Além de análise documental, foram realizadas entrevistas e grupos focais. Os resultados corroboram a necessidade de convergência entre as vertentes top-down e bottomup para a análise da implementação de políticas públicas e pontuam como entrave mais significativo ao êxito do programa as deficiências do sistema de assistência técnica. Por outro lado, observam-se expressivos avanços quanto à estrutura de governança, que possibilita o equacionamento das demandas portadas pelos diferentes atores e que fomenta atualizações constantes no escopo do programa, podendo assegurar a manutenção da qualidade operacional alcançada.

Monitoramento para avaliação do desempenho regulatório do Instituto Nacional de Metrologia, Qualidade e Tecnologia

O objetivo deste artigo é apresentar a sistemática de Monitoramento para Avaliação do Desempenho Regulatório do Instituto Nacional de Metrologia, Qualidade e Tecnologia (Inmetro), o Madri. Adotando como teoria de sustentação o mapa causa-e-efeito desenvolvido pela Ocde para avaliação do impacto regulatório, a pesquisa estruturou-se nas etapas de conhecimento prévio, coleta e análise das evidências, utilizando as estratégias de pesquisa bibliográfica, análise documental, entrevistas e aplicação de questionário. Constituído por perspectivas, condicionantes e parâmetros, o Madri - que pode ser reproduzido, com devidas adequações, a outras realidades regulatórias - tem o potencial, primeiramente, de induzir a gestão orientada por resultados, gerando aperfeiçoamento das regulamentações e fomentando aprendizagem, e, depois, mais amplamente, de reduzir a deficiência em avaliação ex post dos sistemas regulatórios nacionais.

O curso de planejamento da Faculdade de Saúde Pública da Universidade de São Paulo: ensaio de avaliação

Após descreverem sucintamente a organização e conteúdo do curso de especialização em planejamento do setor saúde, da Faculdade de Saúde Pública da USP, foram relatados os resultados de uma pesquisa levada a efeito junto a profissionais preparados no referido curso, no período de 1968 a 1972. A despeito de algumas falhas apontadas, os entrevistados, em sua maioria, manifestaram a opinião de que os conhecimentos e técnicas ministrados asseguram capacitação suficiente para o desempenho da função planejadora. As maiores dificuldades por eles sentidas dizem respeito a deficiências da máquina administrativa dos serviços de saúde, à escassez de pessoal e de verbas e à falta de apoio central, regional e local. Algumas medidas são sugeridas, objetivando a eliminação ou atenuação dessas dificuldades.

Avaliação qualitativa dos serviços de pré-natal: auditoria de fichas clínicas

Propõe-se um método para auditoria de fichas clínicas de serviços de pré-natal, baseado no preenchimento de duas fichas modelos I e II. A primeira refere-se ao grau de preenchimento dos itens da ficha e a segunda à coerência entre os itens assinalados e o diagnóstico e conduta. Tendo como base o modelo de ficha usado pelo serviço em auditoria, são elaboradas duas listas de itens que depois são aplicadas para obtenção de dados que irão constar nas fichas I e II. O método foi usado em algumas unidades Sanitárias (CS I e III) da Secretaria de Saúde de S. Paulo (Brasil) revelando ser de simples aplicação e fácil análise dos resultados, porém necessitando de pessoal qualificado, como enfermeira e médico com experiência na área da Saúde Materna.

O problema da avaliação em Saúde Pública

Após discussão do conceito de avaliação, a partir das clássicas idéias de controle administrativo, foram indicados alguns dos critérios mais freqüentemente utilizados na avaliação dos programas de saúde. Chama-se a atenção, todavia, para os riscos inerentes a tais critérios, derivados do fato de que a problemática de saúde - como reflexo das condições gerais de vida - é fortemente afetada por fatores impermeáveis às ações específicas do setor. Daí a necessidade do emprego de critérios mais simples, que permitam estabelecer uma relação de causa e efeito entre as ações desenvolvidas e os resultados alcançados.

Um modelo de análise sócio-econômica: construção e resultados obtidos

Apresenta-se um modelo de análise sócio-econômica, construído com o objetivo de chegar a um escalonamento possível da posição de uma determinada população na estrutura da sociedade. Tal modelo foi construído a partir de um conjunto de indicadores previamente selecionados como os mais significativos para a avaliação do nível sócio-econômico da população amostrada. Pretendeu-se, com a construção desse modelo, mostrar a interferência de fenômenos de natureza sócio-econômica na ocorrência de determinados problemas bucais. A investigação mostrou a seguinte composição da população estudada: baixa inferior, 21,8%; baixa superior, 39,9%; média inferior, 26,6%; média superior, 9,1%; alta inferior, 1,7% e alta superior, 0,5%.

Avaliação do uso de periódicos em biblioteca especializada em saúde pública

Foi feita avaliação do uso de periódicos técnico-científicos da Biblioteca da Faculdade de Saúde Pública da Universidade de São Paulo (FSP/ USP), por um período de seis meses, em 1973/74, com a finalidade de verificar as tendências de interesse de seus usuários. Para a avaliação foi considerado o total de empréstimos realizados no período, sendo desprezados os dados de consulta local e do uso do periódico feito por meio de fotocópias de artigos. O número de consulentes matriculados no período era, em média, de 801, sendo 11,7% pertencentes ao corpo docente da FSP; 40,6% ao discente e 47,5% referentes a consulentes externos. O levantamento foi programado para medir os periódicos circulados considerando as seguintes variáveis: tipo de aquisição; categoria de consulentes; ano da publicação; língua em que o periódico foi publicado e assunto do periódico. Foi medido também o grau de freqüência da circulação, usando-se o método de Bradford. A análise dos resultados mostrou que a circulação foi de 36,5% do total de títulos da coleção (1.530); a zona de concentração dos títulos circulados foi muito baixa, com 3,6% do total de títulos da coleção. Quanto às demais variáveis, verificou-se que 68,3% da circulação coube a periódicos adquiridos por compra; 82,5% a periódicos dos 5 anos mais recentes (1969-1973); 61,2% a periódicos em língua inglesa; 72,5% foi a demanda por parte do corpo docente.