Análise das redes de cooperação científica através do estudo das coautorias dos artigos publicados em eventos da Anpad sobre avaliação de políticas públicas

O tema avaliação de políticas públicas foi intensificado com o desenvolvimento da administração pública, no entanto ainda é pouco explorado. Propõe-se neste trabalho identificar as redes de pesquisa entre as instituições e os autores que estudam a temática avaliação de políticas públicas e tiveram seus artigos publicados nos anais dos EnAnpads e/ou dos EnAPGs, nos últimos 10 anos. A identificação das relações entre os autores e instituições deu-se por meio do desenvolvimento de um estudo sociométrico e bibliométrico. Para tanto, selecionaram-se 45 artigos científicos que foram publicados nos anais dos EnAnpads, e 26 artigos, nos anais do EnAPGs. A fim de construir as redes de coautoria e as relações interinstitucionais, utilizou-se o software Pajek. Os resultados demonstraram o baixo grau de densidade nas possíveis redes de pesquisadores dedicados ao tema avaliação de políticas públicas no Brasil, na área de administração pública, na Anpad. Os autores não mantêm vínculo de publicação e se relacionam, em geral, uma única vez ou, ainda, publicam sozinhos. Conclui-se que a relação de forças na rede é baixa, ou seja, existem poucos contatos entre os autores para que haja poder na rede. Pretende-se neste estudo apontar o baixo grau de relacionamento entre autores e instituições.

Avaliação executiva de indicadores no governo do estado de Minas Gerais: análise da implementação de uma ferramenta de monitoramento e avaliação

A Avaliação Executiva de Indicadores (AEI) é uma tecnologia criada pelo governo de Minas Gerais, por intermédio do Programa Estado para Resultados, para ser empregada na avaliação sistemática da qualidade dos indicadores monitorados no âmbito da gestão estratégica do estado de Minas Gerais. O instrumento consiste em 34 perguntas, reunidas em quatro eixos temáticos: produção dos dados, produção do indicador, conceito e metodologia, e uso e comunicação. Os quesitos avaliados estão associados aos atributos desejáveis aos indicadores, como clareza, relevância, adequação, tempestividade e especificidade. A metodologia desenvolvida foi aplicada na avaliação da carteira de indicadores de 2009, composta por 104 indicadores. A avaliação resultou na identificação das características positivas e das lacunas do processo de produção de cada indicador, referenciando o trabalho de consolidação da carteira de indicadores na gestão para resultados. A AEI agrega valor à atividade de monitoramento, incentivando o desenvolvimento de medidas adequadas dos resultados das políticas públicas e contribuindo para o fortalecimento do modelo de contratação de resultado na gestão mineira.

Valores e espaço público: referenciais e instrumentos para a avaliação de projetos sociais

As realizações das organizações sociais apresentam a natureza dual de projetarem valores sociais relevantes, associados a resultados, através dos quais pretendem impactar pessoas. Essa concepção da gestão social - como reprodutora de valores e produtora de bens públicos visando o cumprimento de uma missão - sugere que a avaliação deva considerar os vínculos entre os valores e os benefícios para inferir métricas do impacto social dos projetos. Essa vinculação e o conceito de espaço público permitem tratar as questões da intangibilidade dos benefícios, da escala local dos projetos e da imitação dos métodos adaptados, que se mostram insuficientes para captar os valores sociais relevantes. Enfatizamos os trabalhos de H. Putnam e A. Sen para sugerir um referencial avaliativo como um conjunto de conceitos e instrumentos para o mapeamento dos bens públicos e valores desenvolvidos pelas organizações sociais. Como exemplo, apresentamos uma experiência avaliativa desenvolvida em Belo Horizonte (MG).

Avaliação do risco da arrecadação federal por meio de macrocarteiras de tributos

Este artigo emprega o modelo média-variância de Harry Markowitz na formação de macrocarteiras de tributos com participações ótimas de agregados tributários na arrecadação federal. Essas macrocarteiras ótimas, ou macrocarteiras eficientes, são aquelas que produzem a menor instabilidade do crescimento da arrecadação para uma determinada taxa de crescimento esperada, ou uma maior taxa de crescimento esperada para uma determinada instabilidade aceitável da arrecadação. Avaliamos o efeito das participações ótimas propostas pelo nosso modelo para a arrecadação das receitas de um conjunto de agregados tributários e comparamos seu perfil de crescimento com os resultados obtidos pelo governo federal. Nossos resultados experimentais mostraram que, no contexto analisado, a estrutura tributária da arrecadação federal opera em um nível subótimo de instabilidade-crescimento. Através da diversificação eficiente das receitas dos agregados tributários foi possível obter, no perfil conservador, um crescimento acumulado de arrecadação 28 pontos percentuais acima do crescimento acumulado realizado dos mesmos agregados tributários e com apenas 25% da sua instabilidade - um risco quatro vezes menor. No perfil moderado, foi alcançado um crescimento acumulado 33 pontos percentuais acima, para o mesmo nível de instabilidade.

Plano de Fortalecimento da Gestão do Turismo (PFGT): uma avaliação ex ante no município de Nísia Floresta (RN)

Atualmente, o Plano de Desenvolvimento do Turismo (Prodetur) vem procurando fortalecer institucionalmente os destinos turísticos, a fim de garantir a ampliação e a continuidade das melhorias estruturais já realizadas quando da primeira fase do programa governamental, e ao mesmo tempo dotar os municípios de uma gestão pública mais eficiente, em que deverá também considerar o turismo como o eixo central na formulação e gerenciamento das políticas públicas municipais com foco no desenvolvimento local. Para tanto, o Prodetur lançou, no Rio Grande do Norte, o Plano de Fortalecimento da Gestão do Turismo, do Patrimônio Natural e Cultural em 2009. A pesquisa objetiva avaliar, de forma ex ante, a viabilidade da implementação do referido plano governamental no município de Nísia Floresta (RN). Adotaram-se as seis dimensões do modelo teórico de Draibe (2001) conjugadas com o modelo de Neves (1996) para conduzir a pesquisa. Metodologicamente, optou-se por uma abordagem qualitativa, na qual foram buscadas análises de documentos como o diagnóstico estratégico, o plano de ação proposto e realização de entrevistas semiestruturadas com alguns secretários municipais. Usou-se a análise de conteúdo como técnica de tratamento dos conteúdos das entrevistas e foram feitas observações não participantes. Assim foi possível desenhar a pesquisa avaliativa, caracterizando o momento administrativo e político atual e como esse desenho poderia interferir na implementação do plano avaliado. Conclui-se que o município não apresenta condições institucionais suficientes para a implementação do Plano Governamental financiado com recursos federais.

Programas de marketing social: proposição e exame de uma estrutura conceitual de avaliação de resultados

A área de marketing tem sido cada vez mais demandada a prestar contas de suas ações, na forma de avaliação dos investimentos realizados. No marketing social não é diferente. O presente estudo examinou propostas de avaliação de programas de marketing social, em busca do que seria uma estrutura conceitual ideal para esse tipo de avaliação, a partir da literatura, prática de mercado, opinião de experts e exame empírico da proposta em dois diferentes estudos de caso, o programa Novo Sinal, da Prefeitura Municipal de Porto Alegre e os programas de imunização do Centro Estadual de Vigilância em Saúde do Governo do Rio Grande do Sul. A metodologia, qualitativa em sua essência, fez uso da técnica Delphi, entrevistas em profundidade e estudo de casos. A estrutura conceitual desenvolvida engloba as dimensões de avaliação de Input, Processo e Resultados, com respectivas variáveis e indicadores para cada dimensão, e ao longo de cujas dimensões a avaliação ética se faz presente, mas ainda de difícil avaliação na prática cotidiana dos profissionais de marketing social.

Avaliação da capacidade de interpretação de algumas alterações electrocardiográficas por clínicos de pequenos animais em Medicina Veterinária

No presente estudo foi elaborado um questionário para avaliar a capacidade de interpretação de electrocardiogramas por médicos veterinários. Este posteriormente foi respondido por 3 grupos com diferentes graus de experiência, os estagiários, médicos veterinários com menos de 5 anos de experiência, e médicos veterinários com mais de 5 anos de experiência, de forma a analisar as diferenças ao nível da capacidade interpretativa de cada grupo e do total dos inquiridos. As variáveis em estudo utilizadas foram o nível de experiência, o grau académico, o interesse em cardiologia, a formação na cardiologia, e o número de electrocardiogramas interpretados em média semanalmente, para verificar como estas influenciam as capacidades interpretativas dos participantes. Efectua-se também uma revisão da fisiologia cardíaca, a forma como o electrocardiograma é realizado e como este é interpretado, e as principais arritmias que podem existir. Verificou-se que o nível de experiência e o número de ECGs interpretados em média semanalmente, afectam a capacidade de interpretação de ECG, havendo uma relação directa destes factores nos inquiridos. Já em relação a esta mesma capacidade ser afectada pelo grau académico, formação e interesse em cardiologia, tal não foi observado, não se tendo observado qualquer relação.O grupo dos estagiários foi aquele onde houve uma maior variação individual, havendo portanto uma menor concordância dentro deste grupo. Foram também estes que demonstraram a maior dificuldade no estabelecimento de um diagnóstico para os diversos ECGs apresentados. Os médicos veterinários com menos de 5 anos de experiência foram aqueles que obtiveram melhores resultados em todas as análises realizadas, e onde se registou menor número de questões por responder. Nos médicos veterinários com mais de 5 anos de experiência, houve muitosquestionários sem qualquer questão respondida, o que afectou os resultados obtidos por este grupo na análise dos diversos parâmetros variáveis.

A avaliação de programas de capacitação: um estudo de caso na administração pública

Este artigo apresenta e discute o emprego da Metodologia Multicritério de Apoio à Decisão - Construtivista (MCDA-C) na avaliação de programas de capacitação desenvolvidos na administração pública, por meio de sua aplicação em um estudo de caso na Polícia Militar de Santa Catarina, especificamente, na avaliação do processo de capacitação dos policiais militares instrutores do Programa Educacional de Resistência às Drogas (Proerd). No que diz respeito ao enquadramento metodológico, este trabalho, quanto à natureza do objetivo, é exploratório, e pela natureza do artigo, prático. A lógica de pesquisa foi indutiva e a coleta de dados utilizou dados primários, obtidos por meio de entrevistas semiestruturadas com os gestores do programa. Já a abordagem do problema se deu de forma quali-quantitativa. Esta pesquisa é aplicada, e o principal procedimento técnico utilizado foi o estudo de caso. Como resultados, o modelo construído, com 62 critérios de avaliação, permitiu apurar que o processo de capacitação do Proerd alcançou 69 pontos na avaliação global, além de evidenciar as principais preocupações dos decisores em relação ao programa de treinamento e o quanto cada um desses fatores contribui para o sucesso da capacitação, individual e globalmente, revelando, ainda, como gerenciar as oportunidades de aperfeiçoamento criadas.

Avaliação do desempenho docente : objectivos e controvérsias

Actualmente, no campo específico da educação, a avaliação do desempenho tem vindo a assumir uma importância crescente e uma maior atenção dos investigadores pelos contextos escolares e pela relação directa entre a qualidade das abordagens de ensino e os níveis de desempenho dos alunos. No contexto do sistema educativo português, a preocupação com a eficácia passa a considerar a avaliação dos professores como uma prioridade, trazendo à discussão a profissionalidade docente e a sua avaliação. Assim, este estudo tem como objectivo a análise dos elementos potenciadores e condicionadores do actual modelo proposto pelo Decreto Regulamentar 2/2008 de 10 de Janeiro, bem como a sistematização de elementos complementares e /ou alternativos ao modelo vigente, a partir do que perspectivam os professores de uma escola secundária. Para a sua realização utilizou-se uma abordagem qualitativa suportada na grounded theory - estudo de caso. As técnicas de colheita de dados foram as entrevistas a nove docentes participantes e a análise de documentos relacionados com a política educativa da escola. O estudo permitiu concluir que o modelo apresenta dimensões controversas e que estas condicionam os objectivos intrínsecos do mesmo, sendo que a prevalência de questões burocráticas dificulta a sua implementação. Em consequência foram apresentadas algumas recomendações.

Avaliação, informação e responsabilização no setor público

O presente artigo discute o papel que os sistemas de avaliação de políticas públicas e programas governamentais podem desempenhar no aperfeiçoamento de mecanismos de controle da gestão pública. Procura-se verificar se a implantação de sistemas de avaliação contribui para reduzir a assimetria de informações entre cidadãos e políticos e entre políticos e burocratas. São discutidos os casos do Sistema de Avaliação de Rendimento Escolar do Estado de São Paulo (Saresp) e do Sistema de Monitoramento e Avaliação (SMA) do Programa Estadual de Doenças Sexualmente Transmissíveis e Aids (DST/Aids), do mesmo estado. A análise desses casos sugere que os sistemas de avaliação podem contribuir para uma maior transparência da gestão pública e para a responsabilização dos agentes públicos pelos resultados das políticas e programas governamentais, mas que o grau com que avanços nessa direção ocorrem relaciona-se não apenas com características próprias da avaliação - particularmente com as formas de apresentação e de divulgação dos dados da avaliação -, mas também com a dinâmica dos atores envolvidos na gestão da avaliação e no processo de formulação e implementação da política pública considerada.

Impactos da Política Nacional de Irrigação sobre o desenvolvimento socioeconômico da região Norte de Minas Gerais: uma avaliação do Projeto Gorutuba

Este trabalho teve como objetivo identificar e avaliar os impactos socioeconômicos, diretos e indiretos, da Política Nacional de Irrigação. Especificamente, analisou-se a efetividade do Projeto Público de Irrigação Gorutuba, localizado no Norte de Minas Gerais. A pesquisa adota como metodologia a avaliação ex post facto, de impacto. Utilizando um modelo quase experimental, buscou-se, por meio da abordagem multivariada, comparar o município de Porteirinha, beneficiado com a implantação do Projeto Gorutuba, com municípios não beneficiados (grupo controle). Porteirinha ficou agrupado no cluster 6, juntamente com outros 13 municípios, todos pertencentes à região norte do estado, o que pode ser considerado uma evidência do bom desempenho do modelo para formação do grupo controle. A pesquisa evidenciou que o projeto alcança, em parte, os resultados esperados. Embora os resultados permitam reforçar a importância da agricultura irrigada na promoção do desenvolvimento regional, por meio dos impactos na produção agropecuária, na geração de empregos e crescimento populacional, identificou-se que os indicadores dos municípios analisados refletiram a ocorrência de crescimento econômico sem, entretanto, ter ocorrido melhoria dos indicadores sociais de Porteirinha (município beneficiado).

O estado da arte da avaliação de políticas públicas: conceituação e exemplos de avaliação no Brasil

A avaliação e o monitoramento são fases imprescindíveis do planejamento estatal, ocupando também espaço crescente nas pesquisas acadêmicas. Sua atualidade no debate em torno da eficácia e do impacto das políticas públicas em diferentes áreas é evidenciada pelos vários fóruns, encontros e redes de especialistas que tratam da temática, pela demanda oriunda de órgãos públicos, e pela profissionalização dessa atividade em escala internacional. O presente artigo destaca, de forma sistemática e analítica, a relevância dos processos de avaliação, sistematizando informações sobre aspectos conceituais, e o estado da arte dos estudos sobre avaliação e das práticas avaliativas de diferentes esferas de governo. O trabalho está dividido em cinco seções: na primeira, são apresentadas a conceituação de avaliação e suas principais características, na segunda são analisados os tipos de avaliação, e, na terceira, seus diversos usos. Segue, na quarta seção, uma exposição sobre as tendências dos estudos avaliativos no Brasil e no mundo e, por fim, nas conclusões são apontadas as dificuldades e as necessidades ao aprimoramento da atividade de avaliação de políticas públicas.

Ação comunicativa na gestão de um serviço privatizado de água e esgotos: uma avaliação em Cachoeiro de Itapemirim (ES)

Este artigo discute o processo de participação social na gestão do serviço de abastecimento de água e esgotamento sanitário do município de Cachoeiro de Itapemirim (ES). Para tanto, apoia-se no conceito de democracia deliberativa de Jürgen Habermas, entendido como a institucionalização dos processos discursivos de formação da opinião e da vontade. Foram realizadas pesquisas documentais, entrevistas com atores-chave e grupos focais com a população. Constatou-se que, na atuação do Conselho Municipal de Saneamento e das audiências públicas da agência municipal de regulação, prevalecem os imperativos sistêmicos mediados pelo dinheiro e pelo poder administrativo em detrimento da possibilidade de formação política da vontade e da opinião, próprios do mundo da vida. Conclui-se que as formas de gestão ainda são distantes do ideal da democracia deliberativa, produzindo-se o que Habermas denomina de "colonização do mundo da vida".

Uma avaliação do Programa de Aceleração do Crescimento (PAC) no estado da Bahia (2007-10)

O artigo analisa os principais empreendimentos de infraestrutura (logística, energética e social e urbana) do Programa de Aceleração do Crescimento (PAC) no período de 2007 a 2010. A problemática do estudo foi: como o planejamento do PAC baiano contribuiu para o desenvolvimento do Estado? O artigo demonstra, por meio de dados quantitativos, o impacto e o desempenho do PAC para o desenvolvimento da Bahia. Para a realização dessa abordagem quantitativa, informações foram extraídas de dados secundários. Conclui-se que, em média, 76,93% dos projetos do PAC baiano não foram finalizados, mas, mesmo assim, ao associá-lo ao Produto Interno Bruto (PIB), utilizando uma simulação regressiva, antes, durante e depois dos anos de 2007 até 2010, percebe-se sua influência e interferência no processo de crescimento regional da Bahia.

Identificando correntes teóricas de planejamento: uma avaliação do Plano Nacional de Saneamento Básico (Plansab)

O planejamento público no Brasil, em particular no campo do saneamento básico, vem se pautando por diferentes linhas teórico-metodológicas, nem sempre explícitas, sendo relevante um esforço de identificação das matrizes que estruturam o conteúdo dos diferentes planos desenvolvidos, uma vez que diferentes matrizes podem conduzir a diferentes implicações em sua implementação. Neste trabalho, avalia-se o Plano Nacional de Saneamento Básico (Plansab), utilizando, para tanto, um modelo de avaliação no qual se buscam identificar os princípios que fundamentaram sua elaboração, comparando-os com os valores defendidos por seis escolas de planejamento com destaque na atualidade. Foram priorizadas quatro categorias analíticas: metodologia, diagnóstico, participação da sociedade e visão de futuro. A comparação permitiu avaliar a coerência entre princípios que direcionaram a proposta inicial do planejamento e os realmente assumidos em cada uma das suas fases de elaboração, mostrando alinhamento do plano com correntes que preveem processo participativo, visão estratégica e visão de futuro capaz de lidar com incertezas.