A avaliação de programas de capacitação: um estudo de caso na administração pública

Este artigo apresenta e discute o emprego da Metodologia Multicritério de Apoio à Decisão - Construtivista (MCDA-C) na avaliação de programas de capacitação desenvolvidos na administração pública, por meio de sua aplicação em um estudo de caso na Polícia Militar de Santa Catarina, especificamente, na avaliação do processo de capacitação dos policiais militares instrutores do Programa Educacional de Resistência às Drogas (Proerd). No que diz respeito ao enquadramento metodológico, este trabalho, quanto à natureza do objetivo, é exploratório, e pela natureza do artigo, prático. A lógica de pesquisa foi indutiva e a coleta de dados utilizou dados primários, obtidos por meio de entrevistas semiestruturadas com os gestores do programa. Já a abordagem do problema se deu de forma quali-quantitativa. Esta pesquisa é aplicada, e o principal procedimento técnico utilizado foi o estudo de caso. Como resultados, o modelo construído, com 62 critérios de avaliação, permitiu apurar que o processo de capacitação do Proerd alcançou 69 pontos na avaliação global, além de evidenciar as principais preocupações dos decisores em relação ao programa de treinamento e o quanto cada um desses fatores contribui para o sucesso da capacitação, individual e globalmente, revelando, ainda, como gerenciar as oportunidades de aperfeiçoamento criadas.

Avaliação, informação e responsabilização no setor público

O presente artigo discute o papel que os sistemas de avaliação de políticas públicas e programas governamentais podem desempenhar no aperfeiçoamento de mecanismos de controle da gestão pública. Procura-se verificar se a implantação de sistemas de avaliação contribui para reduzir a assimetria de informações entre cidadãos e políticos e entre políticos e burocratas. São discutidos os casos do Sistema de Avaliação de Rendimento Escolar do Estado de São Paulo (Saresp) e do Sistema de Monitoramento e Avaliação (SMA) do Programa Estadual de Doenças Sexualmente Transmissíveis e Aids (DST/Aids), do mesmo estado. A análise desses casos sugere que os sistemas de avaliação podem contribuir para uma maior transparência da gestão pública e para a responsabilização dos agentes públicos pelos resultados das políticas e programas governamentais, mas que o grau com que avanços nessa direção ocorrem relaciona-se não apenas com características próprias da avaliação - particularmente com as formas de apresentação e de divulgação dos dados da avaliação -, mas também com a dinâmica dos atores envolvidos na gestão da avaliação e no processo de formulação e implementação da política pública considerada.

Estrutura lógica como metodologia para avaliação de políticas públicas: uma análise do Pronaf

O Programa Nacional de Fortalecimento da Agricultura Familiar (Pronaf) incluiu agricultores familiares no quadro das políticas públicas, ao seguir as tendências das políticas da década de 1990 de democratizar acesso a recursos financeiros. A sustentabilidade foi inserida no programa. Neste estudo, o propósito geral foi analisar os objetivos do Pronaf, no contexto do desenvolvimento econômico. Considerou-se que o Pronaf não permitiria avaliar a relação entre atividades desenvolvidas e resultados obtidos pelo programa. Assim, seria inconsistente. Além de analisar documentos oficiais, outros objetivos específicos foram analisar a consistência do Pronaf e, em caso de inconsistência, propor uma matriz de estrutura lógica. Nenhum projeto foi encontrado, apenas a legislação. A análise desta não permitiu o preenchimento da matriz e isso indica inconsistência. Propôs-se uma matriz completa.

Elementos de avaliação do "risco gravídico"

São estabelecidos alguns conceitos básicos que definem o "risco gravídico" propondo-se uma classificação dos elementos que devem ser considerados no estabelecimento do risco. Com o objetivo de quantificar a avaliação do risco e baseados nos fatores da classificação são atribuídos notas cuja soma determina um valor que mede a intensidade do "risco gravídico". Calcados nestes valores são estudados, retrospectivamente, 62 óbitos maternos distribuídos em tabelas onde se associam diferentes fatores. Verifica-se, em conclusão, que um adequado programa de Saúde Materna é necessário não só para atender às gestantes durante o Pré-Natal como também facultar oportuna assistência hospitalar. A análise dos óbitos e os fatores que determinaram o alto risco sugerem elementos para a elaboração de Programas de Saúde Materna.

Experiência de um programa de profilaxia medicamentosa coletiva da malária no sudeste do Pará, Brasil

Apresenta-se uma experiência de 35 semanas com profilaxia medicamentosa coletiva da malária numa região relativamente isolada do sudeste do Estado do Pará, Brasil, onde a doença se encontra num estado de hiperendemia. A associação medicamentosa utilizada foi a de uma 4 aminoguinoleína com a pirimetamina. São discutidas as características regionais da endemia, bem como problemas encontrados na ministração periódica coletiva. Conclui-se pela eficácia do método, ressalvada a necessidade de uma administração bastante eficaz para que os níveis de cobertura possam ser mantidos em torno de 75%. Nessa situação, a incidência da doença baixou de 40 casos clínicos para cerca de 1,5 casos, por cem habitantes (avaliação semanal). Este último nível mostrou-se perfeitamente compatível com o desenvolvimento dos trabalhos agropastorís na região estudada.

Avaliação preliminar do Serviço de Saúde Escolar da IX Região Administrativa, Rio de Janeiro: estudo da população coberta e análise operacional de um subprograma

Foi realizada uma avaliação preliminar do Serviço de Saúde Escolar da IX Região Administrativa do Estado do Rio de Janeiro, como resultado do convênio firmado entre o Instituto de Medicina Social da Universidade do Estado do Rio de Janeiro e a Secretaria de Saúde do Estado. Através de estudo do nível de saúde entre os escolares e da análise operacional do subprograma de Registro de Saúde, diagnosticaram-se elevados índices de morbidade e pequena proporção de crianças com assistência médica prévia, além de determinar-se a efetividade do programa e de identificar-se problemas no processo técnico-administrativo do Serviço. Dentre as conclusões destaca-se a necessidade de completar a avaliação do Serviço, através da determinação dos critérios de eficiência, eficácia e rendimento, tendo em vista o fornecimento de subsídios para as tarefas de planejamento e administração. É enfatizada a necessidade de ampliação das medidas integradoras dos serviços universitários com os serviços da comunidade, no sentido de fornecer aos primeiros as condições de realizar, através de prestação de serviços, uma formação dos recursos humanos de acordo com a situação de saúde da comunidade, e aos segundos a necessária implementação de novas técnicas e modelos de assistência.

Avaliação de material educativo: adequação de quatro volantes sobre alimentação da criança de 0 a 12 meses de idade

Foi feita, através do Serviço de Educação de Saúde Pública da Secretaria de Estado da Saúde de São Paulo (Brasil), avaliação do tipo pré-teste de material instrucional - quatro volantes sobre alimentação da criança de 0 a 12 meses de idade, utilizados no programa de Assistência à Criança da referida Secretaria, com o objetivo de fornecer subsídios para reformulação deste material. O estudo foi realizado em 18 Centros de Saúde da Região Leste da Grande São Paulo, com uma amostra de 50 mães entrevistadas, clientes das Unidades Sanitárias e 48 funcionários. Investigou-se a compreensão das mães e dos funcionários em relação ao conteúdo do material instrucional e a percepção da viabilidade das práticas recomendadas nos volantes. Os resultados mostraram que em relação a 3 volantes a maioria das mensagens foi interpretada corretamente, sendo que para as mães a "boa compreensão" variou de 80,0% a 96,0% e para o pessoal auxiliar de 90,9% a 100,0%. Quanto à percepção da impossibilidade de se por em prática as orientações - avaliada através de interpretação de caráter projetivo - foi maior entre os funcionários (80,0% e mais) do que entre as mães (em torno de 50%). Identificaram-se algumas barreiras de comunicação e obtiveram-se sugestões que contribuiram para reformulação e melhoria dos materiais.

Instrumento de avaliação do desenvolvimento de pré-escolares dos Centros de Educação e Alimentação do Pré-Escolar

Para testar os efeitos do programa dos Centros de Educação e Alimentação do Pré-Escolar (CEAPE) no desenvolvimento sócio-psico-pedagógico dos pré-escolares, foram estudados e selecionados itens de fácil obtenção e de sensibilidade suficiente para a estimativa da eficácia do programa nessa área. Estes itens constituiram o "Instrumento de Avaliação do Desenvolvimento do Pré-Escolar (IADPE)". Com o objetivo de se efetuar uma análise das principais características do "Instrumento", foi avaliado seu grau de discriminação e comparado seus resultados com os da "Escala de Comportamento" quando aplicados a crianças de 4, 5 e 6 anos que frequentavam e as que não frequentavam o programa CEAPE. A análise dos resultados revelou que o "Instrumento" possui bom grau de discrinação; que seus itens variaram, sistematicamente, num mesmo sentido; e que quando considerados individualmente tenderam a correlacionar-se positivamente com o total do teste. O total do "Instrumento" apresentou correlações altamente significativas com o total da "Escala". O IADPE resultou num instrumento útil de avaliação psico-pedagógica de crianças de baixo nível sócio-econômico.

"Instrumento II" adicional de avaliação do desenvolvimento de pré-escolares: seu valor na discriminação de grupos etários

O conjunto de teste do "Instrumento de Avaliação do Desenvolvimento de Pré-escolares II" (IADPE-II) visa aumentar a sensibilidade na avaliação psicométrica em crianças de 5 a 6 anos. Com o objetivo de proceder a uma análise inicial das principais características estatísticas do "Instrumento II", foi avaliado seu poder de discriminação entre as idades de 5 a 6 anos e as correlações entre ele e os instrumentos "IADPE-I" e "Escala de Comportamento" usados inicialmente neste projeto. Os dados obtidos revelam que o "IADPE-II" aumenta a sensibilidade da avaliação psicométrica de crianças de 5 a 6 anos. Encontrou-se correlação positiva e altamente significativa com os instrumentos citados. Com base nesses resultados verificou-se que o "IADPE-II" pode ser utilizado como uma avaliação complementar para avaliação psicométrica de pré-escolares de 5 a 6 anos de idade.

Efeitos do tempo de freqüência do pré-escolar do Programa Centro de Educação e Alimentação do Pré-Escolar sobre o desenpenho avaliado pelo "Instrumento II", adicional

É estudada a influência do tempo de freqüência dos pré-escolares ao programa CEAPE sobre o desempenho de algumas tarefas cognitivas, perceptivas e de linguagem quando analisadas pelo "Instrumento Adicional de Avaliação do Desenvolvimento de Pré-Escolares" (IADPE-II). Os pré-escolares de 5 a 6 anos de idade, recém ingressados ("R") e com mais de seis meses de freqüência ("A") foram testados e retestados após um intervalo de 6 meses letivos. Os resultados obtidos com os testes iniciais discriminaram significantemente estes dois grupos de pré-escolares. O estudo dos incrementos obtidos quando avaliados pelo "Reteste" indicou que todos os grupos de estudo apresentaram incrementos significantes, embora os grupos recém ingressados "R" tenderam a obter maiores progressos que os respectivos grupos iniciais antigos "A". Os incrementos nos resultados obtidos pelo pré-escolar são maiores nos 6-7 meses letivos iniciais, o que poderá sugerir a necessidade da reestruturação das atividades de Recreação orientada em termos de ordenação crescente de aquisição mais complexa.

Avaliação do estado nutricional de crianças menores de cinco anos do Estado de Rondônia - Brasil

Com o objetivo de se conhecer a prevalência e as formas de desnutrição protéico-calórica entre os pré-escolares dos municípios da área de atuação do programa Polonoroeste no Estado de Rondônia, Brasil, procedeu-se a uma avaliação antropométrica entre os menores de cinco anos presentes no momento da entrevista em domicílios sorteados. Foram estudadas 1.274 crianças, sendo a amostra representativa das zonas urbanas dos municípios de Ariquemes e Ji-Paraná e da área rural de Ouro Preto D'Oeste. Através da classificação de Gomez, encontrou-se cerca de 31,9% com desnutrição leve e 4,8% nas formas moderada e grave. A classificação de Waterlow revelou que 6,0% apresentava desnutrição aguda e 0,2% desnutrição crônica.

Plano amostral para avaliação da cobertura vacinal

Descreve-se o planejamento de amostragem empregada no levantamento realizado para a avaliação de cobertura vacinal, no município de Araraquara, Estado de São Paulo (Brasil), 1983. Houve uma estratificação das crianças de 12 a 23 meses, resultando o estrato de crianças residentes em domicílios particulares e aquele composto pelas crianças de asilos e orfanatos. No primeiro estrato foi aplicado o método de R.H. Henderson e T. Sundaresan proposto pela Organização Mundial de Saúde (OMS) no Programa Ampliado de Imunização - PAI. O método prevê sorteio de 30 áreas parciais com probabilidade proporcional às suas populações e em cada área selecionada, há o sorteio de um "ponto de partida" que serve de referência para a tomada de 7 crianças, seguindo normas pré-fixadas de percurso. Na amostra do estrato 1 figuraram áreas da zona urbana e rural. Na aplicação do método à zona urbana, foi introduzida uma operação intermediária que consistiu no sorteio de um quarteirão, com probabilidade proporcional à sua população estimada. Do segundo estrato seria selecionada uma amostra com fração de amostragem igual à adotada no primeiro. Propõe-se a estimativa-razão como estimador da taxa de vacinação e apresenta-se a fórmula que estima o erro padrão deste estimador.

'Se as minhas costas falassem...' - avaliação da efectividade dois anos depois

Enquadramento – A prevenção das raquialgias nas crianças e adolescentes é uma área em desenvolvimento onde a evidência é ainda limitada. A viabilidade e o desenvolvimento de programas de promoção da saúde devem ser suportados na evidência da sua eficácia. Objectivo – Avaliar o efeito do programa “Se as minhas costas falassem…” dois anos após a sua implementação. Materiais e Métodos – Estudo longitudinal com análise comparativa das avaliações e registos efectuados. Amostra: toda a população estudantil do 7º ano de escolaridade do Concelho de Caldas da Rainha (N=584), que corresponderia aos alunos que estavam no 5º ano de escolaridade no ano lectivo 2006/07. Resultados – Não foram registadas perdas significativas na dimensão dos conhecimentos. Cerca de 40% dos alunos queixam-se de dores nas costas e, desses, 63,9% atribuíram como principal causa “O peso da mochila”. Registou-se uma redução dos alunos que transportavam mochilas pesadas e verificou-se um aumento da percentagem de alunos que transportavam mochilas mais ajustadas ao tronco. Discussão e Conclusões – Os resultados obtidos confirmam outros estudos que avaliaram a eficácia do programa “Se as minhas costas falassem…” A manutenção das mudanças comportamentais dois anos após a realização do programa confirma a capacidade dos alunos para adoptarem comportamentos protectores de saúde e consolidam a efectividade daquele programa de promoção da saúde. Recomenda-se que os estabelecimentos de ensino ofereçam as condições mínimas para os alunos poderem aplicar de forma efectiva as competências adquiridas nestes programas de promoção da saúde que exigem mudanças comportamentais. A evidência da sua efectividade, apresentada em estudos sucessivos, deve suportar os decisores políticos para incluírem nas suas medidas e programas de saúde a saúde das costas.

Avaliação das condições de trabalho dos servidores braçais de instituição pública

Descrevem-se as condições de trabalho dos servidores braçais da Prefeitura Municipal de Botucatu (PMB), Brasil, procurando identificar as condições mais freqüentes e mais graves de riscos ocupacionais. Foi analisada a morbidade registrada no ambulatório dos servidores municipais, no período de 17 de julho a 4 de dezembro de 1987; foram analisados os acidentes de trabalho sofridos e registrados pelos servidores municipais nos anos de 1984, 1985,1986 e 1987. A descrição dos setores braçais revelou que as tarefas executadas na PMB são, majoritariamente, executadas manualmente, sem tecnologia, evidenciando condições potenciais para gerar "acidentes de trabalho" e "posições antiergonômicas" como as condições de risco mais freqüentes. Os coeficientes de gravidade desses mesmos acidentes elevaram-se desde 1984, sendo o de 1987, 1,85 vezes maior que o de 1984. A análise da causa externa e natureza da lesão decorrentes dos ATs validam a descrição do processo de trabalho e das condições de risco ocupacionais observadas. Os agravos mais freqüentes registrados no ambulatório foram: hipertensão arterial, outras circunstâncias familiares não especificadas ("problemas pessoais"), lombalgia, gripe, alcoolismo crônico e gastroenterocolite aguda, sendo que todas essas doenças (exceto "problemas pessoais") foram mais freqüentes nos servidores braçais do que nos administrativos. Propõe-se a implantação de um programa de saúde ocupacional voltado aos servidores municipais da PMB.

Avaliação da ingestão dietética de cálcio em indivíduos adultos portadores de hipertensão arterial idiopática

Foi estudada a relação entre a ingestão dietética de cálcio e os demais parâmetros alimentares e antropométricos em 60 indivíduos adultos, portadores de hipertensão arterial idiopática (10 homens e 50 mulheres), com média etária de 48,6 anos, seguidos no Centro de Hipertensão Arterial do Hospital das Clínicas da Faculdade de Medicina de Botucatu (SP), Brasil. Foram utilizados três métodos diferentes de inquérito aumentar em três diferentes ocasiões: recordatório de 24h, questionário de freqüência alimentar, dirigido para ingestão de cálcio, e registro alimentar de 3 dias. As médias de ingestão de cálcio, extraídas desses inquéritos, foram semelhantes, mostrando que, em relação á ingestão de cálcio, esses métodos de inquérito alimentar podem ser utilizados indistintamente com o objetivo de se mensurar à ingestão de cálcio de um grupo de indivíduos. Além da ingestão de cálcio, foi avaliada a ingestão protéico-calórica e de diversos outros nutrientes, assim como realizada a antropometria desse grupo de hipertensos em três ocasiões diferentes, com intervalos variando de duas semanas a 15 meses. Quando comparado a um grupo de referência local, constituído de indivíduos sadios, com média etária semelhante, o grupo de hipertensos mostrou ter menor ingestão média de cálcio. Comparados por sexo, os homens dos dois grupos exibiram perfis nutricional e antropométrico semelhantes. Em relação às mulheres, houve diferenças quanto à ingestão protéico-calórica, o que se supõe ser devido à ingestão menor do leite e derivados entre as hipertensas. Estas estavam mais pesadas que as mulheres do grupo de referências, à custa de maior massa muscular, provavelmente devido a maior atividade física. Concluiu-se que o cálcio dietético foi o principal item alimentar que distinguiu hipertensos de normotensos. Como existem estudos clínicos comprovando o efeito benéfico da suplementação de cálcio na redução dos níveis pressóricos de indivíduos hipertensos, sugere-se a repetição deste tipo de trabalho, em outros locais, visando ao embasamento de programa nacional de suplementação de cálcio dietético entre indivíduos hipertensos idiopáticos.