A avaliação de programas de capacitação: um estudo de caso na administração pública

Este artigo apresenta e discute o emprego da Metodologia Multicritério de Apoio à Decisão - Construtivista (MCDA-C) na avaliação de programas de capacitação desenvolvidos na administração pública, por meio de sua aplicação em um estudo de caso na Polícia Militar de Santa Catarina, especificamente, na avaliação do processo de capacitação dos policiais militares instrutores do Programa Educacional de Resistência às Drogas (Proerd). No que diz respeito ao enquadramento metodológico, este trabalho, quanto à natureza do objetivo, é exploratório, e pela natureza do artigo, prático. A lógica de pesquisa foi indutiva e a coleta de dados utilizou dados primários, obtidos por meio de entrevistas semiestruturadas com os gestores do programa. Já a abordagem do problema se deu de forma quali-quantitativa. Esta pesquisa é aplicada, e o principal procedimento técnico utilizado foi o estudo de caso. Como resultados, o modelo construído, com 62 critérios de avaliação, permitiu apurar que o processo de capacitação do Proerd alcançou 69 pontos na avaliação global, além de evidenciar as principais preocupações dos decisores em relação ao programa de treinamento e o quanto cada um desses fatores contribui para o sucesso da capacitação, individual e globalmente, revelando, ainda, como gerenciar as oportunidades de aperfeiçoamento criadas.

Trajetória e avaliação dos programas federais brasileiros voltados a promover a eficiência administrativa e fiscal dos municípios

O artigo apresenta a trajetória dos programas do governo federal direcionados à modernização administrativa e fiscal dos municípios brasileiros desde os anos 1930. O foco do trabalho, contudo, são os programas implantados nos governos Fernando Henrique Cardoso (1995-2002) e Lula (2003-10) voltados a incrementar as capacidades administrativas e fiscais das cidades. O argumento central é que esses programas sempre foram concebidos e executados pelas burocracias federais propondo soluções para os municípios que representam a visão "modernizadora" do governo central para os problemas de gestão dos governos locais. Essas iniciativas têm duplicado esforços e não contribuem para enfrentar as carências administrativas municipais, o que limitou seu alcance e gerou poucos resultados desde sua reinserção na agenda do governo federal a partir de 1997.

Avaliação de programas, serviços e tecnologias em saúde

A área de avaliação de programas, serviços e tecnologias em geral e na saúde, em particular, passa por um processo de expansão e diversificação conceitual e metodológica, bem como por uma crescente demanda para se constituir em instrumento de apoio às decisões necessárias à dinâmica dos sistemas e serviços de saúde, na implementação das políticas de saúde. Apoiando-se em uma revisão da literatura internacional especializada, e tomando por referência a década de 90, foram identificados os critérios nucleares que organizam os processos de avaliação, articulando-os com os recortes adotados pelas principais tipologias de avaliação, atualmente institucionalizadas nos países desenvolvidos, avaliação de programas, avaliação e garantia de qualidade em serviços e avaliação de tecnologias. A participação brasileira no desenvolvimento metodológico da área também é analisada.

Validação de proposta de avaliação de programas de controle de infecção hospitalar

OBJETIVO: Validar as propriedades de construto e discriminante de programa de prevenção e controle de infecção hospitalar. MÉTODOS: O programa consiste de quatro indicadores: estrutura técnico-operacional; diretrizes operacionais de controle e prevenção; sistema de vigilância epidemiológica; atividades de controle e prevenção. Esses indicadores, cujo conteúdo foi previamente validado, foram aplicados em 50 instituições de saúde, no município de São Paulo, SP, em 2009. Utilizou-se estatística descritiva para caracterizar os hospitais e escores dos indicadores e o coeficiente α de Cronbach para avaliar a consistência interna. A análise da validade discriminante foi realizada comparando-se escores dos indicadores entre grupos de hospitais, com versus sem certificação em qualidade. A análise da validade de construto baseou-se na análise fatorial exploratória com matriz de correlação tetracórica. RESULTADOS: Os indicadores de estrutura técnico-operacional e vigilância epidemiológica apresentaram quase 100% de conformidade em toda amostra. Os indicadores de diretrizes operacionais de controle e prevenção, bem como os de atividades de controle e prevenção apresentaram consistência interna com variação de 0,67 a 0,80. A validade discriminante desses indicadores apontou médias de escores de conformidade superiores e com significância estatística no grupo de instituições com processos de qualificação ou acreditação em saúde. Na validação de construto foram identificadas duas dimensões para diretrizes operacionais de controle e prevenção: recomendações para prevenção de infecção hospitalar e recomendações para padronização de procedimentos de profilaxia, com boa correlação das unidades de análises que o compõem. O mesmo ocorreu para atividades de controle e prevenção: identificaram-se interface com unidades de tratamento e interface com unidades de apoio. CONCLUSÕES: A validação das propriedades de medidas dos indicadores de programas de controle de infecção hospitalar permite desenvolver ferramenta de avaliação desses programas de forma ética e científica para diagnóstico de qualidade na área.

Avaliação de Programas de Controle de Infecção relacionada a Assistência à Saúde de Hospitais

RESUMO Objetivo Avaliar os Programas de Controle de Infecção em hospitais do Paraná, considerando como hipótese desempenho geral mínimo de 75%. Método Estudo transversal de avaliação processual, por meio de instrumento previamente validado, composto por quatro indicadores que avaliam a estrutura técnico-operacional (PCET), as diretrizes operacionais (PCDO), o sistema de vigilância epidemiológica (PCVE) e as atividades de controle e prevenção (PCCP). O estudo foi realizado de 2013 a 2014 em 50 hospitais por amostra de acesso. Resultados A conformidade geral obtida foi 71,0% (23,88dp), sendo indicador PCET 79,4% (18,9dp); PCVE 76,0% (30,5dp); PCDO 65,5% (26,9dp); e PCCP 63,2%/ (39,5dp). Houve significância estatística para melhor desempenho dos PCIRAS a realização de auditorias internas (p=0,0099), certificação de qualidade (p=0,01949), enfermeiro exclusivo (p<0,0001), profissionais médicos contratados ou concursados (p=0,0005), maior carga horária de dedicação exclusiva dos médicos, 4 horas (p=0,001), maior tempo de experiência de médicos (p=0,0028) e enfermeiros (p=0,0094). Conclusão A conformidade geral desses programas não alcançou a hipótese inicialmente formulada, devido aos indicadores PCDO e PCCP. Desse modo, é possível considerar que os programas apresentavam adequação mínima para sua operacionalização e para realizar a vigilância epidemiológica de IRAS, mas estavam prejudicados quanto à insuficiência quantitativa e qualitativa de diretrizes operacionais (PCDO) e de ações para o controle e prevenção dessas infecções (PCCP).

Avaliação de programas hormonais para a indução e sincronização do estro em caprinos

O objetivo deste trabalho foi estabelecer alternativas para indução e sincronização do estro em cabras leiteiras manejadas semi-intensivamente. Foram conduzidos quatro experimentos com 411 cabras na Embrapa-Centro Nacional de Pesquisa deCaprinos, Sobral, CE. No protocolo básico, utilizaram-se esponjas intra-vaginais com 50 mg de acetato de medroxiprogesterona (MAP) por dez dias e aplicação intra-muscular de 100 mig de cloprostenol e 200 UI de gonadotropina coriônica eqüina (eCG) no 8º dia; a inseminação artificial (IA), com sêmen congelado foi feita 38 horas após remoção da esponja. No experimento1 substituiu-se a e CG pelo "efeito macho"; no experimento 2 substituiu-se a dose de MAP para 60 mg; no experimento3 compararam-se diferentes momentos de IA: 38, 44 e 50 horas e no experimento 4 substituiu-se a eCG pela gonadotropina humana (hCG). Nenhuma das alternativas testadas modificou (P>0,05) a prolificidade. A IA em cio natural gerou maior (P<0,05) índice de parição no experimento2(67,7%) e no experimento 4 (73,3%). A dose de 60 mg de MAP permitiu realizar a IA mais tarde (44 horas apósretirar a esponja) sem detrimento da fertilidade. A hCG equivaleu a eCG, se aplicada 48 horas antes de retirar a esponja.

Avaliação dos programas de pós-graduação em química no Brasil

A broad picture of the graduate programs in chemistry in Brazil is analyzed from the data collected during the period 1996/1997 for evaluation by CAPES. The results are compared with those from previous evaluations, indicating significant quantitative and qualitative progresses.

Avaliação dos programas de pós-graduação em química no Brasil: versão 2002

The graduate programs in Chemistry were evaluated and classified from the data collected for the period 1998-2000 by CAPES, the Minister of Education agency that is responsible for the regulation and support of this level of human resources formation. The next classification will be made in 2004, from the data of the period 2001-2003. The years in between, like the present year, are used for an evaluation without classification, from what comments are emitted to the programs to know how their data are improving or not, before the new ranking reporting. The progresses in the area of chemistry in Brazil are analysed from the confrontation of the present data with that of all previous evaluations, since 1983. The results confirm that the research and graduate formation in the area of Chemistry is continuously improving in Brazil, particularly during the last seven years.

Programas de marketing social: proposição e exame de uma estrutura conceitual de avaliação de resultados

A área de marketing tem sido cada vez mais demandada a prestar contas de suas ações, na forma de avaliação dos investimentos realizados. No marketing social não é diferente. O presente estudo examinou propostas de avaliação de programas de marketing social, em busca do que seria uma estrutura conceitual ideal para esse tipo de avaliação, a partir da literatura, prática de mercado, opinião de experts e exame empírico da proposta em dois diferentes estudos de caso, o programa Novo Sinal, da Prefeitura Municipal de Porto Alegre e os programas de imunização do Centro Estadual de Vigilância em Saúde do Governo do Rio Grande do Sul. A metodologia, qualitativa em sua essência, fez uso da técnica Delphi, entrevistas em profundidade e estudo de casos. A estrutura conceitual desenvolvida engloba as dimensões de avaliação de Input, Processo e Resultados, com respectivas variáveis e indicadores para cada dimensão, e ao longo de cujas dimensões a avaliação ética se faz presente, mas ainda de difícil avaliação na prática cotidiana dos profissionais de marketing social.

Proposta de um modelo de gestão de programas de pós-graduação na área de Administração a partir dos sistemas de avaliação do Brasil (CAPES) e dos Estados Unidos (AACSB)

O sistema brasileiro de avaliação de programas de pós-graduação vem evoluindo desde 1976, sendo considerado eficiente e moderno. No presente trabalho, o objetivo é propor um modelo de gestão de programas de pós-graduação stricto sensu em Administração do Brasil, com base nos sistemas de avaliação do Brasil e dos Estados Unidos. Para tanto, procedeu-se a uma pesquisa em oito programas: quatro no Brasil, recomendados pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) e quatro nos Estados Unidos, credenciados pela Association to Advance Collegiate School of Business (AACSB). O método de pesquisa foi o estudo de casos múltiplos de caráter exploratório com dois componentes básicos: pesquisa documental, por meio de um estudo em profundidade dos sistemas de avaliação; pesquisa de campo com os coordenadores de programas para identificar como os sistemas de avaliação são utilizados para desenvolver os programas. A partir desses estudos, foi proposto um modelo de gestão em que, além de atender aos requisitos do sistema de avaliação da CAPES, seja levada em consideração a realidade do programa e os elementos importantes para seu contínuo aprimoramento, dentre eles: missão e visão; plano estratégico; corpo docente; estrutura do programa; corpo discente; resultados que abrangem produção científico-tecnológica, egresso e inserção social.

O problema da avaliação em Saúde Pública

Após discussão do conceito de avaliação, a partir das clássicas idéias de controle administrativo, foram indicados alguns dos critérios mais freqüentemente utilizados na avaliação dos programas de saúde. Chama-se a atenção, todavia, para os riscos inerentes a tais critérios, derivados do fato de que a problemática de saúde - como reflexo das condições gerais de vida - é fortemente afetada por fatores impermeáveis às ações específicas do setor. Daí a necessidade do emprego de critérios mais simples, que permitam estabelecer uma relação de causa e efeito entre as ações desenvolvidas e os resultados alcançados.

Abordagem antropológica para avaliação de políticas sociais

Apresenta-se uma abordgem antropológica relativa à avaliação de programas de saúde. Destaca-se o papel da antropologia, que sai de seu âmbito tradicional de pesquisa básica, para compor, de forma interdisciplinar com a medicina social um enfoque particular de avaliação de políticas públicas e, mais estritamente, de serviços de saúde. Coloca-se a antropologia dentro de um processo social mais abrangente, ao qual serve com seus instrumentos peculiares de apreensão da realidade. Baseando-se em pesquisa empírica de avaliação da assistência primária à saúde, numa favela do Rio de Janeiro, mostra que a abordagem qualitativa na avaliação de programas de saúde pode ser uma contribuição importante que ajuda a superar as tendências positivistas do processo avaliativo e a aprofundar visão mais totalizante do fenômeno saúde-doença.

Avaliação da prática de vigilância epidemiológica nos serviços públicos de saúde no Brasil

São apresentados os resultados da avaliação de processo das atividades de vigilância epidemiológica, realizada em 1985, em 948 unidades de saúde situadas em 98 dos mais populosos municípios de cada Estado brasileiro. Foram analisados os seguintes aspectos: fluxo de informações, análise de dados e realização de investigação epidemiológica. Foram considerados potencialmente determinantes do desempenho: inserção institucional, atividades de vacinação, aspectos gerenciais e capacitação em serviço. A análise estatística baseou-se na análise de correspondência múltipla e na classificação hierárquica ascendente, disponíveis no programa "Systeme Portable Pur L' Analise De Données -SPAD". As unidades avaliadas não apresentaram padrão uniforme de desempenho, sendo classificadas em seis grupos segundo a atuação na vigilância epidemiológica. Em 53,7% das unidades foi observado desrespeito às normas mais elementares das atividades de vigilância epidemiológica. A presença de atividades de vacinação nas unidades estava relacionada com um melhor desempenho em vigilância epidemiológica. Foi apontada a necessidade de rever o modelo de vigilância epidemiológica ainda em uso no país, pois não é mais concebível a redução da epidemiologia dos serviços de saúde às doenças transmissíveis ou o gerenciamento dos serviços e programas sem a informação epidemiológica.

Avaliação do processo de atendimento a pacientes portadores de doença crônico-degenerativa em uma unidade básica de saúde

Avalia-se o desempenho de ações de saúde desenvolvidas em uma unidade básica de saúde, relativas ao controle da hipertensão arterial sistêmica (HAS) enquanto estratégia de redução de morbi-mortalidadc por doença cardiovascular baseada no "enfoque de risco". Estas ações estruturam-se a partir da detecção da hipertensão arterial na população adulta atendida no serviço e do controle dos níveis pressóricos nos indivíduos portadores de HAS, incluindo outros fatores de risco conhecidos, bem como tratamento de eventuais complicações. Analisaram-se 3.793 usuários que compareceram pelo menos uma vez à consulta médica no serviço de Assistência ao Adulto de um Centro de Saúde-Escola, do Município de São Paulo (Brasil), no período de 1º de junho de 1990 a 31 de maio de 1991. Para cada um dos usuários foram considerados os diagnósticos realizados, bem como a concentração de cada modalidade de consulta realizada (pronto-atendimento e consulta agendada). Destes, 839 eram portadores de hipertensão arterial e/ou diabete e foram agrupados em quatro categorias: os exclusivamente hipertensos, os hipertensos com outra doença crônica associada (exceto diabete), os diabéticos e os diabéticos com hipertensão arterial. Os resultados deste estudo mostraram: 1) baixa cobertura de indivíduos hipertensos e diabéticos em atendimento no serviço, quando se considera a população atendida pelo Centro de Saúde; 2) a existência de pacientes diagnosticados como hipertensos em consultas de pronto-atendimento, que não retornaram ao Centro de Saúde para seguimento médico programático, apontando para dificuldades na captação efetiva destes indivíduos. Esta "perda" deveu-se tanto a faltas dos pacientes às consultas agendadas para seu seguimento quanto ao não agendamento de consultas de seguimento por parte do serviço; 3) para os pacientes que aderiram ao seguimento, a concentração de consultas médicas e a concentração de faltas apresentaram números compatíveis com a proposta de agendamento trimestral; 4) a categoria dos exclusivamente hipertensos apresentou, quando comparada com as demais, menor concentração de consultas e maior proporção de faltas por consulta agendada. Discutem-se os limites das ações baseadas no "enfoque de risco" para controle de doenças crónico-degenerativas em população.

Avaliação de estratégias de gestão de ciência e tecnologia: um estudo de caso

A partir de implementação de um modelo de gestão de ciência e tecnologia em institutos de pesquisa do Estado de São Paulo, Brasil, foi estudada a capacidade desse sistema para geração de informações gerenciais e avaliado o incentivo à produção científica e tecnológica, através do qual vem-se atribuindo bolsas a pesquisadores cujos projetos são selecionados através de uma revisão por pares. Para avaliar a correção do processo de seleção de bolsistas, a produção científica média registrada em bases de dados de literatura nos últimos 5 anos, desses bolsistas, foi comparada por meio de análise de variança à produção média de igual número de controles não-bolsistas, pareados por instituto de origem. Foi estudada a capacidade do sistema de gerência em produzir informações por meio da aplicação de análise por aglomeração. Os resultados mostraram que os bolsistas são pesquisadores que registram produção científica significativamente superior aos não-bolsistas, permitindo inferir que a seleção de bolsistas esteja se processando adequadamente. Quanto ao potencial do sistema de gerência para produzir informações, os resultados sugeriram que o processo de produção de pesquisa pode ser caracterizado com detalhes relevantes para a tomada de decisões administrativas e de planejamento e que os institutos podem ser reunidos em grupos que comportam estratégias distintas de intervenção.