A meta-avaliação como instrumento para a qualificação da avaliação de políticas públicas de saúde

Trata-se da meta-avaliação de um processo avaliativo desenvolvido por secretários e assessores técnicos municipais de uma região de saúde do estado de São Paulo, com foco nos critérios de utilidade e participação. É uma pesquisa qualitativa, cuja base empírica foi 1) o material produzido em sete oficinas realizadas com os representantes municipais, com vistas à avaliação de um aspecto da linha de cuidados em saúde sob a ótica da integralidade; e 2) as entrevistas semiestruturadas realizadas com os mesmos atores após a finalização do processo avaliativo. Para a avaliação do critério de utilidade, utilizou-se principalmente o referencial de KIRKHART (2000), com o objetivo de ampliar a análise para além do uso instrumental dos achados avaliativos e focá-la na identificação de influências múltiplas exercidas por um fenômeno complexo como um processo avaliativo. A análise do critério participação se deu com base no referencial de COUSINS e WHITMORE (1998), buscando a identificação no material empírico de decisões ou aspectos contextuais que fizeram com que a opção participativa fosse aprofundada ou limitada no processo em foco. O trabalho destaca a importância de explicitar pressupostos que baseiam a metodologia da avaliação/ meta-avaliação escolhida, e a necessidade de se buscar referenciais teóricos de análise compatíveis com a opção realizada, frisando a inexistência de posturas neutras ou estudos totalmente objetivos; e a importância de capacitar avaliadores a acompanharem a demanda dos participantes de um processo participativo com a flexibilidade necessária para conferir-lhe o maior aproveitamento possível. Conclui-se pela viabilidade, com vantagens, da realização de processos participativos locais com gestores na Saúde Pública, destacando a possibilidade de ganhos em formação e o enriquecimento dos processos de negociação em nível do território, de forma coerente à política de construção das regiões de saúde no SUS.

Método de Rorscharch em adultos: evidências psicométricas da Escola Francesa

O Método de Rorschach é internacionalmente utilizado e reconhecido como instrumento de avaliação psicológica em processos de investigação da personalidade. Para embasar seu adequado uso no contexto do Brasil, contínuos estudos sobre suas evidências psicométricas fazem-se necessários, sobretudo sobre seus indicadores de validade, precisão e referenciais normativos. Nesse contexto, este trabalho objetivou: a) verificar indicadores de precisão e validade do Rorschach (Escola Francesa ou de Paris), por meio da reavaliação de adultos não pacientes do estudo normativo de Pasian (1998), para checagem da estabilidade temporal (estrutural e funcional) das características de personalidade examinadas pelo método (ESTUDO 1); b) revisar e atualizar padrões normativos e atlas da Escola Francesa do Rorschach em adultos, avaliando-se eventuais especificidades de produção associadas ao sexo, à idade e à escolaridade (ESTUDO 2). No primeiro estudo foram reavaliados 88 adultos do estudo de Pasian (1998), com idade entre 34 a 69 anos, de ambos os sexos e de diferentes níveis de escolaridade (baixa, média e alta). No segundo estudo compôs-se nova amostra com 102 adultos, entre 18 e 65 anos, com sinais de desenvolvimento típico, distribuídos equitativamente em relação ao sexo e com diferentes graus de escolaridade (baixa, média e alta). Para elaboração dos dados normativos foram incluídos 66 adultos do Estudo 1, totalizando 168 casos nessa nova amostra (86 mulheres e 82 homens). Os participantes residiam no interior do Estado de São Paulo e foram avaliados, individualmente, por: a) instrumento de rastreamento de saúde mental (SRQ-20) - no estudo 1, utilizado para caracterização da amostra e no estudo 2 como critério de seleção dos participantes; b) instrumento de avaliação intelectual (Teste de Inteligência Não Verbal - INV, forma C - apenas no Estudo 2) para controle cognitivo da amostra; c) critério de classificação econômica Brasil (ABEP) e d) Método de Rorschach (Escola de Paris). Cada instrumento de avaliação psicológica foi aplicado, codificado e sistematizado conforme seus respectivos manuais técnicos. Especificamente o Método de Rorschach foi avaliado pelas diretrizes da Escola Francesa, sendo cada protocolo (de cada um dos dois estudos) examinado independentemente por dois avaliadores, chegando-se a uma classificação final dos casos. Calculou-se o índice de concordância entre examinadores pelo coeficiente Kappa para as quatro categorias de classificação das respostas do Rorschach (localização, determinante/qualidade formal, conteúdo e banalidades). Os resultados foram sistematizados inicialmente em termos descritivos (média, desvio-padrão, mediana, valor mínimo e máximo), realizando-se análises inferenciais específicas para as amostras de cada estudo em função de seus objetivos centrais. No Estudo 1, os achados relativos aos índices de correlação entre as duas avaliações dos 88 voluntários variaram entre 0,72 a -0,005, evidenciando estabilidade em um conjunto das características de personalidade dos adultos examinados após 15 anos, configurando evidências empíricas de precisão e de validade de método projetivo. Houve variáveis do Rorschach que não apresentaram resultados estáveis entre os dois momentos avaliativos (fórmulas vivenciais), sugerindo se tratarem de indicadores técnicos relativos ao funcionamento da personalidade, mais do que componentes estruturais. As análises do Estudo 2 apontaram reduzida influência dos fatores relacionados ao sexo, à escolaridade e à idade sobre as variáveis do Rorschach, não indicando a necessidade de normas específicas para grupos em termos desses fatores. Por fim, foi elaborado novo atlas de referência do Método de Rorschach (Escola de Paris) no contexto brasileiro, seguindo-se as diretrizes técnicocientíficas nacionais e internacionais da área. Os dados fortalecem a relevância dos estudos de natureza psicométrica para embasar adequadas análises interpretativas desse instrumento de avaliação psicológica (FAPESP e CAPES/PDSE).

Koala: sistema para integração de métodos de predição e análise de estruturas de proteína

A Biologia Computacional tem desenvolvido algoritmos aplicados a problemas relevantes da Biologia. Um desses problemas é a Protein Structure Prediction (PSP). Vários métodos têm sido desenvolvidos na literatura para lidar com esse problema. Porém a reprodução de resultados e a comparação dos mesmos não têm sido uma tarefa fácil. Nesse sentido, o Critical Assessment of protein Structure Prediction (CASP), busca entre seus objetivos, realizar tais comparações. Além disso, os sistemas desenvolvidos para esse problema em geral não possuem interface amigável, não favorecendo o uso por não especialistas da computação. Buscando reduzir essas dificuldades, este trabalho propões o Koala, um sistema baseado em uma plataforma web, que integra vários métodos de predição e análises de estruturas de proteínas, possibilitando a execução de experimentos complexos com o uso de fluxos de trabalhos. Os métodos de predição disponíveis podem ser integrados para a realização de análises dos resultados, usando as métricas RMSD, GDT-TS ou TM-Score. Além disso, o método Sort by front dominance (baseado no critério de optimalidade de Pareto), proposto nesse trabalho, consegue avaliar predições sem uma estrutura de referência. Os resultados obtidos, usando proteínas alvo de artigos recentes e do CASP11, indicam que o Koala tem capacidade de realizar um conjunto relativamente grande de experimentos estruturados, beneficiando a determinação de melhores estruturas de proteínas, bem como o desenvolvimento de novas abordagens para predição e análise por meio de fluxos de trabalho.