Avaliando competência clínica: o método de avaliação estruturada observacional

Apesar dos avanços tecnológicos, a história médica, o exame físico e a relação médico-paciente continuam as mais importantes ferramentas diagnósticas e terapêuticas. No entanto, deficiências em habilidades clínicas entre alunos têm sido relatadas. Competência clínica deve ser considerada não apenas a demonstração de comportamentos isolados, mas, sim, a habilidade integrada de pensar, sentir e agir na prática real, um determinado contexto. Por isso, ferramentas de observação direta são bastante úteis para avaliar o que os estudantes fazem ou deixam de fazer durante as consultas. O instrumento de avaliação estruturada parece ser adequado tanto para os avaliadores quanto para os avaliados, uma vez que pode ser usado como um guia de observação e também como uma ferramenta de feedback, ampliando as oportunidades de aprendizagem no cenário clínico. Para que esse instrumento seja aplicado de forma eficaz, justa e confiável, os avaliadores precisam ser adequadamente preparados.

Percepção e avaliação dos alunos do curso de medicina de uma escola médica pública sobre a importância do estágio em saúde da família na sua formação

Na Faculdade de Medicina de Ribeirão Preto da Universidade de São Paulo (FMRP-USP), o ensino da Atenção Primária (AP) com enfoque em medicina de família no primeiro ano de internato se iniciou em 1997. A estratégia de ensino consiste em inserir o aluno em equipes de saúde da família para vivenciar as práticas na realidade do Sistema Único de Saúde. As práticas programadas foram consulta médica individual, seguimento de famílias, visitas domiciliares, atividades de grupos e discussões de casos individuais e de famílias. Foram enfatizadas a prevenção de doenças e a promoção da saúde, bem como a vivência com o usuário, buscando-se a assistência integral. O objetivo deste trabalho foi estudar a contribuição do estágio no Programa de Saúde da Família (PSF) para a formação dos alunos do quinto ano do curso de Medicina da Faculdade de Medicina de Ribeirão Preto da Universidade de São Paulo (FMRP-USP), em AP, tendo 103 alunos respondido a um questionário estruturado aplicado antes e depois do estágio. Segundo o aluno, o estágio contribuiu de forma positiva para a sua formação, principalmente nos aspectos de integração com a equipe de saúde, humanização e visão dos principais princípios da saúde da família e da AP, tais como trabalho em equipe, longitudinalidade, acessibilidade e atuação na prevenção. Após o estágio, o aluno passou a dar mais importância aos aspectos sociais e econômicos do paciente e a avaliá-lo como um ser biopsicossocial.

Avaliação de prescrições medicamentosas de um hospital universitário brasileiro

A prescrição é o ponto de partida para a utilização de medicamentos. O objetivo deste trabalho foi identificar a qualidade das informações presentes nas prescrições das enfermarias de um hospital universitário brasileiro. Foram coletadas 1.785 prescrições medicamentosas de pacientes maiores de 12 anos, de ambos os sexos, internados em enfermaria de 1º de janeiro a 30 de abril de 2004. A amostragem foi feita coletando-se todas as prescrições emitidas em um dia de cada semana durante o período de estudo, observando-se o intervalo de seis dias entre cada coleta. Foram avaliados dados relativos à identificação do paciente, do medicamento e do prescritor. Em 230 (12,9%) prescrições não havia a idade do paciente. Em 224 (12%) prescrições não constava à assinatura do prescritor. Em 16% dos medicamentos prescritos foi detectada afalta de pelo menos uma informação relativa à posologia (dose, forma farmacêutica, via e/ou intervalo entre doses). Afalta destas informações é um obstáculo ao uso seguro de medicamentos, podendo levar ao uso inadequado e a reações adversas. Sugerimos intervenções educativas junto aos profissionais que lidam com o medicamento (desde a prescrição até sua utilização) e a implantação de monitoramento farmacoterapêutico dos pacientes. A participação mais ativa do farmacêutico na equipe de saúde também pode proporcionar tratamentos mais efetivos, seguros e convenientes aos pacientes hospitalizados. A assistência farmacêutica e a utilização de medicamentos em hospitais brasileiros precisam ser mais estudadas.

Teste de progresso e avaliação do curso: dez anos de experiência da medicina da Universidade Estadual de Londrina

O teste de progresso (TPMed) é uma avaliação cognitiva longitudinal com conteúdo final do curso, que tem por finalidade avaliar a instituição e o desempenho cognitivo dos estudantes. Atualmente, tem sido aplicado em diversas escolas médicas no mundo e no Brasil. A Universidade Estadual de Londrina (UEL) implantou esse teste em 1998. Este trabalho apresenta a experiência da UEL na implementação do TPMed como um instrumento de avaliação do curso e alguns resultados desse período: houve aumento na participação dos estudantes para realizar o teste; o desempenho cognitivo dos estudantes apresentou aumento de uma série para outra em cada teste; a média de acertos nas áreas de Clínica Médica foi menor na quinta série, no oitavo e nono TPMed; na Saúde Coletiva, houve alto percentual de acerto nas duas primeiras séries. Tais resultados refletem a estrutura curricular, bem como as potencialidades e fragilidades do curso. O teste de progresso é um bom indicador do processo de auto-avaliação do curso, mas ainda necessita de aprofundamento nos estudos de técnicas de análise dos resultados, para permitir estimar o crescimento cognitivo dos estudantes.

Avaliação da progressão cognitiva no internato de clínica médica

Este artigo investiga o crescimento cognitivo de estudantes de Medicina durante o internato de Clínica Médica do Centro Universitário Serra dos Órgãos, de janeiro de 1999 a dezembro de 2004. Foram analisados os resultados das avaliações teóricas realizadas no primeiro e no último dia do internato - cujos conteúdos exigidos eram os mesmos - de 606 estudantes do décimo primeiro e do décimo segundo períodos. Os resultados mostram melhor desempenho na segunda avaliação (média = 6,7) em relação à primeira (média = 4,1), o que aponta um "ganho" cognitivo no período de três meses. Discute-se se tais resultados podem ser comparados a outras avaliações com objetivos semelhantes.

Construção de um instrumento para avaliação de satisfação da atenção básica nos centros municipais de saúde do Rio de Janeiro

OBJETIVO: construir um questionário para avaliar a satisfação dos usuários de uma unidade básica do Rio de Janeiro. MÉTODOS: uma equipe de saúde de atenção primária elaborou 96 questões sobre acesso, pré-consulta, consulta, pós-consulta e outros. A equipe discutiu as questões com pacientes de outras unidades, não usuários dos centros municipais de Saúde (CMS), profissionais de áreas administrativas e especialistas, o que resultou em 43 questões, sendo uma sobre satisfação geral com a unidade e 42 específicas para cada tema do questionário. As questões foram aplicadas em cem pacientes de outra instituição e retestadas após uma semana em 47 deles. RESULTADO: os coeficientes de confiabilidade alfa de Cronbach e KR-20 foram considerados adequados para a maioria das questões. CONCLUSÃO: um questionário específico para análise da satisfação de usuários de atenção básica foi desenvolvido e validado e pode ser aplicado em outros CMS do município do Rio de Janeiro.

Avaliação da efetividade dos cursos preparatórios para residência médica

No Brasil, há um déficit de vagas para Residência Médica (RM) e maior concorrência em determinadas especialidades ou regiões, propiciando o crescimento dos Cursos Preparatórios (CPs) para provas de RM. Os acadêmicos, cada vez mais, deixam atividades curriculares em segundo plano e se matriculam nesses cursinhos. Mediante um questionário dirigido aos candidatos do concurso de RM do Hospital Universitário da Universidade Federal de Juiz de Fora (HU-UFJF), realizou-se um estudo para avaliar a efetividade da preparação de alunos em CPs. A adesão foi de 74,7% dos 368 concorrentes, sendo que a maioria freqüentou CPs (72%). Não houve diferença significativa de aprovação entre os candidatos que se prepararam em CPs e os que não os freqüentaram. Já a média das notas dos candidatos que freqüentaram CPs foi 4,07 pontos maior (66,89 contra 62,82, p < 0,05). Conclui-se que, no modelo tradicional de avaliação, cuja prova teórica corresponde a 90% da nota final, a preparação dos alunos que freqüentaram CPs é mais eficaz, o que enaltece a memorização em detrimento de habilidades médicas. Nesse contexto, pode-se considerar o modelo 50/50, em que a prova prática corresponde a 50% da nota final, uma proposta adequada.

Conceito global: um método de avaliação de competência clínica

Muito se tem feito para desenvolver métodos que avaliem de forma confiável a proficiência em habilidade clínica dos alunos de graduação médica. Há fortes evidências de que a avaliação global pode ser uma alternativa viável e confiável na avaliação de estudantes de graduação no ambiente clínico. Rotineiramente, a competência clínica tem sido avaliada pelos docentes por meio de um conceito subjetivo. Essa nota, dada por um especialista, não é objetiva e está sujeita a vieses. O uso de um instrumento bem delineado, com diversos itens pontuados numa escala, oferece a vantagem de especificar o que deve ser avaliado, auxiliando os avaliadores a distinguir os diferentes níveis do desempenho. Usando este método, os docentes podem expressar sua percepção global dos alunos, de forma mais objetiva, em relação a duas esferas distintas da competência: técnica (contendo itens como história clínica, exame físico, conhecimento médico, julgamento clínico, solução de problemas e hábitos no trabalho) e humanista (incluindo comunicação com pacientes e familiares, respeito, habilidades reflexivas, sensibilidade ao contexto e trabalho em equipe).

Avaliação de competência clínica em estudantes de medicina pelo Miniexercício Clínico Avaliativo (Miniex)

A avaliação de competências clínicas constitui etapa essencial na formação do estudante de Medicina e deve ser feita pela observação direta do desempenho em situação real. Este trabalho objetiva determinar a confiabilidade e a consistência interna do Miniexercício Clínico Avaliativo (Miniex), instrumento de avaliação de competências clínicas que consiste na observação feita pelo professor em uma consulta focada, realizada pelo interno, no ambiente de trabalho. Ao final da consulta, o docente conversa com o estudante sobre suas falhas e acertos, configurando a avaliação formativa. Foram produzidos 12 vídeos que mostram o desempenho de estudantes em atendimento a pacientes na Enfermaria de Pediatria do Hospital das Clínicas da UFMG. Vinte quatro professores do Departamento de Pediatria com média de 25 anos de docência assistiram individualmente aos filmes, pontuando os itens da competência pelo Miniex. O Coeficiente de Correlação Intraclasse foi de 0,71 com IC de 95%, e o Coeficiente Alfa de Cronbach, 0,84, indicando boa confiabilidade e consistência interna do Miniex. O escore de satisfação com o instrumento foi de 7,5 para os docentes e 8,3 para os internos numa escala de 9 pontos. Os achados recomendam prosseguir os estudos para avaliar os critérios de validade e exequibilidade do Miniex.

Avaliação da qualidade do sono em estudantes de Medicina

Os estudantes de Medicina compõem um grupo susceptível aos transtornos do sono, em razão da carga curricular em horário integral, das atividades extracurriculares e da forte pressão e estresse, com exigência de alto rendimento e tempo demandado em estudos. O objetivo deste trabalho foi avaliar os hábitos do sono dos estudantes da graduação e residentes da Faculdade de Medicina da Universidade Federal de Goiás, a fim de identificar os principais fatores que afetam a qualidade do sono. Foram analisados 276 estudantes, sendo 234 (84,7%) acadêmicos e 42 (18,2%) residentes. Aplicou-se o questionário Índice de Qualidade do sono de Pittsburg (PSQI) e a escala de sonolência de Epworth. A análise dos questionários revelou associação estatisticamente significante entre sonolência e qualidade do sono (RR:1,108; IC 95% 1,0047 - 1,2240). O trabalho demonstrou que estudantes com sonolência diurna excessiva apresentam pior qualidade de sono; e uma variação significativa da prevalência da sonolência diurna excessiva e da qualidade ruim do sono entre as amostras de primeiro ano de graduação e residentes.

A avaliação no contexto da formação médica brasileira

Este artigo tem por objetivo aprofundar a discussão acerca da avaliação no ensino superior no contexto atual das escolas médicas brasileiras, com vistas a estimular a reflexão e a discussão de todos aqueles que de uma forma ou de outra estejam envolvidos no processo educativo. Entendemos que pesquisas a respeito da temática nos permitem repensar práticas e construir propostas mais participativas, voltadas aos processos, considerando a própria experiência, as diversidades e a complexidade da instituição. Discute-se, portanto, o processo autoavaliativo, ético e responsável, para que a instituição de ensino médico possa fazer uma reflexão crítica e participativa sobre suas ações, conhecer seu efetivo papel no engajamento com a comunidade e sua verdadeira contribuição para o seu desenvolvimento. Pretende-se explicitar a avaliação como força transformadora, que considera a relação mútua existente entre os aspectos qualitativos e quantitativos, a natureza da relação pedagógica e os objetivos que se propõe a alcançar, tendo em vista a complexidade e o dinamismo do processo de ensino.

Projeto pedagógico e as mudanças na educação médica

Este trabalho descreve os resultados do primeiro momento do projeto da Caem/Abem no eixo Projeto Pedagógico, um dos cinco eixos relevantes para avaliação das tendências de mudanças na escola médica. Analisa como os atores envolvidos com o curso de graduação percebem e situam a escola na sociedade ao estabelecerem sua missão política e pedagógica. Ao referir a tipologia do grupo de 28 escolas médicas, seguindo uma das três alternativas predominantes (tradicional, inovadora, avançada), esse eixo mostra a predominância de situação avançada, seguida da inovadora relativa aos vetores Perfil Biomédico e Epidemiológico-Social do profissional que pretende formar, e da aplicação da tecnologia. Quanto aos vetores da produção de conhecimentos, mostram dificuldades em produzir e ampliar as linhas de pesquisa para além das áreas biomédicas. Também mostram não ter facilidade para articular os cursos de graduação, pós-graduação e a educação permanente com vista às necessidades de saúde da população.

Construção de indicadores qualitativos para avaliação de mudanças

Apresenta-se uma reflexão teórico-metodológica focada na construção de indicadores qualitativos, voltados principalmente para a avaliação de mudanças no campo educacional. Foi escrito para subsidiar o processo de autoavaliação de um conjunto de escolas médicas que desenvolvem um programa de transformação de seus métodos tradicionais para outros fundamentados na filosofia e na prática de aprendizagem ativa. Nele são discutidos e problematizados: o conceito de indicador; a produção de indicadores para pesquisa avaliativa e a construção de indicadores qualitativos. Esses últimos são tratados sob duas formas mais frequentes: dentro da lógica quantitativa e da lógica qualitativa. Indicadores qualitativos a partir da visão quantitativa da realidade são construídos principalmente por meio de escalas. Dentro da ótica qualitativa, são elaborados a partir das representações e práticas dos sujeitos envolvidos na investigação. Enfatizando a necessidade de produção de indicadores de mudança que levem em conta estruturas, processos, relações e a contribuição da subjetividade, conclui-se que a validade interna desses indicadores pode ser alcançada quando as categorias empregadas em sua construção são fundamentadas teórica e contextualmente e possuem significados mútuos e partilhados entre os participantes.

Avaliação formativa entre alunos de medicina do quarto ano: relato de experiência

OBJETIVO: Comparar grau de dificuldade, satisfação e escores finais entre os métodos de avaliação formativa e somativa em alunos de Medicina do quarto ano, na disciplina de Ginecologia e Obstetrícia. MÉTODO: Trinta e oito alunos foram submetidos a um exame escrito (alternativo) e, um mês depois, ao método tradicional de escolha múltipla. O exame alternativo consistia em casos clínicos reais, enfocando as hipóteses diagnósticas e o manejo médico. As questões eram graduadas em 0, 0,5 ou 1 ponto. Após o resultado inicial, os exames eram devolvidos e, em duas semanas, os alunos tinham que escrever uma dissertação estruturada para cada resposta errada. Pontos adicionais (+ 0,5 ou + 1) eram dados para cada resposta. Dissertações com incorreções descontavam pontos da nota original. O teste tradicional consistia em conceitos clínicos e prevalência de diferentes doenças e de agentes etiológicos. Nenhum retorno era dado, a não ser a nota final. O grau de dificuldade, a média final de ambos os exames e a resposta dos alunos a essa iniciativa foram comparados entre os dois métodos. RESULTADOS: O exame escrito alternativo teve maior grau de dificuldade (7,6 ± 0,2 vs. 5,2 ± 0,4; p < 0,001). Nenhuma diferença estatística foi encontrada entre as médias dos escores finais de ambos os métodos (8,3 ± 0.9 vs. 8,5 ± 0,9; p > 0,05). Os alunos preferiram o método alternativo, quando comparado ao tradicional (8,6 ± 0,2 vs. 5,4 ± 0,4; p < 0,001). CONCLUSÃO: A avaliação formativa foi mais difícil do que a tradicional, mas os escores finais da classe dos alunos não foram menores do que os escores dos testes tradicionais. Os alunos preferiram a avaliação formativa.