Teste de concordância de scripts: uma proposta para a avaliação do raciocínio clínico em contextos de incerteza

A avaliação do raciocínio clínico em situações de incerteza é pouco pesquisada na educação médica. Os testes escritos mais aplicados são de múltipla escolha, capazes de avaliar como se lida com problemas bem definidos. Porém, a maioria das situações contém incertezas. Um método de avaliação do raciocínio clínico em contextos de incerteza foi desenvolvido a partir da teoria de scripts, com situações em geriatria. Um grupo de especialistas e um grupo de estudantes de graduação resolveram o teste. Acomparação entre os resultados trouxe indícios da validade do instrumento, capaz de diferenciar o raciocínio relacionado ao nível de experiência profissional. A média dos escores dos especialistas (80,41) foi superior à dos estudantes (70,71), p < 0,001. As análises de consistência interna e um estudo G forneceram resultados que estão de acordo com metodologias que buscam avaliar uma competência profissional. Concluiu-se que uma proposta de teste de concordância de scripts em língua portuguesa aplicado em uma instituição de ensino brasileira pode ser uma alternativa para a avaliação do raciocínio clínico em contextos de incerteza.

Conceito e avaliação de habilidades e competência na educação médica: percepções atuais dos especialistas

As Diretrizes Curriculares Nacionais (DCN) para cursos de Medicina orientam mudanças nos currículos e processos de ensino-aprendizagem-avaliação para desenvolvimento de competências e habilidades profissionais. O presente trabalho, iniciativa da Associação Brasileira de Educação Médica (Abem), investiga os significados e a apropriação da noção de competência por estudiosos da avaliação educacional na medicina. Foram realizadas dez entrevistas mediante roteiro com questões abertas e respondentes selecionados a partir de sua produção acadêmica sobre o assunto. Suas narrativas foram submetidas a análise de conteúdo mediante análise temática. Os resultados enfocam o significado da competência, o papel dos sujeitos e do contexto na construção da competência e a relação entre avaliação de competência e construção da integralidade em saúde. Observa-se que, embora de modos heterogêneos, o conceito de competência tem sido apropriado de modo fértil pelos especialistas brasileiros. No entanto, o estudo sugere que a consolidação de uma "cultura de avaliação" nas escolas médicas demandará investimentos em núcleos de estudo e pesquisa para aprofundamento de conceitos, objetivos, seleção de conteúdos, pactuação de critérios, elaboração de instrumentos e treinamento de avaliadores nas instituições brasileiras.

Avaliação no Ensino Médico: o papel do portfólio nos currículos baseados em metodologias ativas

As atuais mudanças na educação médica - relacionadas às transformações em curso nas sociedades democráticas contemporâneas - têm colocado em questão, de modo cada vez mais incisivo, os aspectos relativos à avaliação dos processos de ensino-aprendizagem, cabendo a formulação de novos métodos/estratégias, capazes de ultrapassar a orientação somativa prevalecente na avaliação. Neste contexto, discutem-se, no presente artigo, elementos para a construção desta nova avaliação, destacando-se o uso do portfólio.

Avaliação do crescimento cognitivo do estudante de Medicina: aplicação do teste de equalização no Teste de Progresso

O desenvolvimento cognitivo é avaliado, geralmente, por meio de testes objetivos, e o Teste de Progresso (TPMed) é um dos métodos que as escolas médicas utilizam. A comparação dos resultados é possível com a equalização dos testes. Este trabalho avaliou o desenvolvimento cognitivo dos estudantes de Medicina de uma universidade estadual através da análise dos TPMed no período de 2004 a 2007, que foram equalizados para estimar o progresso dos estudantes durante o curso. A metodologia foi pesquisa-ação e aplicaram-se os métodos para equiparação dos testes, Teoria Clássica dos Testes (TCT) e Teoria de Resposta ao Item (TRI), seguidos pelo método linear por meio do teste de ancoragem para grupos não equivalentes. Observou-se uma média de acerto de 36,9% e 64,4% na primeira e sexta séries, respectivamente. A análise dos resultados baseou-se na psicometria e realizou-se a equiparação dos testes pela TCT, pela impossibilidade de aplicar a TRI. O alfa de Cronbach mostrou alta consistência interna dos testes, e os índices de dificuldade e discriminação dos itens mostraram boa evolução do nível das questões. O crescimento cognitivo dos estudantes de Medicina foi evidente em todos os TPMed.

Estudo sobre a avaliação aplicada no internato em clínica médica da Unisul

INTRODUÇÃO: O internato médico compreende o período do curso de graduação em Medicina em que o educando recebe preparação para a prática médica. A avaliação contribui para a aquisição da competência clínica e, consequentemente, prepara o educando para a prática médica. OBJETIVOS: Estudar os métodos de avaliação discente no internato em Clínica Médica do curso de graduação em Medicina da Universidade do Sul de Santa Catarina (Unisul), campus Tubarão, por meio da análise da percepção de discentes e docentes envolvidos neste estágio do curso. MÉTODOS: Participaram da pesquisa 44 internos e 15 docentes do semestre letivo 2009/2. RESULTADOS: Os sujeitos da pesquisa percebem a existência e a necessidade de avaliação no internato, têm conhecimento das estratégias e itens utilizados no processo avaliativo e entendem que nesse processo são empregados métodos com medidas objetivas e subjetivas, com abordagens qualitativas e quantitativas. CONCLUSÕES: Sugere-se maior ênfase em conteúdo prático e capacitação docente, aliadas a uma lista de verificação ao final do estágio.

Avaliação formativa em sessão tutorial: concepções e dificuldades

A proposta deste trabalho é apreender concepções de estudantes e tutores sobre a avaliação formativa nas sessões tutoriais de um currículo PBL, identificando as dificuldades enfrentadas no desenvolvimento dessa prática. Um questionário Likert foi aplicado a 11 tutores e 45 discentes do sétimo período do curso de Medicina da Universidade Estadual de Montes Claros e uma entrevista de aprofundamento foi realizada com a totalidade dos tutores e 20 estudantes. Os entrevistados percebem a proposta formativa da avaliação na sessão tutorial, definindo-a como processual, reflexiva, dialógica, diagnóstica, e enfatizam a possibilidade de feedback como fator motivador e determinante para solucionar as deficiências detectadas e reforçar as potencialidades percebidas. São identificadas dificuldades relacionadas ao desempenho dos docentes, como falta de preparo, ao desempenho dos estudantes (falta de sinceridade, maturidade) e outras decorrentes da inadequação dos critérios utilizados nos instrumentos avaliativos. Os resultados apontam a necessidade de programas de desenvolvimento docente e discente em avaliação, assim como maior compromisso das instituições que utilizam a metodologia Aprendizagem Baseada em Problemas na busca contínua e reflexiva da coerência com os pressupostos pedagógicos estabelecidos pelo currículo.

Feedback de usuários como subsídio para avaliação do estudante de medicina

A avaliação é fundamental para o processo ensino-aprendizagem. Diferentes métodos de avaliação e diversos atores envolvidos na avaliação podem fornecer elementos distintos, que, somados, fornecem melhor compreensão sobre a efetividade do processo educacional em suas variadas dimensões. A avaliação de habilidades e atitudes de estudantes tem recebido grande atenção recentemente. O envolvimento de pacientes no processo pode ser contributivo, pois sua perspectiva acrescenta informações ímpares. O presente estudo avaliou a aquisição de competências e habilidades de estudantes de Medicina no internato de Obstetrícia, sob o ponto de vista de gestantes. As pacientes responderam a um questionário segundo escala de Likert, com itens de avaliação divididos em habilidades de comunicação, exame físico e profissionalismo. Os resultados mostraram boa avaliação dos estudantes em geral, o que atribuímos ao sentimento de gratidão das pacientes. Algumas questões com maiores frequências de respostas negativas, porém, apontam aspectos que merecem maior atenção da escola médica pelo impacto que podem trazer à prática profissional. A perspectiva de pacientes na avaliação do estudante de Medicina poderá balizar estratégias de feedback para qualificar a formação médica.

Indicadores de avaliação em gestão e saúde coletiva na formação médica

A Faculdade de Medicina de Marília (Famema) utiliza metodologias ativas de ensino-aprendizagem, e sua organização curricular é orientada ao desenvolvimento de competência profissional e a um processo avaliativo critério-referenciado. Esta pesquisa tem por objetivo elaborar indicadores para avaliar o processo de ensino-aprendizagem nos âmbitos da gestão e da saúde coletiva, baseados na adaptação da proposta de Conferência de Consenso e descrever o caminho percorrido nessa elaboração. Com base na análise dos documentos institucionais que explicitavam o planejamento das atividades (cadernos de organização das séries) e nos critérios, formatos e instrumentos da avaliação nas diferentes séries e cenários de aprendizagem (Manual de Avaliação), foi elaborada a primeira matriz de indicadores, que continha a proposta curricular para o alcance da aprendizagem que embasara a análise dos especialistas e a realização da Conferência. Tal metodologia possibilitou entender, ampliar e aprofundar a avaliação nessas áreas específicas, o que poderá orientar a implementação das alterações curriculares necessárias, com ênfase em uma avaliação da aprendizagem comprometida com o processo formativo.

Influência dos cursos preparatórios para residência médica em uma avaliação global

INTRODUÇÃO: O desenvolvimento cognitivo é um processo complexo e o mais intenso na formação médica, necessitando ser acompanhado minuciosa e criteriosamente. Várias ferramentas foram criadas com o intuito de acompanhar tal processo, entre elas o teste global (ou de situação) de conhecimento, cuja finalidade é avaliar o desempenho cognitivo durante o curso e o próprio curso, bem como treinar acadêmicos para concursos. Outra forma de treinamento para provas de qualificação, muito usada atualmente, são os Cursos Preparatórios (CP) para residência médica. OBJETIVO: Analisar a influência e eficácia dos CP no ganho cognitivo dos acadêmicos do internato bienal de um curso de Medicina. METODOLOGIA: Estudo transversal, quantitativo, com aplicação de uma prova de situação aos internos que cursam ou não CP. RESULTADOS: Realizaram a prova 127 internos, sendo 63 do primeiro semestre e 64 do terceiro. A média de acerto geral foi de 5,1 ± 1,0 (5,0 ± 0,9 para quintanistas e 5,1 ± 1,2 para sextanistas; p = 0,533). Do total dos internos, 77,2% participavam de CP, sendo menor a proporção dos quintanistas (65,1% vs. 89,1%; p = 0,001). Não se observou diferença estatística no desempenho cognitivo dos internos relacionado à "frequência ou não de CP" (5,1 ± 1,1 vs. 4,8 ± 1,0; p = 0,203). CONCLUSÃO: O teste do tipo global não apresentou diferença estatística significativa no desempenho cognitivo dos estudantes de uma série para outra, não demonstrando no CP fator diferenciador neste tipo de avaliação (testes de múltipla escolha), colocando em dúvida a real influência e efetividade do CP.

Matriz de competências essenciais para a formação e avaliação de desempenho de estudantes de medicina

OBJETIVO: O artigo propõe uma matriz de competências essenciais para valorização e intencionalidade dos percursos acadêmicos e como referência de processos avaliativos dos estudantes. METODOLOGIA: O estudo apresenta delineamento quanti-qualitativo. Após revisão integrativa da literatura e pesquisa documental, foi elaborada e consolidada a versão inicial. O teste piloto com 12 professores, membros do Colegiado de Graduação do curso médico da UFMG, contribuiu para ajustes do documento. A validação da matriz foi orientada pela metodologia Delphi, com avaliação docente individual, por via eletrônica e utilização da ferramenta Googledocs. RESULTADOS: Houve consenso entre os 112 professores avaliadores para aprovação da matriz, composta por seis grandes domínios - profissionalismo; relacionamentos interpessoais e comunicação; atenção integral à saúde da pessoa; organização de sistemas de saúde e atenção em saúde pública; gestão do conhecimento; conhecimento médico -, 28 subdomínios e 204 descritores dos conhecimentos, habilidades e atitudes essenciais na formação do médico, durante sua graduação. CONCLUSÕES: Considera-se que a matriz contribuirá na qualificação da formação médica e na certificação das competências para o atendimento adequado às demandas de saúde, dentro de padrões de excelência técnica e responsabilidade social.

Estruturação de Sistemas para Avaliação Programática do Estudante de Medicina

RESUMO A avaliação do estudante compreende processos de obtenção de informações sobre o seu desempenho em diferentes domínios e cumpre três funções principais: fomentar o aprendizado (avaliação formativa), embasar decisões sobre o seu progresso (avaliação somativa) e contribuir para o controle da qualidade da sua formação (avaliação informativa). A avaliação programática constitui uma forma inovadora de praticar os procedimentos avaliativos para que cumpram bem suas funções. Neste ensaio, apresentam-se conceitos sobre: diferentes funções da avaliação do estudante, atributos que conferem qualidade aos métodos de avaliação, justificativas para a estruturação de sistemas de avaliação programática e metas e características desejáveis nestes sistemas (centralização, institucionalização, uniformização, abrangência, integração). Sugere-se um modo de configuração de um sistema de avaliação programática do estudante de Medicina e descrevem-se possíveis ações para cumprir suas finalidades. Discutem-se também as dificuldades previsíveis na sua implantação e como podem ser enfrentadas. Espera-se que os conteúdos discutidos neste ensaio contribuam para aumentar o conhecimento dos profissionais envolvidos na avaliação educacional e para influenciar as escolas médicas no sentido de estruturar sistemas efetivos de avaliação programática do estudante.

Constituição de competências para a intervenção no processo saúde-doença da população: desafio ao educador de enfermagem

Tomando como objeto de estudo a prática educativa - ensino e avaliação - operada no Estágio Rural Integrado da Universidade Federal da Paraíba, os autores discutem sobre a centralidade dos conhecimentos nesta prática educativa e consideram a possibilidade de se implantar processos de ensino e avaliação transformadores, ancorados na abordagem pedagógica por Competências. Propõem a utilização desta abordagem e da metodologia da TIPESC - Teoria da Intervenção Práxica da Enfermagem em Saúde Coletiva como orientadores dos processos de formação de força de trabalho em saúde e, em particular de enfermagem, visando à constituição de sujeitos críticos e reflexivos que atendam aos requerimentos do Sistema Único de Saúde.

Curso Técnico de Enfermagem do PROFAE - Ceará: uma análise sob a óptica dos egressos

Este estudo objetivou analisar o curso Técnico em Enfermagem do PROFAE, sob a perspectiva dos egressos, vislumbrando o reconhecimento dos pontos fortes e as dificuldades decorrentes do desenvolvimento do curso. Estudo descritivo-exploratório de natureza qualitativa, desenvolvido com os egressos da Escola de Saúde Pública do Ceará. Foram realizados dois grupos focais, com 21 egressos, em maio e junho de 2007. Utilizou-se a análise de conteúdo para a compreensão das falas. Evidenciou-se que o curso proporcionou aquisição de conhecimentos, transformando a vida dos participantes, passando a ser agente de mudança no contexto de trabalho. Foram analisados a qualidade do currículo, a metodologia, o material didático disponibilizado pela instituição, bem como a atuação do corpo docente. Como pontos frágeis citaram-se a limitação do campo de estágio, duração do curso e gerenciamento de ajuda de custo. Entende-se que a avaliação representa um aspecto importante para o curso, ensejando o aperfeiçoamento da proposta.

Análise do desempenho dos estudantes de enfermagem no ensino por competências e no ensino para compreensão

RESUMO Objetivo Analisar o desempenho dos estudantes da disciplina Estágio Curricular Supervisionado do projeto pedagógico baseado em Competências (currículo A) e dos estudantes do projeto pedagógico na perspectiva do Ensino para Compreensão (currículo B). Método Estudo exploratório descritivo, quantitativo e documental. O local da pesquisa foi uma universidade privada do município de São Paulo e para a coleta de dados foram utilizados 312 instrumentos de avaliação de desempenho dos estudantes da disciplina em questão. Resultados A avaliação do desempenho dos estudantes do currículo A não teve diferença em relação à média geral dos estudantes do currículo B. Os estudantes do A mostraram melhor desempenho em relação ao B na unidade de terapia intensiva e no tópico práticas pedagógicas, e os do B nos tópicos bases comportamentais e atitudinais e gestão. Os estudantes que são técnicos de enfermagem têm desempenho melhor e os que trabalham à tarde têm melhores notas. Conclusão Não foi comprovada a hipótese de que os estudantes da disciplina Estágio Curricular Supervisionado do currículo por compreensão (B) tem melhor desempenho que os estudantes do currículo por competências (A). A formação como técnico de enfermagem e turno de trabalho foram variáveis que interferiram no desempenho dos alunos independentemente do tipo de currículo. Durante o estudo houve a possibilidade de analisar os instrumentos de avaliação de desempenho dos estudantes, bem como o preenchimento pelos docentes, constatando-se que há necessidade de melhor estruturação na avaliação de desempenho do estudante e, principalmente, um processo de capacitação dos professores para a execução dessa atividade.

Educação brasileira: da realidade à fantasia

O texto que aqui se apresenta por solicitação do Grupo de Política Educacional da ANPED no ano de 1988 talvez não acrescente nada de novo ao que todos já sabem a respeito do andamento da gestão educativa em nosso país. Na maior parte da análise retomarei conceitos e informações que já são de domínio público, com exceção de algumas nuances que surgem na condução política das questões educativas ao longo dos últimos anos, com o aparecimento do marketing como meio fundamental de produzir fatos e criar uma meta-realidade, bastante distinta do que ocorre no cotidiano da vida escolar do país, com repercussões inevitáveis sobre o rumo dos acontecimentos.