Construção de indicadores qualitativos para avaliação de mudanças

Apresenta-se uma reflexão teórico-metodológica focada na construção de indicadores qualitativos, voltados principalmente para a avaliação de mudanças no campo educacional. Foi escrito para subsidiar o processo de autoavaliação de um conjunto de escolas médicas que desenvolvem um programa de transformação de seus métodos tradicionais para outros fundamentados na filosofia e na prática de aprendizagem ativa. Nele são discutidos e problematizados: o conceito de indicador; a produção de indicadores para pesquisa avaliativa e a construção de indicadores qualitativos. Esses últimos são tratados sob duas formas mais frequentes: dentro da lógica quantitativa e da lógica qualitativa. Indicadores qualitativos a partir da visão quantitativa da realidade são construídos principalmente por meio de escalas. Dentro da ótica qualitativa, são elaborados a partir das representações e práticas dos sujeitos envolvidos na investigação. Enfatizando a necessidade de produção de indicadores de mudança que levem em conta estruturas, processos, relações e a contribuição da subjetividade, conclui-se que a validade interna desses indicadores pode ser alcançada quando as categorias empregadas em sua construção são fundamentadas teórica e contextualmente e possuem significados mútuos e partilhados entre os participantes.

A importância de um questionário de avaliação de unidade curricular

O objetivo do estudo foi analisar a confiabilidade e validade interna de um questionário de satisfação aplicado prospectivamente a alunos do sexto ano médico que frequentaram o estágio de Neonatologia em uma universidade pública de 2000 a 2011. Responderam ao questionário 1.349 (97,4%) alunos. O coeficiente de Cronbach foi 0,7. A análise fatorial determinou quatro domínios: atuação dos docentes, assistência na sala de parto, número de recém-nascidos assistidos e carga teórica, que explicaram, respectivamente, 18%, 16%, 14% e 9% da variância total. O escore de satisfação foi 89,3 ± 7,6% do escore máximo, o número de recém-nascidos recepcionados na sala de parto/aluno foi 4,7 ± 3,3, e as notas do pré-teste e pós-teste foram 5,3 ± 0,9 e 8,8 ± 0,5, respectivamente. A correlação de Pearson entre o escore total e a nota do pós-teste foi 0,7 (p = 0,010) . Houve correlação positiva entre escore de satisfação e qualidade das aulas, aproveitamento na sala de parto, atuação do plantonista e docente, atendimento ao recém-nascido e hospital com condições para o aprendizado. Concluiu-se que a confiabilidade e a validade interna do questionário foram adequadas, e o escore de satisfação do aluno foi elevado.

Impact of worksite health-promotion programs in hospital admission costs and medical leaves in a sample of brazilian companies

Programas de saúde e bem-estar têm sido adotados por empresas como forma de melhorar a saúde de empregados, e muitos estudos descrevem retornos econômicos positivos sobre os investimentos envolvidos. Entretanto, estudos mais recentes com metodologia melhor têm demonstrado retornos menores. O objetivo deste estudo foi investigar se características de programas de saúde e bem-estar agem como preditores de custos de internação hospitalar (em Reais correntes) e da proporção de funcionários que têm licença médica, entre Abril de 2014 e Maio de 2015, em uma amostra não-aleatória de empresas no Brasil, através de parceria com uma empresa gestora de ‘big data’ para saúde. Um questionário sobre características de programas de saúde no ambiente de trabalho foi respondida por seis grandes empresas brasileiras. Dados retirados destes seis questionários (presença e idade de programa de saúde, suas características – inclusão de atividades de screening, educação sobre saúde, ligação com outros programas da empresa, integração do programa à estrutura da empresa, e ambientes de trabalho voltado para a saúde – e a adoção de incentivos financeiros para aderência de funcionários ao programa), bem como dados individuais de idade, gênero e categoria de plano de saúde de cada empregado , foram usados para construir um banco de dados com mais de 76.000 indivíduos. Através de um modelo de regressão múltipla e seleção ‘stepwise’ de variáveis, a idade do empregado foi positivamente associada e a idade do programa de saúde e a categoria ‘premium’ de plano de saúde do funcionário foram negativamente associadas aos custos de internação hospitalar (como esperado). Inesperadamente, a inclusão de programas de screening e iniciativas de educação de saúde nos programas de saúde e bem-estar nas empresas foram identificados como preditores positivos significativos para custos de admissão hospitalar. Para evitar a inclusão errônea de licenças-maternidade, apenas os dados de licença médica de pacientes do sexo masculino foram analisados (dados disponíveis apenas para duas entre as companhias incluídas, com um total de 18.957 pacientes do sexo masculino). Analisando estes dados através de um teste Z para comparação de proporções, a empresa com programa de saúde que inclui atividades voltadas a cessação de hábitos ruins (como tabagismo e etilismo), controle de diabetes e hipertensão, e que adota incentivos financeiros para a aderência de funcionários ao programa tem menor proporção de empregados com licençca médica no período analisado, quando comparada com a outra empresa que não tem estas características (também conforme esperado). Entretanto, a companhia com menor proporção de funcionários com licença médica também foi aquela que adota programa de screening entre as atividades de seu programa de saúde. Potenciais fontes de ameaça à validade interna e externa destes resultados são discutidas, bem como possíveis explicações para a associação entre programas de screening e educação médica a piores indicadores de saúde nesta amostra de companhias são discutidas. Novos estudos com melhor desenho, com amostras maiores e randômicas são necessários para validar estes resultados e possivelmente melhorar a validade interna e externa destes resultados.

Desenvolvimento de questionários de atividades de vida diária em pacientes com doença pulmonar obstrutiva crônica

Pós-graduação em Fisiopatologia em Clínica Médica - FMB

Relações entre o construto e as características do teste escrito do EPPLE eletrônico: um processo de validação

Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)

Estratégias de aprendizagem e desempenho acadêmico: evidências de validade

The purpose of the present study was to verify the factorial validity of a learning strategy scale as well as to explore the concurrent validity of the instrument in regard to students´ academic achievement. The sample was composed of 815 basic education children from both public and private schools of São Paulo and Minas Gerais. The Learning Strategy Scale was collectively applied. Exploratory factorial analyses were conducted to achieve the purposes of the study. The alphas of Cronbach of the instrument and of its three subscales showed good reliability. Variance analyses showed significant differences between school achievement and punctuation in the scale. The data were discussed in terms of their possible implications for the psycho-educational evaluation area.

Validade e confiabilidade da versão brasileira do Índice de Capacidade para o Trabalho

OBJETIVO: Avaliar a validade e a confiabilidade da versão brasileira de índice de capacidade para o trabalho. MÉTODOS:Estudo transversal com amostra de 475 trabalhadores de empresa do setor elétrico no estado de São Paulo (dez municípios em Campinas e região), realizado em 2005. Foram avaliados os seguintes aspectos da versão brasileira do Índice de Capacidade para o Trabalho: validade de construto, por meio de análise fatorial confirmatória e da capacidade discriminante; validade de critério, correlacionado o escore do índice com medidas de saúde auto-referidas; e confiabilidade, por meio da análise da consistência interna utilizando o coeficiente alfa de Cronbach. RESULTADOS: A análise fatorial indicou três fatores do construto capacidade para o trabalho: questões relativas aos "recursos mentais" (20,6% da variância), à autopercepção da capacidade para o trabalho (18,9% da variância) e à presença de doenças e limitações decorrentes do estado de saúde (18,4% da variância). O índice discriminou os trabalhadores segundo nível de absenteísmo, identificando média estatisticamente significativa (p<0,001) entre aqueles com absenteísmo elevado (37,2 pontos) e baixo (42,3 pontos). A análise de critério mostrou correlação do índice com todas as dimensões do estado de saúde analisadas (p<0,0001). O índice apresentou boa confiabilidade com coeficiente alfa de Cronbach (0,72). CONCLUSÕES: A versão brasileira do Índice de Capacidade para o Trabalho mostrou propriedades psicométricas satisfatórias quanto à validade de construto, de critério e de confiabilidade, representando uma opção adequada para avaliação da capacidade para o trabalho em abordagens individuais e inquéritos populacionais.

Validade e fiabilidade da versão portuguesa do Stroke Aphasic Depression Questionnaire-21

O objectivo deste estudo é determinar as propriedades psicométricas da versão portuguesa do Stroke Aphasic Depression Questionnaire-21 (SADQ-21). Envolveu 120 sujeitos, 33 dos quais com afasia. Os resultados demonstraram que o SADQ-21 revela uma consistência interna muito elevada (α=0,87). A validade de construção identificou cinco domínios. A variância total explicada pelos factores foi elevada (65,85%). A correlação entre a medida de ouro e o SADQ-21 é estatisticamente significativa (p<0,05). Os indivíduos com afasia estão significativamente mais deprimidos que os sem afasia (p=0,0001). Conclui-se que o SADQ-21 é um instrumento adequado para a avaliação da sintomatologia depressiva em pessoas com afasia.

Validade e confiabilidade da versão brasileira do Índice de Capacidade para o Trabalho

OBJETIVO: Avaliar a validade e a confiabilidade da versão brasileira de índice de capacidade para o trabalho. MÉTODOS:Estudo transversal com amostra de 475 trabalhadores de empresa do setor elétrico no estado de São Paulo (dez municípios em Campinas e região), realizado em 2005. Foram avaliados os seguintes aspectos da versão brasileira do Índice de Capacidade para o Trabalho: validade de construto, por meio de análise fatorial confirmatória e da capacidade discriminante; validade de critério, correlacionado o escore do índice com medidas de saúde auto-referidas; e confiabilidade, por meio da análise da consistência interna utilizando o coeficiente alfa de Cronbach. RESULTADOS: A análise fatorial indicou três fatores do construto capacidade para o trabalho: questões relativas aos "recursos mentais" (20,6% da variância), à autopercepção da capacidade para o trabalho (18,9% da variância) e à presença de doenças e limitações decorrentes do estado de saúde (18,4% da variância). O índice discriminou os trabalhadores segundo nível de absenteísmo, identificando média estatisticamente significativa (p<0,001) entre aqueles com absenteísmo elevado (37,2 pontos) e baixo (42,3 pontos). A análise de critério mostrou correlação do índice com todas as dimensões do estado de saúde analisadas (p<0,0001). O índice apresentou boa confiabilidade com coeficiente alfa de Cronbach (0,72). CONCLUSÕES: A versão brasileira do Índice de Capacidade para o Trabalho mostrou propriedades psicométricas satisfatórias quanto à validade de construto, de critério e de confiabilidade, representando uma opção adequada para avaliação da capacidade para o trabalho em abordagens individuais e inquéritos populacionais.

Validade do instrumento WHO VAW STUDY para estimar violência de gênero contra a mulher

OBJETIVO: Validar o instrumento do estudo World Health Organization Violence Against Women (WHO VAW) sobre violência psicológica, física e sexual por parceiros íntimos contra mulheres. MÉTODOS: Estudo transversal realizado em vários países entre 2000 e 2003, inclusive Brasil. Selecionaram-se amostras aleatórias e representativas de mulheres de 15-49 anos com parceiros íntimos, residentes na cidade de São Paulo, SP, (n = 940) e na Zona da Mata de Pernambuco (n = 1.188). Realizou-se análise fatorial exploratória das perguntas sobre violências (quatro psicológicas, seis físicas e três sexuais), com rotação varimax e criação de três fatores. Calculou-se alfa de Cronbach para análise da consistência interna. Para a validação por grupos extremos, médias de escores (zero a 13 pontos) de violência foram testadas em relação aos desfechos: auto-avaliação de saúde, atividades diárias, presença de dor ou desconforto, ideação e tentativa de suicídio, grande consumo de álcool e presença de transtorno mental comum. RESULTADOS: Foram definidos três fatores com variância acumulada semelhante (0,6092 em São Paulo e 0,6350 na Zona da Mata). Para São Paulo, o primeiro fator foi determinado pela violência física, o segundo pela sexual e o terceiro pela psicológica. Para a Zona da Mata, o primeiro fator foi composto pela violência psicológica, o segundo pela física e o terceiro pela sexual. Coeficientes de alfa de Cronbach foram 0,88 em São Paulo e 0,89 na Zona da Mata. As médias dos escores de violência foram significativamente maiores para desfechos menos favoráveis, exceto tentativa de suicídio em São Paulo. CONCLUSÕES: O instrumento mostrou-se adequado para estimar a violência de gênero contra a mulher perpetrada por seu parceiro íntimo e pode ser utilizado em estudos sobre o tema. Ele tem alta consistência interna e capacidade de discriminar as formas de violência psicológica, física e sexual, perpetrada em contextos sociais diversos. O instrumento também caracteriza a mulher agredida e sua relação com o agressor, facilitando análises de gênero.

Validade e fidedignidade da escala de satisfação com a prática de atividade física em adultos

OBJETIVO: Analisar a validade, a consistência interna e a fidedignidade da escala de satisfação com a prática de atividade física em adultos brasileiros. MÉTODOS: A escala de satisfação com a prática de atividade física foi aplicada com questionário multidimensional face a face em 1.461 indivíduos (63,7% mulheres) com idade > 18 anos em Curitiba, PR, de abril a julho de 2009. O questionário foi submetido à análise de validade (fatorial e de construto) e fidedignidade (consistência interna e estabilidade temporal). O procedimento de teste-reteste, com uma semana de intervalo (n = 74), foi empregado para analisar a estabilidade temporal. RESULTADOS: A análise fatorial exploratória apresentou dois fatores: satisfação com a prática de caminhada no tempo livre e satisfação com a prática de atividade física moderada ou vigorosa. Os fatores explicaram 29,3% da variância da caminhada e 53,5% da atividade física moderada ou vigorosa. Valores de α = 0,91 e 0,88, respectivamente, indicaram elevada consistência interna e duas subescalas. Os itens da escala mostraram elevada concordância no teste-reteste tanto para caminhada (71,7% a 81,1%) quanto para atividade física moderada ou vigorosa (80,5% a 92,6%). Os fatores apresentaram correlação significativa com o tempo despendido em caminhada (min/semana) (rho = 0,23; p < 0,001) e em atividade física moderada ou vigorosa (rho = 0,21; p < 0,001), indicando a validade de construto do instrumento. CONCLUSÕES: A escala de satisfação com a prática de atividade física proposta apresenta validade, consistência interna e fidedignidade adequadas para aplicação em adultos brasileiros.

Validade e fidedignidade de uma escala de avaliação do apoio social para a atividade física

OBJETIVO: Avaliar a validade e a fidedignidade da versão brasileira da escala de apoio social para a prática de atividades físicas em adultos. MÉTODOS: A escala foi aplicada em conjunto com um questionário multidimensional face a face em 1.461 indivíduos com idade entre 18 e 79 anos residentes em Curitiba, PR, entre abril e julho de 2009. O questionário foi submetido à testagem de validade (fatorial e construto) e fidedignidade (consistência interna e reprodutibilidade). A fidedignidade foi verificada pela consistência interna, pelo alfa de Cronbach, pelo procedimento de teste-reteste com uma semana de intervalo (n = 74) e pelo coeficiente de correlação intraclasse. RESULTADOS: A análise fatorial resultou em quatro fatores com autovalores entre 4,29 e 1,39 que explicaram 82,8% da variância total. Nos fatores 1 e 2, ficaram agrupadas as questões sobre apoio social recebido dos amigos para atividades físicas moderadas a vigorosas e caminhada, respectivamente. Os fatores 3 e 4 foram constituídos dos agrupamentos do apoio social recebido da família, para atividades físicas moderadas a vigorosas e caminhada, respectivamente. A reprodutibilidade apresentou coeficiente de correlação intraclasse entre 0,63 e 0,80 e consistência interna alfa entre 0,87 e 0,91. A validade de construto foi constatada pela associação significativa (p < 0,005) entre os escores de apoio social com caminhada e atividades físicas moderadas a vigorosas. CONCLUSÕES: O instrumento testado apresentou características psicométricas adequadas para emprego em adultos brasileiros.

Avaliacao da confiabilidade e validade do Indice de Qualidade da Dieta Revisado

OBJETIVO Avaliar a confiabilidade e a validade do Índice de Qualidade da Dieta Revisado de acordo com as propriedades psicométricas. MÉTODOS Estudo transversal em amostra probabilística do município de São Paulo, SP, com 2.375 indivíduos com idade maior ou igual a 12 anos, de ambos os sexos, incluídos no Inquérito de Saúde, realizado em 2003. As informações sobre características da população foram obtidas por meio de questionário. Dados do consumo alimentar foram obtidos pela aplicação do Recordatório de 24 horas, utilizado para calcular o Índice de Qualidade da Dieta Revisado (IQD-R). Foram avaliados (1) validade de conteúdo, comparando os componentes com as recomendações do Guia Alimentar para a População Brasileira; (2) validade de constructo, por meio da análise fatorial pelo método dos componentes principais e verificando se o índice consegue mensurar a qualidade da dieta independente da energia ingerida; (3) validade discriminante; e (4) a confiabilidade do IQD-R pela análise da consistência interna dos itens utilizando o coeficiente alfa de Cronbach. RESULTADOS As correlações entre os escores dos componentes e a energia consumida foram fracas (r #< 0,30). A análise de componentes principais indicou a presença de quatro fatores com autovalores #> 1 que representaram 67% da variância do índice. A validade discriminante do IQD-R foi observada comparando os indivíduos por sexo e hábito de fumar, identificando diferenças estatisticamente significativas entre as médias dos componentes do IQD-R e o escore final. O valor do alfa de Cronbach (α = 0,7) indicou a presença de consistência interna entre os componentes do IQD-R. O componente Gord_AA, seguido dos componentes frutas totais e frutas integrais, apresentaram maior correlação com a pontuação final do índice. CONCLUSÕES O Índice de Qualidade da Dieta Revisado mostrou-se confiável e estruturalmente válido quando utilizado para avaliar e monitorar a qualidade da dieta de brasileiros.

Escala de atitudes frente ao uso de drogas: evidências de validade fatorial e preditiva

OBJETIVO: O presente estudo teve como objetivo conhecer evidências de validade fatorial e preditiva de uma medida de atitudes ante o uso de drogas em geral (EAAUD). MÉTODO: Participaram voluntariamente 276 estudantes universitários de vários cursos, provenientes de uma universidade pública (94,2%) e outra particular (5,8%) da cidade de João Pessoa (PB). Estes tinham idade média de 21 anos (DP = 3,40; 93,5% eram de jovens de 17 a 25 anos), a maioria solteira (91%) e do sexo feminino (65,6%). Além de um conjunto de perguntas demográficas, os participantes preencheram a EAAUD. Esta compreende uma medida formada por quatro itens/adjetivos bipolares (positivo/negativo, gosto/desgosto, bom/ruim e desejável/indesejável) respondidos em escala do tipo diferencial semântico, de 9 pontos, variando de - 4 a + 4. RESULTADOS: De acordo com a análise de componentes principais, um único componente emergiu, com todos os itens apresentando saturação acima de |0,40|; este teve valor próprio de 3,17, explicando 79,3% da variância total. Sua consistência interna (alfa de Cronbach) foi de 0,91. Por meio de regressão logística, comprovou-se que as pontuações na EAAUD predisseram significativamente a condição de ser um usuário de drogas, B = 0,17, Wald (1) = 8,45, p = 0,004. CONCLUSÃO: Tais resultados indicam que esta medida reúne evidências de validade fatorial e preditiva, podendo ser empregada para conhecer o potencial envolvimento dos jovens com drogas. Não obstante, sugerem-se novas pesquisas com amostras maiores e mais diversificadas.

Validação preliminar de uma versão do Caregiver Reaction Assessment em um contexto de pacientes oncológicos em internação

Objetivo Adaptar para o Brasil uma versão portuguesa do Caregiver Reaction Assessment (CRA) e gerar indicadores preliminares de validade e fidedignidade para sua aplicação em cuidadores de pacientes oncológicos internados. Métodos Participaram voluntariamente 53 cuidadores, que responderam a um questionário sociodemográfico, ao CRA e à Escala de Bem-Estar Psicológico (EBEP). A unidimensionalidade e a homogeneidade dos escores do CRA foram avaliadas por meio de análise de componentes principais e de consistência interna, respectivamente. Correlações de Pearson entre escores do CRA e EBEP foram examinadas e utilizadas como indicadores de validade divergente e de construto. Resultados As cinco escalas que compõem o CRA apresentaram bons níveis de unidimensionalidade e homogeneidade, porém as escalas de impacto nas finanças e impacto na saúde obtiveram alfas insuficientes (< 0,7). O escore total do CRA apresentou alfa elevado (0,886). Correlações entre o CRA e a EBEP produziram coeficientes teoricamente interpretáveis, com magnitudes variando entre nulas e moderadas. Conclusão O CRA apresentou bons indicadores de validade e fidedignidade. Algumas adaptações em relação ao conteúdo de determinados itens se mostram, todavia, necessárias, a fim de serem calibradas ao contexto de pessoas atendidas por serviços subsidiados pelo Sistema Único de Saúde.