A construção e validação de um teste com referência a critério para medir as competências básicas de leitura e escrita para o Programa de Alfabetização Funcional do MOBRAL

A necessidade de se desenvolverem instrumentos adequados a avaliação de programas educacionais é premente no momento atual. Segundo os estudos mais recentes no campo da medida educacional, os testes com referência a critério são os que atendem a esta necessidade. Este estudo teve por objetivo a construção de dois testes deste tipo para a avaliação do Programa de Alfabetização Funcional do MOBRAL nos dominios da aquisição das competências basicas em leitura e escrita. Inicialmente foram selecionadas e descritas quatro competências para serem medidas por cada teste. As competências foram selecionadas tendo como base os objetivos do programa apresentados no Roteiro de Orientação ao Alfabetizador (1977). A segunda etapa do estudo consistiu na criação das especificações para cada competência selecionadas nos dois dominios. A partir destas especificações foram construidos 32 itens para o teste de leitura e 40 para o de escrita. Estes itens foram, distribuidos randomicamente em 5 formas experimentais para cada teste. O teste de leitura é composto de itens de múltipla escolha e o teste de escrita de itens de resposta construida. Os criterios de correção e os padrões minimos de desempenho foram estabelecidos para cada teste. Para a analise destes padrões minimos foram calculados as medias e os desvios-padrão para cada forma aplicada. Estes resultados permitem a manutenção dos padrões minimos usados em estudos posteriores. A análise dos itens foi feita em duas etapas: na primeira foram calculados os indices de discriminância pelo processo tradicional e na segunda os indices de sensitivida de pelo processo desenvolvido por Gronlund (1976). Os resultados obtidos permitiram o aproveitamento de todos os itens. Os itens foram divididos em duas formas equivalentes para cada teste, cada um pode ser subdividido em três subtestes para a medida isolada das competências descritas. Para o exame de validade foram estabelecidos os indices de validade descritiva e de seleção de dominio. A fidedignidade dos testes ficou assegurada com a construção de mais de 5 itens para competência Gronlund (1976).

A pesquisa brasileira em educação musical infantil: tendências teórico-metodológicas e perspectivas

Pós-graduação em Música - IA

Programas de marketing social: proposição e exame de uma estrutura conceitual de avaliação de resultados

A área de marketing tem sido cada vez mais demandada a prestar contas de suas ações, na forma de avaliação dos investimentos realizados. No marketing social não é diferente. O presente estudo examinou propostas de avaliação de programas de marketing social, em busca do que seria uma estrutura conceitual ideal para esse tipo de avaliação, a partir da literatura, prática de mercado, opinião de experts e exame empírico da proposta em dois diferentes estudos de caso, o programa Novo Sinal, da Prefeitura Municipal de Porto Alegre e os programas de imunização do Centro Estadual de Vigilância em Saúde do Governo do Rio Grande do Sul. A metodologia, qualitativa em sua essência, fez uso da técnica Delphi, entrevistas em profundidade e estudo de casos. A estrutura conceitual desenvolvida engloba as dimensões de avaliação de Input, Processo e Resultados, com respectivas variáveis e indicadores para cada dimensão, e ao longo de cujas dimensões a avaliação ética se faz presente, mas ainda de difícil avaliação na prática cotidiana dos profissionais de marketing social.

Proposta de um modelo de gestão de programas de pós-graduação na área de Administração a partir dos sistemas de avaliação do Brasil (CAPES) e dos Estados Unidos (AACSB)

O sistema brasileiro de avaliação de programas de pós-graduação vem evoluindo desde 1976, sendo considerado eficiente e moderno. No presente trabalho, o objetivo é propor um modelo de gestão de programas de pós-graduação stricto sensu em Administração do Brasil, com base nos sistemas de avaliação do Brasil e dos Estados Unidos. Para tanto, procedeu-se a uma pesquisa em oito programas: quatro no Brasil, recomendados pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) e quatro nos Estados Unidos, credenciados pela Association to Advance Collegiate School of Business (AACSB). O método de pesquisa foi o estudo de casos múltiplos de caráter exploratório com dois componentes básicos: pesquisa documental, por meio de um estudo em profundidade dos sistemas de avaliação; pesquisa de campo com os coordenadores de programas para identificar como os sistemas de avaliação são utilizados para desenvolver os programas. A partir desses estudos, foi proposto um modelo de gestão em que, além de atender aos requisitos do sistema de avaliação da CAPES, seja levada em consideração a realidade do programa e os elementos importantes para seu contínuo aprimoramento, dentre eles: missão e visão; plano estratégico; corpo docente; estrutura do programa; corpo discente; resultados que abrangem produção científico-tecnológica, egresso e inserção social.

Avaliação na educação básica nos 90 segundo os periódicos acadêmicos

O texto sintetiza e discute as principais constatações de estado da arte realizado sobre o tema no Brasil, tendo utilizado como fontes artigos publicados em dez dos principais periódicos da área na década de 90. Examina pressupostos e modelos de avaliação, estudos empíricos e documentais que envolvem a avaliação na escola e da própria escola, detém-se na avaliação de sistema e, ainda, de políticas e programas educacionais.

A construção de indicadores de qualidade no campo da avaliação educacional : um enfoque epistemológico

Este artigo trata do processo de construção de indicadores de qualidade no campo da avaliação educacional e, mais especificamente, da avaliação de políticas e programas educacionais. O objetivo é promover uma discussão sobre duas questões articuladas: num primeiro momento, tratar os aspectos epistemológicos e teórico-metodológicos envolvidos no processo de construção de indicadores nas ciências sociais; e, num segundo, refletir sobre os limites e possibilidades da construção de indicadores de qualidade no campo da avaliação educacional com base nas abordagens teóricas mais recentes sobre qualidade em educação e sobre avaliação. Para proceder à discussão adotamos uma perspectiva epistemológica que busca focalizar a questão a partir da relação entre a definição de modelos de avaliação educacional e os problemas de validez que permeia o processo de construção do conhecimento, os obstáculos envolvidos na relação que estabelece entre o pesquisador social (no caso específico, o avaliador) e o conhecimento a ser produzido, bem como a questão do seu uso social e político que remete ao sentido atribuído para o termo qualidade em educação. Na conclusão o artigo apresenta uma proposição provisória de um conjunto de estratégias que podem ser considerados como norteadores para a construção de modelos de avaliação de políticas e programas educacionais e de indicadores de qualidade.

Avaliação do impacto dos programas de transferência monetária condicionada na taxa de frequência escolar e labor infantil: o caso do Programa JUNTOS no Peru

Na presente dissertação tem como objetivo avaliar o impacto do programa JUNTOS sobre a taxa de freqüência escolar e sobre o trabalho infantil nas crianças de 6 a 14 anos. Estas duas variáveis foram selecionadas para o seu estudo, pois ao nosso entender estas são as principais variáveis que são influenciadas pelo programa JUNTOS e que tem uma influencia direta sobre o capital humano das crianças e assim sobre a diminuição da pobreza futura. As principais hipóteses derivadas das teorias de capital humano e de transferências de rendas condicionadas foram corroboradas pela nossa avaliação: (1) o programa JUNTOS tem um efeito positivo sobre o incremento da freqüência escolar, (2) o programa JUNTOS é efetivo na redução do trabalho infantil, (3) quando o chefe de família é de sexo feminino, a renda familiar é utilizada em bens e serviços em favor das crianças, e (4) o efeito do programa JUNTOS é maior nas crianças com piores características socioeconômicas (ex: menor renda familiar per capita, chefe de família com poucos anos de estudo, idioma do chefe de família, etc.) Outra conclusão importante da dissertação foi que o programa JUNTOS provoca uma realocação na oferta de trabalho intra familiar.

Os impactos do sistema ‘CAPES’ de avaliação sobre o trabalho docente na pós-graduação: o caso da UFPA

Este estudo tem como objetivo central analisar os impactos do sistema ‘CAPES’ de avaliação da pós-graduação sobre o trabalho docente na Universidade Federal do Pará. Para tanto, o estudo se utiliza de documentos oficiais que versam sobre a política de avaliação da pós graduação no Brasil e de entrevistas com professores de três programas de pós-graduação da UFPA. Parte-se da premissa de que o processo de reestruturação produtiva e a reforma do estado brasileiro têm induzido mudanças no ensino superior com centralidade para as políticas de avaliação e para o trabalho do professor. Essas mudanças no ensino superior consolidam um projeto de universidade pensado desde os organismos internacionais do capital que pressupõem a diluição de fronteiras entre o público e o privado no que toca à expansão, ao financiamento, à avaliação, à autonomia e à produção do conhecimento. A pós-graduação é o locus privilegiado da implementação da reforma do ensino superior no Brasil, visto que as influências do mercado são claramente visíveis no modelo de avaliação dos programas de pós-graduação da CAPES. Trata-se, pois, de um processo que se dá em âmbito continental de conformação de uma nova regulação educativa assentado no tripé financiamento per capita, gestão local e avaliação sistêmica. Nesse contexto, o trabalho docente, entendido como o principal responsável pelos resultados educacionais, passa por um profundo processo de reestruturação com repercussões em sua natureza, finalidade e sentidos. A investigação demonstra que o sistema ‘CAPES’ de avaliação dos programas de pós-graduação, como expressão da nova regulação educacional na América Latina, confere centralidade ao trabalho do professor no processo de avaliação dos programas e o responsabiliza pelos resultados com base em critérios formulados de acordo com interesses externos à lógica e ao tempo da produção do conhecimento científico. O resultado da implantação dessa lógica na pósgraduação para os professores é a intensificação do trabalho por meio de um surto produtivista jamais visto, a precarização das condições de produção e o adoecimento docente. Para a instituição educacional, vê-se uma transformação em seu ethos e em sua identidade que têm modificado a cultura acadêmica de modo a aproximá-la cada vez mais em sua estrutura, funcionamento e atividade-fim das empresas privadas.

Análise estatística do acervo de recursos educacionais em saúde da UNA-SUS

O Sistema Universidade Aberta do SUS (UNA-SUS), responsável por grande parte da oferta e produção de cursos a distância para profissionais de saúde, é forma-da por: (1) Rede de Instituições de Ensino (IE’s); (2) Plataforma Arouca ; e (3) Acervo de Recusos Educacionais em Saúde (ARES). Uma vez que a alimentação do ARES se dá de forma federativa, o monitoramento estatístico do Acervo busca não só acompanhar as métricas de seu alcance e uso, mas também incentivar o depósito de recursos produzidos pelas IE’s, com a divulgação dos números que reflitam sua visibilidade no ARES. Verificou-se assim a necessidade de coletar dados de acesso externo e estabelecer indicadores que orientassem ações capazes de ampliar sua visibilidade, bem como, aprimorar suas funcionalidades.

Perspectiva das mulheres na avaliação do Programa de Humanização do Pré-Natal e Nascimento

OBJETIVO: Analisar a importância da inclusão da perspectiva das mulheres na avaliação do Programa de Humanização do Pré-Natal e Nascimento. PROCEDIMENTOS METODOLÓGICOS: Estudo qualitativo realizado em base a dados primários coletados para a avaliação do Programa de Humanização do Pré-Natal e Nascimento, do Ministério da Saúde, em 2003, em sete municípios das cinco regiões do Brasil, selecionados a partir de dados extraídos de sistemas de bancos de dados oficiais já existentes. Um dos atores considerado fundamental para a coleta de informações foi a mulher atendida pelo Programa, abordada por meio de dezesseis grupos focais realizados em unidades de saúde. Para o tratamento dos dados empíricos foi utilizado o método do Discurso do Sujeito Coletivo. A análise e discussão foram realizadas com o apoio dos conceitos em saúde pública de acessibilidade e Saúde Paidéia. ANÁLISE DOS RESULTADOS: O Programa estudado normatiza para todos os serviços de saúde do país os procedimentos para a atenção ao pré-natal e o parto e os fluxos a serem observados. A análise do discurso das gestantes, nos grupos focais realizados, trouxe clareza quanto à dissonância existente entre muitas dessas recomendações e os desejos e necessidades da mulher, o que faz com que ela procure traçar para si um outro fluxo de atendimentos. Esta ocorrência traz prejuízos ao vínculo que estabelece com o serviço de saúde, além de dificuldades de controle pelo serviço do seguimento real que está sendo oferecido. CONCLUSÕES: A reflexão realizada do Programa, tomando por base a perspectiva das mulheres atendidas, identificou aspectos cuja consideração no momento da avaliação poderia resultar em maior efetividade e humanização do controle pré-natal oferecido

Atuando em contexto : o processo de avaliação numa perspectiva inclusiva

Para que a diversidade possa se fazer presente, a base da educação de alunos com necessidade educativas especiais (n.e.e.) precisa se construir numa abordagem de apoio colaborativo. Neste relato buscamos evidenciar o processo de repensar a avaliação educacional de um aluno da segunda série. A partir do trabalho com a professora e a pedagoga, definimos aspectos a serem avaliados e um projeto educativo para o aluno a ser trabalhado na sala de aula. O estudo deste caso desencadeou uma atitude de mudança quanto à avaliação nos profissionais das séries iniciais, trazendo à tona inúmeras questões sobre o processo de avaliação naquela escola. Os dados nos mostraram a processualidade do trabalho e como é difícil passar de uma avaliação diagnóstica por especialistas para uma avaliação pedagógica das condições de ensino-aprendizagem.

Empreendedores de políticas públicas na implementação de programas governamentais

Este artigo traz novo olhar para a implementação de programas governamentais, aproximando as literaturas de políticas públicas, implementação e inovação. Procurou-se investigar a forma de atuação de diretoras de escolas do Distrito Federal na implementação de dois programas distritais. Foi evidenciado que há, entre as entrevistadas, pessoas que se aproximam de champions e de empreendedores de políticas públicas e que há características que diferenciam implementadores empreendedores de não empreendedores. Foram encontradas semelhanças entre os conceitos de champions, empreendedores de políticas públicas e implementadores de programas, assim como há pontos em comum entre as fases de inovação e as etapas do ciclo de políticas públicas. Essas semelhanças abrem a possibilidade de diálogo frutífero entre esses dois campos de estudo e possibilita a ampliação dos estudos sobre implementação.

O problema da avaliação em Saúde Pública

Após discussão do conceito de avaliação, a partir das clássicas idéias de controle administrativo, foram indicados alguns dos critérios mais freqüentemente utilizados na avaliação dos programas de saúde. Chama-se a atenção, todavia, para os riscos inerentes a tais critérios, derivados do fato de que a problemática de saúde - como reflexo das condições gerais de vida - é fortemente afetada por fatores impermeáveis às ações específicas do setor. Daí a necessidade do emprego de critérios mais simples, que permitam estabelecer uma relação de causa e efeito entre as ações desenvolvidas e os resultados alcançados.

Abordagem antropológica para avaliação de políticas sociais

Apresenta-se uma abordgem antropológica relativa à avaliação de programas de saúde. Destaca-se o papel da antropologia, que sai de seu âmbito tradicional de pesquisa básica, para compor, de forma interdisciplinar com a medicina social um enfoque particular de avaliação de políticas públicas e, mais estritamente, de serviços de saúde. Coloca-se a antropologia dentro de um processo social mais abrangente, ao qual serve com seus instrumentos peculiares de apreensão da realidade. Baseando-se em pesquisa empírica de avaliação da assistência primária à saúde, numa favela do Rio de Janeiro, mostra que a abordagem qualitativa na avaliação de programas de saúde pode ser uma contribuição importante que ajuda a superar as tendências positivistas do processo avaliativo e a aprofundar visão mais totalizante do fenômeno saúde-doença.

Avaliação da prática de vigilância epidemiológica nos serviços públicos de saúde no Brasil

São apresentados os resultados da avaliação de processo das atividades de vigilância epidemiológica, realizada em 1985, em 948 unidades de saúde situadas em 98 dos mais populosos municípios de cada Estado brasileiro. Foram analisados os seguintes aspectos: fluxo de informações, análise de dados e realização de investigação epidemiológica. Foram considerados potencialmente determinantes do desempenho: inserção institucional, atividades de vacinação, aspectos gerenciais e capacitação em serviço. A análise estatística baseou-se na análise de correspondência múltipla e na classificação hierárquica ascendente, disponíveis no programa "Systeme Portable Pur L' Analise De Données -SPAD". As unidades avaliadas não apresentaram padrão uniforme de desempenho, sendo classificadas em seis grupos segundo a atuação na vigilância epidemiológica. Em 53,7% das unidades foi observado desrespeito às normas mais elementares das atividades de vigilância epidemiológica. A presença de atividades de vacinação nas unidades estava relacionada com um melhor desempenho em vigilância epidemiológica. Foi apontada a necessidade de rever o modelo de vigilância epidemiológica ainda em uso no país, pois não é mais concebível a redução da epidemiologia dos serviços de saúde às doenças transmissíveis ou o gerenciamento dos serviços e programas sem a informação epidemiológica.