Pensando a pós-graduação em educação a partir dos critérios da avaliação trienal da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior/Capes

Este trabalho tem o objetivo de pensar a pós-graduação em educação a partir dos critérios da avaliação trienal realizada pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Capes). Para cumprir o objetivo proposto dividimos o trabalho em três capítulos. No primeiro capítulo, a partir do estudo da definição da natureza da pós-graduação, contida no Pareceres n 977/65, percebemos que existe um entrelaçamento entre a trajetória da universidade e da pós-graduação no Brasil. Nesse sentido, fizemos um histórico do ensino superior brasileiro com ênfase no entrelaçamento que existe entre a trajetória da universidade e a trajetória da pós-graduação. Esse entrelaçamento, de forma geral, contribuiu para percebemos o processo de verticalização do ensino superior com a separação entre ensino e pesquisa, o primeiro sob responsabilidade dos cursos de graduação e a segunda sob a responsabilidade dos cursos de pós-graduação stricto sensu. No segundo capítulo, realizamos um histórico da pós-graduação em educação com o objetivo de destacar sua expansão, durante a década de 70, até meados da década de 80. Nesse processo de expansão, a pesquisa científica foi um fator determinante das atividades dos programas de mestrado e doutorado. Em seguida, consideraremos a história dos programas de pós-graduação em educação das universidades, PUC-Rio, UFRJ e UERJ. Por fim, no terceiro capítulo, voltamos a nossa atenção para a forma como a avaliação da pós-graduação brasileira foi organizada pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Capes). Nesse sentido, relacionamos essa nova sistemática com documentos elaborados para serem utilizados na última avaliação trienal da Capes, referente ao período de 2007 a 2009, neste caso nos referimos aos seguintes documentos: Regulamento para a avaliação trienal 2010 (2007-2009) e Documento da Área de Educação 2009, associando, de forma geral, as diretrizes desses documentos com os dados do Caderno de Indicadores dos programas de pós-graduação em educação da PUC-Rio, da UFRJ e da UERJ.

Para que serve a dupla avaliação cega por pares?: poder estatal e autorregulação na avaliação dos programas de pós-graduação

Este texto analisa o papel das revistas no processo de avaliação do sistema brasileiro de pós-graduação de acordo com as regras do Qualis e do SciELO. Sustenta que as revistas são titulares do “direito-função” de selecionar artigos por meio da dupla avaliação cega por pares, direito este que deve ser exercido em prol da comunidade acadêmica. Por esta razão, o texto mostra que as revistas são um mecanismo de autorregulação da avaliação da pós-graduação brasileira. Em sua parte final, o artigo discute a relação entre este modelo de avaliação e a tradição jurídica brasileira, em especial, nossa maneira de praticar e refletir sobre a dogmática jurídica no Brasil.

Os impactos do sistema ‘CAPES’ de avaliação sobre o trabalho docente na pós-graduação: o caso da UFPA

Este estudo tem como objetivo central analisar os impactos do sistema ‘CAPES’ de avaliação da pós-graduação sobre o trabalho docente na Universidade Federal do Pará. Para tanto, o estudo se utiliza de documentos oficiais que versam sobre a política de avaliação da pós graduação no Brasil e de entrevistas com professores de três programas de pós-graduação da UFPA. Parte-se da premissa de que o processo de reestruturação produtiva e a reforma do estado brasileiro têm induzido mudanças no ensino superior com centralidade para as políticas de avaliação e para o trabalho do professor. Essas mudanças no ensino superior consolidam um projeto de universidade pensado desde os organismos internacionais do capital que pressupõem a diluição de fronteiras entre o público e o privado no que toca à expansão, ao financiamento, à avaliação, à autonomia e à produção do conhecimento. A pós-graduação é o locus privilegiado da implementação da reforma do ensino superior no Brasil, visto que as influências do mercado são claramente visíveis no modelo de avaliação dos programas de pós-graduação da CAPES. Trata-se, pois, de um processo que se dá em âmbito continental de conformação de uma nova regulação educativa assentado no tripé financiamento per capita, gestão local e avaliação sistêmica. Nesse contexto, o trabalho docente, entendido como o principal responsável pelos resultados educacionais, passa por um profundo processo de reestruturação com repercussões em sua natureza, finalidade e sentidos. A investigação demonstra que o sistema ‘CAPES’ de avaliação dos programas de pós-graduação, como expressão da nova regulação educacional na América Latina, confere centralidade ao trabalho do professor no processo de avaliação dos programas e o responsabiliza pelos resultados com base em critérios formulados de acordo com interesses externos à lógica e ao tempo da produção do conhecimento científico. O resultado da implantação dessa lógica na pósgraduação para os professores é a intensificação do trabalho por meio de um surto produtivista jamais visto, a precarização das condições de produção e o adoecimento docente. Para a instituição educacional, vê-se uma transformação em seu ethos e em sua identidade que têm modificado a cultura acadêmica de modo a aproximá-la cada vez mais em sua estrutura, funcionamento e atividade-fim das empresas privadas.

Indicadores de avaliação de programas de pós-graduação no Brasil: uma análise multivariada na área de Matemática

Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)

Indicadores de impacto, visibilidade e colaboração para a produção científica da Pós-graduação brasileira: um estudo nos programas de excelência na área de Zootecnia

Pós-graduação em Ciência da Informação - FFC

Produção científica dos Programas de Pós-Graduação de excelência no Brasil: colaboração internacional e impacto na área de Zootecnia

This research aimed to study the international scientific collaboration, through co-authorship, and the impact of full papers published in journals Qualis A1 and A2 of Graduate Programs in Animal Science of excellence (2007-2009). Through the indicators of production of graduate evaluation from CAPES, the research gathered the scientific production of three graduate programs, adding up to 125 articles. The citations received were gathered from the SCOPUS database and the impact of journals from the SCImago Journal & Country Rank. In order to investigate the correlation among the indicators analyzed, Pearson’s linear correlation coefficients were calculated. It was observed that the Impact Factor (IF) of the journal may influence the number of citations and that there is a weak trend for association of IFs with the number of coauthor countries. It was not observed a statistically significant correlation between the number of collaborating countries and citations received by the article.

Memórias do ensino de ciências no Brasil: a constituição da área segundo pesquisadores brasileiros, origens e avanços da pós-graduação

Fundação de Amparo à Pesquisa do Estado de São Paulo (FAPESP)

Avaliação da eficiência dos programas de pós-graduação acadêmicos em administração, contabilidade e turismo

The Triennial Evaluation of Coordination for the Improvement of Higher Education Personnel (CAPES) is made according to several indicators, divided into several issues and items, and their weights. In these it is evident the importance of scientific periodicals. This study aims to evaluate the relative efficiency of post-graduate students in Business Administration, Accounting and tourism evaluated by CAPES in Brazil. The methodology used the data envelopment analysis - DEA (Data Envelopment Analysis). The data were obtained from the site and organized by the CAPES Qualis score. The analysis was performed by the DEA variable returns to scale, product-oriented (BCC-O), with data from the three-year periods 2004-2006 and 2007-2009. Among the main results are the average increase significantly the relative efficiency of the programs in the period 2007-2009 compared to 2004-2006 period, the highest average efficiency of programs linked to public institutions in relation to private, doctoral programs with the present average efficiency sharply higher than those only with masters, and senior programs in general were more efficient. There is also moderate and significant correlation between the efficiency scores and concepts CAPES. The Malmquist index analysis showed that more than 85% of programs had increased productivity. It is noteworthy that the main effect that influences the increase of the Malmquist index is the displacement of the border (Frontier-shift)

Aplicando análise de envoltória de dados -DEA à avaliação de desempenho acadêmico: um estudo em programas de pós-graduação em engenharia mecânica e produção no Brasil

This Master of Science Thesis deals with applying DEA (Data Envelopment Analysis) to the academic performance evaluation of graduate programs in Brazil, exploring it on a Mechanical and Production Engineering Program 2001-2003 data. The data used is that of the national assessment carried by CAPES, the governmental body in charge for graduate program assessment and certification. It is used the CCR output oriented DEA model, the CCR-Output with Assurance Region, and Window Analysis. The main findings are first that the CCR has the concerning problem of zero values of weights of outputs that is not appropriate in a sense that a graduate program has the higher efficiency score zeroing some output (e.g., number of academic papers published). Secondly, the Assurance Region method proved useful. Third, the Window Analysis also gave some light to the consistency of the performance in the time frame analysed. Also, the analysis results in the understanding that the Mechanics and Production Engineering should not be assessed jointly like currently applied by CAPES and rather should be assessed in its own field separately. Finally, the result of the DEA analysis showed some serious inconsistencies with the CAPES method. Graduate programs considered excellent has got low performance score and vice versa. This Thesis provides a strong argument in order to use DEA at least as a complimentary methodology for graduate program performance evaluation in Brazil

Bolton freeware: aplicativo de avaliação de discrepância de massa dentária desenvolvido pelo programa de pós-graduação em odontologia/UFRN

The calculation of tooth mass discrepancy, essential for good planning and a proper orthodontic finishing, when performed manually, besides being laborious, requires considerable time consumption. The aim of this study was to develop and test Bolton Freeware, a software for analysis of the tooth mass discrepancy of Bolton, aiming to minimize the consumption of time in a less onerous way. The digital analysis of the software was done by means of two-dimensional scanning of plaster study models and compared to manual evaluation (gold standard), using 75 pairs of stone plaster study models divided into two groups according to the magnitude of the Curve of Spee (group I from 0 to 2 mm, group II greater than 2 to 3mm). All the models had permanent dentition and were in perfect condition. The manual evaluation was performed with a digital caliper and a calculator, and the time required to perform the analysis for both methods was recorded and compared. In addition, the software was evaluated by orthodontists regarding its use, by means of questionnaires developed specifically for this purpose. Calibration was performed prior to manual analysis, and excellent levels of inter-rater agreement were achieved, with ICC > 0.75 and r > 0.9 for total and anterior proportion. It was observed in the evaluation of error of the digital method that some teeth showed a significant systematic error, being the highest measured at 0.08 mm. The analysis of total tooth mass discrepancy performed by Bolton Freeware, for those cases in which the curve of Spee is mild and moderate, differ from manual analysis, on average, 0.09 mm and 0.07 mm respectively, for each tooth evaluated, with r> 0, 8 for total and anterior proportion. According to the specificity and sensitivity test, Bolton Freeware has an improved ability to detect true negatives, i.e. the presence of discrepancy. The Bolton analysis digitally performed was faster, with an average difference of time consumed to perform the analysis of Bolton between the two methods of approximately 6 minutes. Most experts interviewed (93%) approved the usability of the software

A atuação profissional dos egressos como importante dimensão no processo de avaliação de programas de pós-graduação

A análise do quadro geral da inserção profissional dos egressos é uma forma inequívoca para avaliação de Programas de Pós-Graduação no que tange à qualidade de sua formação e preparo de profissionais gabaritados para o mercado de trabalho. Este artigo relata a experiência pioneira do Programa de Pós-Graduação em Geografia- UNESP/ Rio Claro (SP) na construção de instrumentos de avaliação a partir da procedência, formação acadêmica e destino profissional dos egressos, nos níveis de Mestrado e Doutorado, no período de 1980-2008. Os resultados foram resumidos em gráficos e mapas e são elementos importantes para mostrar o desenvolvimento e a disseminação da ciência geográfica no Brasil e no exterior. A metodologia utilizada revelou-se extremamente eficaz, podendo ser utilizada por qualquer Programa, com as devidas adaptações, para avaliar tanto sua realidade quando sua extensão.

Avaliação do perfil de egressos do programa de pós-graduação strictu senso em Educação Escolar: impacto na formação docente e de pesquisador

Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)

Indicadores de Avaliação de Programas de Pós-Graduação: um estudo comparativo na área da Matemática

The aim of this research is to analyze, in a comparative way, by category of grade, some indicators used by Coordination for the Improvement of Higher Education Personnel (CAPES) in evaluating the performance of Graduate Programs in Mathematics in Brazil, for the triennium 2007-2009, in order to contribute to understanding of the complex methodology involved in triennial evaluations of graduate programs. Based on the indicators present in the Comparative Worksheet of Triennial Assessment, Area Mathematics / Probability and Statistics, from 2007 to 2009, present at CAPES Portal, contingency tables were built for the 26 graduate programs in Mathematics, presenting each indicator and the program concepts. Overall, there was a trend of association of all indicators analyzed and the concept obtained, with older and larger programs with better grades in the assessment. Also, with the exception of journal articles Qualis B5, the article average per professor grows as grows the program grade.