Novas abordagens na avaliação e construção de rankings

Esta tese apresenta algumas abordagens ainda não exploradas na avaliação e construção de rankings, exclusivamente daqueles baseados em indicadores compostos. Para isso, três artigos foram desenvolvidos com o intuito de evoluir com uma literatura genericamente aplicável, ou seja, não restrita a contextos de rankings específicos. No primeiro desses artigos, composto por três estudos, mostrou-se que as informações percebidas pelos usuários através dos rankings nem sempre são fornecidas por eles. No segundo, o qual pode ser entendido como uma extensão do primeiro, propôs-se a criação de uma métrica – intitulada COMP – destinada a mensurar o grau de compatibilidade entre as informações percebidas pelos usuários e aquelas fornecidas pelos rankings. No terceiro artigo, independente dos dois primeiros, explorou-se o potencial da Teoria de Resposta ao Item (TRI) enquanto metodologia para a avaliação e construção de rankings. Para isso, dois estudos, o primeiro deles focado no Failed States Index (FSI) e o segundo no Index of Economic Freedom (IEF) foram desenvolvidos para mostrar as potencialidades da metodologia proposta.

This thesis presents some unexplored approaches in rankings evaluation and building, particularly in those based upon composite indicators. To do so, three papers have been developed with the goal of evolve a generic literature, that is it, not restricted to the specific context of a single ranking. In the first one, composed by three studies, it is shown that the information perceived by users toward rankings are not necessarily provided by the rankings. In the second paper, that could be interpreted as an extension of the first one, a metric – named COMP – has been proposed designed to measure the compatibility level between the information perceived by users with those provided by rankings. The last one, independent of the firsts, has explored the potential of Item Response Theory (IRT) as a methodology to be applied on rankings evaluation and building. To do so, two studies, the first one focused on the Failed States Index (FSI) and the last one on the Index of Economic Freedom (IEF) have been developed to show the potentiality of the proposed methodology.