Making randomised trials more efficient: report of the first meeting to discuss the Trial Forge platform

Randomised trials are at the heart of evidence-based healthcare, but the methods and infrastructure for conducting these sometimes complex studies are largely evidence free. Trial Forge (www.trialforge.org) is an initiative that aims to increase the evidence base for trial decision making and, in doing so, to improve trial efficiency.

This paper summarises a one-day workshop held in Edinburgh on 10 July 2014 to discuss Trial Forge and how to advance this initiative. We first outline the problem of inefficiency in randomised trials and go on to describe Trial Forge. We present participants' views on the processes in the life of a randomised trial that should be covered by Trial Forge.

General support existed at the workshop for the Trial Forge approach to increase the evidence base for making randomised trial decisions and for improving trial efficiency. Agreed upon key processes included choosing the right research question; logistical planning for delivery, training of staff, recruitment, and retention; data management and dissemination; and close down. The process of linking to existing initiatives where possible was considered crucial. Trial Forge will not be a guideline or a checklist but a 'go to' website for research on randomised trials methods, with a linked programme of applied methodology research, coupled to an effective evidence-dissemination process. Moreover, it will support an informal network of interested trialists who meet virtually (online) and occasionally in person to build capacity and knowledge in the design and conduct of efficient randomised trials.

Some of the resources invested in randomised trials are wasted because of limited evidence upon which to base many aspects of design, conduct, analysis, and reporting of clinical trials. Trial Forge will help to address this lack of evidence.

Portuguese Adaptation of Students Engagement in Schools International Scale (SESIS)

The importance of student’s engagement has been recently pointed out in research. However, there has been a lack of engagement assessment instrument, pertaining psychometric qualities. Objective: This paper presents the Portuguese adaptation of the “Student’s Engagement in School International Scale” (SESIS), drawn up from a12 countries international study (Lam et al., 2012; Lam et al., in press). Method: Psychometric properties of this scale were examined with data from 685 students from different grades (6th, 7th, 9th and 10th), from both sexes, and different regions of the country. Results: Factorial analysis of the results, with varimax rotation, lead to three different factors which explain 50.88% of the variance. The scale integrates the original 33 items, and cognitive, affective and behavioural dimensions. For the external validity study, the relationship between student’s engagement in school results and other school variables — academic performance, self-concept — was considered, and significant relations were observed, as expected. Conclusion: The data presented highlights the qualities of SESIS, as well as its usefulness for research purposes. Suggestion: It is suggested the investigation of the extension of SESIS’s three-dimensionality, in future studiesKeywords: Innovation, technology, research projects, etc. [Arial 10-point, justified alignment].

Portuguese Adaptation of Students Engagement in Schools International Scale (Sesis)

The importance of student’s engagement has been recently pointed out in research. However, there has been a lack of engagement assessment instruments, showing psychometric qualities, such as reliability and validity. Objective: This paper presents the Portuguese adaptation of the “Student’s Engagement in Schools International Scale” (SESIS), drawn up from 12 countries international study (Lam et al., 2012; Lam et al., in press). Method: Psychometric properties of this scale were examined using data from 685 students, of both sexes, and from different grades (6th, 7th, 9th and 10th), and regions of the country. Results: Factorial analysis of the results, with varimax rotation, conducted to three different factors which explain 62,19% of the variance. The scale integrates the original 33 items, and cognitive, affective and behavioural dimensions. For the external validity study, the relationship between student’s engagement in school results and other school variables — academic performance, school conduct — was considered, and significant relations were observed, as expected. Conclusion: The data presented highlights the qualities of SESIS, as well as its usefulness for research purpose. Suggestion: It is suggested the investigation of the extension of SESIS’s three-dimensionality, in future studies

Research into the Impact of School Leadership on Pupil Outcomes: Policy and Research Contexts

This paper extends the introduction to the authors’ study of successful school leadership and how it influences pupil outcomes begun in the Editorial introduction. Critical to an appreciation especially of the external validity of their results is an understanding of the policy context in which the English leaders in their study found themselves; this is a policy context dominated by concerns for external accountability and increases in the academic performance of pupils. In addition to describing this context, the paper summarises the conceptual and methodological framework that guided the early stage of their research and outlines their mixed-methods research design.

Essai clinique randomisé visant à évaluer l’efficacité du lavage des cavités nasales à l’aide d’une solution saline dans la prévention des otites moyennes aiguës à répétition

Introduction: Les instillations nasales de solution saline isotonique (INSS) chez les enfants sont recommandées par les pédiatres et des oto-rhino-laryngologistes de notre institution dans le but de prévenir les otites moyennes aigues à répétition (OMAr). Cependant, aucune étude dans la littérature ne vient corroborer ou infirmer cette pratique. Objectifs: Déterminer l’efficacité des INSS dans la prévention des OMAr. Méthode: Projet pilote d’un essai clinique randomisé. Les enfants diagnostiqués avec des OMAr étaient éligibles. Les patients recrutés ont été randomisés en 2 groupes. Seul le groupe traitement procède aux INSS. L’issue primaire est l’incidence d’OMAr pendant une période de 3 mois. Résultats: Vingt-neuf patients satisfaisant les critères d’inclusion et d’exclusion ont consenti à participer. Le taux d’OMAr était inférieur dans le groupe traitement (p=0.03, chi-carré) Conclusion: Les INSS semblent efficaces dans la prévention des OMAr. Une étude multicentrique est indiquée pour vérifier la validité externe et confirmer la sécurité.

Évaluation de l'impact clinique et économique du développement d'un traitement pour la schizophrénie

Contexte : Les stratégies pharmacologiques pour traiter la schizophrénie reçoivent une attention croissante due au développement de nouvelles pharmacothérapies plus efficaces, mieux tolérées mais plus coûteuses. La schizophrénie est une maladie chronique présentant différents états spécifiques et définis par leur sévérité. Objectifs : Ce programme de recherche vise à: 1) Évaluer les facteurs associés au risque d'être dans un état spécifique de la schizophrénie, afin de construire les fonctions de risque de la modélisation du cours naturel de la schizophrénie; 2) Développer et valider un modèle de Markov avec microsimulations de Monte-Carlo, afin de simuler l'évolution naturelle des patients qui sont nouvellement diagnostiqués pour la schizophrénie, en fonction du profil individuel des facteurs de risque; 3) Estimer le coût direct de la schizophrénie (pour les soins de santé et autres non reliés aux soins de santé) dans la perspective gouvernementale et simuler l’impact clinique et économique du développement d’un traitement dans une cohorte de patients nouvellement diagnostiqués avec la schizophrénie, suivis pendant les cinq premières années post-diagnostic. Méthode : Pour le premier objectif de ce programme de recherche, un total de 14 320 patients nouvellement diagnostiqués avec la schizophrénie ont été identifiés dans les bases de données de la RAMQ et de Med-Echo. Les six états spécifiques de la schizophrénie ont été définis : le premier épisode (FE), l'état de dépendance faible (LDS), l’état de dépendance élevée (HDS), l’état stable (Stable), l’état de bien-être (Well) et l'état de décès (Death). Pour évaluer les facteurs associés au risque de se trouver dans chacun des états spécifiques de la schizophrénie, nous avons construit 4 fonctions de risque en se basant sur l'analyse de risque proportionnel de Cox pour des risques compétitifs. Pour le deuxième objectif, nous avons élaboré et validé un modèle de Markov avec microsimulations de Monte-Carlo intégrant les six états spécifiques de la schizophrénie. Dans le modèle, chaque sujet avait ses propres probabilités de transition entre les états spécifiques de la schizophrénie. Ces probabilités ont été estimées en utilisant la méthode de la fonction d'incidence cumulée. Pour le troisième objectif, nous avons utilisé le modèle de Markov développé précédemment. Ce modèle inclut les coûts directs de soins de santé, estimés en utilisant les bases de données de la Régie de l'assurance maladie du Québec et Med-Echo, et les coûts directs autres que pour les soins de santé, estimés à partir des enquêtes et publications de Statistique Canada. Résultats : Un total de 14 320 personnes nouvellement diagnostiquées avec la schizophrénie ont été identifiées dans la cohorte à l'étude. Le suivi moyen des sujets était de 4,4 (± 2,6) ans. Parmi les facteurs associés à l’évolution de la schizophrénie, on peut énumérer l’âge, le sexe, le traitement pour la schizophrénie et les comorbidités. Après une période de cinq ans, nos résultats montrent que 41% des patients seront considérés guéris, 13% seront dans un état stable et 3,4% seront décédés. Au cours des 5 premières années après le diagnostic de schizophrénie, le coût direct moyen de soins de santé et autres que les soins de santé a été estimé à 36 701 $ canadiens (CAN) (95% CI: 36 264-37 138). Le coût des soins de santé a représenté 56,2% du coût direct, le coût de l'aide sociale 34,6% et le coût associé à l’institutionnalisation dans les établissements de soins de longue durée 9,2%. Si un nouveau traitement était disponible et offrait une augmentation de 20% de l'efficacité thérapeutique, le coût direct des soins de santé et autres que les soins de santé pourrait être réduit jusqu’à 14,2%. Conclusion : Nous avons identifié des facteurs associés à l’évolution de la schizophrénie. Le modèle de Markov que nous avons développé est le premier modèle canadien intégrant des probabilités de transition ajustées pour le profil individuel des facteurs de risque, en utilisant des données réelles. Le modèle montre une bonne validité interne et externe. Nos résultats indiquent qu’un nouveau traitement pourrait éventuellement réduire les hospitalisations et le coût associé aux établissements de soins de longue durée, augmenter les chances des patients de retourner sur le marché du travail et ainsi contribuer à la réduction du coût de l'aide sociale.

Development and evaluation of a research-based prosthodontic clinical record

Introduction: Bien que l'importance de transférer les données de la recherche à la pratique a été largement démontrée, ce processus est toujours lent et fait face à plusieurs défis tels que la conceptualisation des évidences, la validité interne et externe de la recherche scientifique et les coûts élevés de la collecte de grandes quantités de données axées sur le patient. Les dossiers dentaires des patients contiennent des renseignements valables qui donneraient aux chercheurs cliniques une opportunité d'utiliser un large éventail d'informations quantitatives ou qualitatives. La standardisation du dossier clinique permettrait d’échanger et de réutiliser des données dans différents domaines de recherche. Objectifs: Le but de cette étude était de concevoir un dossier patient axé sur la recherche dans le domaine de la prosthodontie amovible à la clinique de premier cycle de l’Université de Montréal. Méthodes: Cette étude a utilisé des méthodes de recherche-action avec 4 étapes séquentielles : l'identification des problèmes, la collecte et l'interprétation des données, la planification et l’évaluation de l'action. Les participants de l'étude (n=14) incluaient des professeurs, des chercheurs cliniques et des instructeurs cliniques dans le domaine de la prosthodontie amovible. La collecte des données a été menée à l’aide d’une revue de littérature ciblée et complète sur les résultats en prosthodontie ainsi que par le biais de discussions de groupes et d’entrevues. Les données qualitatives ont été analysées en utilisant QDA Miner 3.2.3. Résultats: Les participants de l'étude ont soulevé plusieurs points absents au formulaire actuel de prosthodontie à la clinique de premier cycle. Ils ont partagé leurs idées pour la conception d'un nouveau dossier-patient basé sur 3 objectifs principaux: les objectifs cliniques, éducatifs et de recherche. Les principaux sujets d’intérêt en prosthodontie amovibles, les instruments appropriés ainsi que les paramètres cliniques ont été sélectionnés par le groupe de recherche. Ces résultats ont été intégrés dans un nouveau formulaire basé sur cette consultation. La pertinence du nouveau formulaire a été évaluée par le même groupe d'experts et les modifications requises ont été effectuées. Les participants de l'étude ont convenu que le cycle de recherche-action doit être poursuivi afin d'évaluer la faisabilité d’implémentation de ce dossier modifié dans un cadre universitaire. Conclusion: Cette étude est une première étape pour développer une base de données dans le domaine de la prothodontie amovible. La recherche-action est une méthode de recherche utile dans ce processus, et les éducateurs académiques sont bien placés pour mener ce type de recherche.

Inclusion and exclusion in nutrigenetics clinical research: ethical & scientific challenges

Background/Aims: There are compelling reasons to ensure participation of ethnic minorities and populations of all ages worldwide in nutrigenetics clinical research. If findings in such research are valid for some individuals, groups, or communities, and not for others, then ethical questions of justice – and not only issues of methodology and external validity – arise. This paper aims to examine inclusion in nutrigenetics clinical research and its scientific and ethical challenges. Methods: 173 publications were identified through a systematic review of clinical studies in nutrigenetics published between 1998 and 2007 inclusively. Data such as participants' demographics as well as eligibility criteria were extracted. Results: There is no consistency in the way participants’ origins (ancestry, ethnicity or race) and ages are described in publications. A vast majority of the studies identified was conducted in North America and Europe and focused on “white” participants. Our results show that pregnant women (and fetuses), minors and the elderly (≥75 years old) remain underrepresented. Conclusion: Representativeness in nutrigenetics research is a challenging ethical and scientific issue. Yet, if nutrigenetics is to benefit whole populations and be used in public and global health agendas, fair representation, as well as clear descriptions of participants in publications are crucial.

Relations entre la mobilité, la condition physique et les fonctions cognitives dans une perspective de vieillissement sain

Thèse effectuée en cotutelle (Université de Poitiers, France)

Factores asociados a calidad de vida en pacientes de hemodiálisis incidentes y prevalentes

Introducción: la insuficiencia renal crónica IRC ha aumentado su prevalencia en los últimos años pasando de 44.7 pacientes por millón en 1993 a 538.46 pacientes por millón en 2010, los pacientes quienes reciben terapia de remplazo renal hemodiálisis en Colombia cada vez tienen una mayor sobrevida. El incremento de los pacientes y el incremento de la sobrevida nos enfocan a mejorar la calidad de vida de los años de diálisis. Metodología: se comparó la calidad de vida por medio del SF-36 en 154 pacientes con IRC estadio terminal en manejo con hemodiálisis, 77 pacientes incidentes y 77 pacientes prevalentes, pertenecientes a una unidad renal en Bogotá, Colombia. Resultados: se encontró una disminución de la calidad de vida en los componentes físicos (PCS) y metales (MCS) de los pacientes de hemodiálisis en ambos grupos. En el modelo de regresión logística la incapacidad laboral (p=0.05), el uso de catéter (p= 0,000), el bajo índice de masa corporal (p=0.021), la hipoalbuminemia (p=0,033) y la anemia (p=0,001) fueron factores determinantes en un 78,9% de baja calidad de vida de PCS en los pacientes incidentes con respecto a los prevalentes. En el MCS de los pacientes incidentes vs. Prevalentes se encontró la hipoalbuminemia (p=0.007), la anemia (p=0.001) y el acceso por catéter (p=0.001) como factores determinantes en un 70.6% de bajo MCS Conclusiones: la calidad de vida de los pacientes de diálisis se encuentra afectada con mayor repercusión en el grupo de los pacientes incidentes, se debe mejorar los aspectos nutricionales, hematológicos y de acceso vascular en este grupo.

the implication of social cognition for experimental economics From the issue entitled "Special issue on Experimental economics and the social embedding of economic behavior and cognition"

Can human social cognitive processes and social motives be grasped by the methods of experimental economics? Experimental studies of strategic cognition and social preferences contribute to our understanding of the social aspects of economic decisions making. Yet, papers in this issue argue that the social aspects of decision-making introduce several difficulties for interpreting the results of economic experiments. In particular, the laboratory is itself a social context, and in many respects a rather distinctive one, which raises questions of external validity.

Do preference reversals generalise? Results on ambiguity and loss aversion

Preference reversals are frequently observed in the lab, but almost all designs use completely transparent prospects, which are rarely features of decision making elsewhere. This raises questions of external validity. We test the robustness of the phenomenon to gambles that incorporate realistic ambiguity in both payoffs and probabilities. In addition, we test a recent explanation of preference reversals by loss aversion, which would also restrict the incidence of reversals outside the lab. According to this account, reversals occur largely because the valuation task endows subject with a gamble, activating loss aversion. This contrasts with the choice task, where the reference point is pre-experiment wealth. We test this explanation by holding the reference point constant. Our evidence suggests that reversals are only slightly diminished with ambiguity. We find no evidence supporting their explanation by loss aversion.

The paradox of nationalism: the common denominator of radical right and radical left euroscepticism

What can explain the strong euroscepticism of radical parties of both the right and the left? This article argues that the answer lies in the paradoxical role of nationalism as a central element in both party families, motivating opposition towards European integration. Conventionally, the link between nationalism and euroscepticism is understood solely as a prerogative of radical right-wing parties, whereas radical left-wing euroscepticism is associated with opposition to the neoliberal character of the European Union.This article contests this view. It argues that nationalism cuts across party lines and constitutes the common denominator of both radical right-wing and radical left-wing euroscepticism. It adopts a mixed-methods approach, combining intensive case study analysis with quantitative analysis of party manifestos. First, it traces the link between nationalism and euroscepticism in Greece and France in order to demonstrate the internal validity of the argument. It then undertakes a cross-country statistical estimation to assess the external validity of the argument and its generalisability across Europe.

Measuring students' emotions in the early years: the Achievement Emotions Questionnaire-Elementary School (AEQ-ES)

This article reports about the development and validation of a measurement instrument assessing elementary school students' achievement emotions (Achievement Emotions Questionnaire-Elementary School, AEQ-ES). Specifically, the instrument assesses students' enjoyment, anxiety, and boredom pertaining to three types of academic settings (i.e., attending class, doing homework, and taking tests and exams). Scale construction was based on Pekrun's (2006) control-value theory of achievement emotions. The instrument was tested using samples from German and American elementary school classrooms. The results of Study 1 (German sample) corroborate the reliability and structural validity of the new emotion measure. Moreover, they show that students' achievement emotions were linked with their control and value appraisals as well as their academic performance, thus supporting the external validity of the measure as well as propositions of Pekrun's (2006) control-value theory of achievement emotions. Study 2 (American sample) corroborated the cross-cultural equivalence of the measure and the generalizability of findings across the German and American samples. Implications for research on achievement emotions and educational practice are discussed. (PsycINFO Database Record (c) 2013 APA, all rights reserved)(journal abstract)

Physiological demands of competitive elite cross-country skiing

Introduction Researchers have, for decades, contributed to an increased collective understanding of the physiological demands in cross-country skiing; however, almost all of these studies have used either non-elite subjects and/or performances that emulate cross-country skiing. To establish the physiological demands of cross-country skiing, it is important to relate the investigated physiological variables to the competitive performance of elite skiers. The overall aim of this doctoral thesis was, therefore, to investigate the external validity of physiological test variables to determine the physiological demands in competitive elite cross-country skiing. Methods The subjects in Study I – IV were elite male (I – III) and female (III – IV) cross-country skiers. In all studies, the relationship between test variables (general and ski-specific) and competitive performances (i.e. the results from competitions or the overall ski-ranking points of the International Ski Federation (FIS) for sprint (FISsprint) and distance (FISdist) races) were analysed. Test variables reflecting the subject’s general strength, upper-body and whole-body oxygen uptake, oxygen uptake and work intensity at the lactate threshold, mean upper-body power, lean mass, and maximal double-poling speed were investigated. Results The ability to maintain a high work rate without accumulating lactate is an indicator of distance performance, independent of sex (I, IV). Independent of sex, high oxygen uptake in whole-body and upper-body exercise was important for both sprint (II, IV) and distance (I, IV) performance. The maximal double-poling speed and 60-s double-poling mean power output were indicators of sprint (IV) and distance performance (I), respectively. Lean mass was correlated with distance performance for women (III), whereas correlations were found between lean mass and sprint performance among both male and female skiers (III). Moreover, no correlations between distance performance and test variables were derived from tests of knee-extension peak torque, vertical jumps, or double poling on a ski-ergometer with 20-s and 360-s durations (I), whereas gross efficiency while treadmill roller skiing showed no correlation with either distance or sprint performance in cross-country skiing (IV). Conclusion The results in this thesis show that, depending on discipline and sex, maximal and peak oxygen uptake, work intensity at the lactate threshold, lean mass, double-poling mean power output, and double-poling maximal speed are all externally valid physiological test variables for evaluation of performance capability among elite cross-country skiers; however, to optimally indicate performance capability different test-variable expressions should be used; in general, the absolute expression appears to be a better indicator of competitive sprint performance whereas the influence of body mass should be considered when evaluating competitive distance performance capability of elite cross-country skiers.