Évaluation d’un programme de formation en matière d’agression sexuelle envers les enfants pour les communautés autochtones du Québec

L’agression sexuelle (AS) envers les enfants est une problématique majeure affectant les communautés autochtones. Considérant les conséquences à long terme associées à l’AS, il est primordial que les intervenants soient formés adéquatement pour intervenir en cas d’AS puisque que cette problématique compromet le bien-être des enfants, de leur famille et de leur communauté. Le Centre d’expertise Marie-Vincent, en partenariat avec les communautés autochtones, a mis sur pied une formation en matière d’AS spécifiquement adaptée aux besoins des intervenants. De 2013 à 2015, 161 professionnels œuvrant dans les communautés autochtones ont participé à cette formation. Deux phases de collecte de données distinctes ont été menées pour vérifier l’atteinte des objectifs du programme, soit l’amélioration des connaissances et des interventions en matière d’AS des participants. Lors de la première phase, les participants ont répondu à un questionnaire de réactions et à un test de connaissances. Une étude de cas multiples qualitative comportant quatre communautés a été réalisée lors de la deuxième phase. En plus d’un taux d’appréciation élevé, les résultats révèlent une augmentation significative des connaissances, passant de 54 % à 87 % (t(125) = 16,4, p < 0,001, ηp2 = 0,68). L’analyse des entrevues fait état d’une appropriation des contenus de formation dans la pratique professionnelle des participants. Ces derniers affirment avoir modifié la façon dont ils questionnent les enfants et être plus attentifs aux signes et symptômes d’une AS. Des changements sur le plan des attitudes, notamment sur l’importance du signalement, sont également rapportés. Finalement, la formation est considérée comme l’un des éléments déclencheurs d’une meilleure collaboration intersectorielle dans au moins une communauté.

Performance Information and Innovation in the Canadian Government (Working Paper 43)

The presentation made at the conference addressed the issue of linkages between performance information and innovation within the Canadian federal government1. This is a three‐part paper prepared as background to that presentation. • Part I provides an overview of three main sources of performance information - results-based systems, program evaluation, and centrally driven review exercises – and reviews the Canadian experience with them. • Part II identifies and discusses a number of innovation issues that are common to the literature reviewed for this paper. • Part III examines actual and potential linkages between innovation and performance information. This section suggests that innovation in the Canadian federal government tends to cluster into two groups: smaller initiatives driven by staff or middle management; and much larger projects involving major programs, whole departments or whole-of-government. Readily available data on smaller innovation projects is skimpy but suggests that performance information does not play a major role in stimulating these initiatives. In contrast, two of the examples of large-scale innovation show that performance information plays a critical role at all stages. The paper concludes by supporting the contention of others writing on this topic: that more research is needed on innovation, particularly on its link to performance information. In that context, other conclusions drawn in this paper are tentative but suggest that the quality of performance information is as important for innovation as it is for performance management. However, innovation is likely to require its own particular performance information that may not be generated on a routine basis for purposes of performance management, particularly in the early stages of innovation. And, while the availability of performance information can be an important success factor in innovation, it does not stand alone. The commonality of a number of other factors identified in the literature surveyed for this paper strongly suggests that equal if not greater priority needs to be given to attenuating factors that inhibit innovation and to nurturing incentives.

Estimating Dynamic Treatment Effects from Project STAR (Working Paper 36)

This paper considers the analysis of data from randomized trials which offer a sequence of interventions and suffer from a variety of problems in implementation. In experiments that provide treatment in multiple periods (T>1), subjects have up to 2^{T}-1 counterfactual outcomes to be estimated to determine the full sequence of causal effects from the study. Traditional program evaluation and non-experimental estimators are unable to recover parameters of interest to policy makers in this setting, particularly if there is non-ignorable attrition. We examine these issues in the context of Tennessee's highly influential randomized class size study, Project STAR. We demonstrate how a researcher can estimate the full sequence of dynamic treatment effects using a sequential difference in difference strategy that accounts for attrition due to observables using inverse probability weighting M-estimators. These estimates allow us to recover the structural parameters of the small class effects in the underlying education production function and construct dynamic average treatment effects. We present a complete and different picture of the effectiveness of reduced class size and find that accounting for both attrition due to observables and selection due to unobservable is crucial and necessary with data from Project STAR

Étude d’évaluabilité et évaluation des processus et des effets d’un programme de prévention de l’usage de substances psychoactives lors de la transition primaire-secondaire

La mise en œuvre d’activités de prévention de la consommation de substances psychoactives (SPA) (tabac, alcool et cannabis) en milieu scolaire est une stratégie couramment utilisée pour rejoindre un grand nombre de jeunes. Ces activités s’inspirent, soit de programmes existant, soit d’innovations dictées par le contexte d’implantation ou l’existence de données de recherche. Dans un cas comme dans l’autre, l’évaluation de ces programmes représente la meilleure voie pour mesurer leur efficacité et/ou connaître comment ceux-ci sont implantés. C’est cet impératif qui a motivé une commission scolaire du Québec a recommandé l’évaluation de l’Intervention en Réseau (IR), un programme développé en vue de retarder l’âge d’initiation et de réduire la consommation problématique de SPA chez les élèves. Ce programme adopte une approche novatrice avec pour principal animateur un intervenant pivot (IP) qui assure le suivi des élèves de la 5e année du primaire jusqu’en 3e secondaire. Inspiré des modèles en prévention de la santé et de l’Approche École en santé (AES), le rôle de l’IP ici se démarque de ceux-ci. Certes, il est l’interface entre les différents acteurs impliqués et les élèves mais dans le cadre du programme IR, l’IP est intégré dans les écoles primaires et secondaires qu’il dessert. C’est cet intervenant qui assure la mobilisation des autres acteurs pour la mise en œuvre des activités. Cette thèse vise à rendre compte de ce processus d’évaluation ainsi que des résultats obtenus. L’approche d’évaluation en est une de type participatif et collaboratif avec des données quantitatives et qualitatives recueillies par le biais de questionnaires, d’entrevues, de groupes de discussion, d’un journal de bord et de notes de réunions. Les données ont été analysées dans le cadre de trois articles dont le premier concerne l’étude d’évaluabilité (ÉÉ) du programme. Les participants de cette ÉÉ sont des acteurs-clés du programme (N=13) rencontrés en entrevues. Une analyse documentaire (rapports et journal de bord) a également été effectuée. Cette ÉÉ a permis de clarifier les intentions des initiateurs du programme et les objectifs poursuivis par ces derniers. Elle a également permis de rendre la théorie du programme plus explicite et de développer le modèle logique, deux éléments qui ont facilité les opérations d’évaluation qui ont suivi. Le deuxième article porte sur l’évaluation des processus en utilisant la théorie de l’acteur-réseau (TAR) à travers ses quatre moments du processus de traduction des innovations (la problématisation, l’intéressement, l’enrôlement et la mobilisation des alliés), l’analyse des controverses et du rôle des acteurs humains et non-humains. Après l’analyse des données obtenues par entrevues auprès de 19 informateurs-clés, les résultats montrent que les phases d’implantation du programme passent effectivement par les quatre moments de la TAR, que la gestion des controverses par la négociation et le soutien était nécessaire pour la mobilisation de certains acteurs humains. Cette évaluation des processus a également permis de mettre en évidence le rôle des acteurs non-humains dans le processus d’implantation du programme. Le dernier article concerne une évaluation combinée des effets (volet quantitatif) et des processus (volet qualitatif) du programme. Pour le volet quantitatif, un devis quasi-expérimental a été adopté et les données ont été colligées de façon longitudinale par questionnaires auprès de 901 élèves de 5e et 6e année du primaire et leurs enseignants de 2010 à 2014. L’analyse des données ont montré que le programme n’a pas eu d’effets sur l’accessibilité et les risques perçus, l’usage problématique d’alcool et la polyconsommation (alcool et cannabis) chez les participants. Par contre, les résultats suggèrent que le programme pourrait favoriser la réduction du niveau de consommation et retarder l’âge d’initiation à l’alcool et au cannabis. Ils suggèrent également un effet potentiellement positif du programme sur l’intoxication à l’alcool chez les élèves. Quant au volet qualitatif, il a été réalisé à l’aide d’entrevues avec les intervenants (N=17), de groupes de discussion avec des élèves du secondaire (N=10) et d’une analyse documentaire. Les résultats montrent que le programme bénéficie d’un préjugé favorable de la part des différents acteurs ayant participé à l’évaluation et est bien acceptée par ces derniers. Cependant, le roulement fréquent de personnel et le grand nombre d’écoles à suivre peuvent constituer des obstacles à la bonne marche du programme. En revanche, le leadership et le soutien des directions d’écoles, la collaboration des enseignants, les qualités de l’IP et la flexibilité de la mise en œuvre sont identifiés comme des éléments ayant contribué au succès du programme. Les résultats et leur implication pour les programmes et l’évaluation sont discutés. Enfin, un plan de transfert des connaissances issues de la recherche évaluative est proposé.

Comparison of In-Person Versus Telephone Interviews for Early Syphilis and HIV Partner Services in King County, Washington (2010-2014)

Thesis (Master's)--University of Washington, 2016-08

Évaluation d’un programme de formation en matière d’agression sexuelle envers les enfants pour les communautés autochtones du Québec

L’agression sexuelle (AS) envers les enfants est une problématique majeure affectant les communautés autochtones. Considérant les conséquences à long terme associées à l’AS, il est primordial que les intervenants soient formés adéquatement pour intervenir en cas d’AS puisque que cette problématique compromet le bien-être des enfants, de leur famille et de leur communauté. Le Centre d’expertise Marie-Vincent, en partenariat avec les communautés autochtones, a mis sur pied une formation en matière d’AS spécifiquement adaptée aux besoins des intervenants. De 2013 à 2015, 161 professionnels œuvrant dans les communautés autochtones ont participé à cette formation. Deux phases de collecte de données distinctes ont été menées pour vérifier l’atteinte des objectifs du programme, soit l’amélioration des connaissances et des interventions en matière d’AS des participants. Lors de la première phase, les participants ont répondu à un questionnaire de réactions et à un test de connaissances. Une étude de cas multiples qualitative comportant quatre communautés a été réalisée lors de la deuxième phase. En plus d’un taux d’appréciation élevé, les résultats révèlent une augmentation significative des connaissances, passant de 54 % à 87 % (t(125) = 16,4, p < 0,001, ηp2 = 0,68). L’analyse des entrevues fait état d’une appropriation des contenus de formation dans la pratique professionnelle des participants. Ces derniers affirment avoir modifié la façon dont ils questionnent les enfants et être plus attentifs aux signes et symptômes d’une AS. Des changements sur le plan des attitudes, notamment sur l’importance du signalement, sont également rapportés. Finalement, la formation est considérée comme l’un des éléments déclencheurs d’une meilleure collaboration intersectorielle dans au moins une communauté.

Programa de prevención del consumo de drogas Saluda: evaluación de una nueva versión en adolescentes españoles

En la actualidad se han evaluado numerosas intervenciones preventivas de drogodependencias en el medio escolar. Sin embargo, en España son pocos los estudios que analizan la influencia precisa de cada uno de los componentes específicos a los programas con el fin de determinar cuáles se consideran cruciales para el cambio de conducta de consumo. El objetivo del presente estudio fue evaluar los efectos de una nueva versión del programa de prevención del consumo de drogas Saluda en la que se prescinde del componente fomento del ocio saludable y las tareas para casa. Esta versión reducida fue dirigida a una muestra de 106 escolares (44.6 % chicos) entre 14 y 17 años (M = 15.20; DT = 0.92) de un centro de Educación Secundaria. Se trata de un estudio exploratorio de tipo cuasi experimental y un diseño pre-post de un único grupo. Se realizó diferencia de proporciones mediante la prueba Z y diferencia de medias mediante la prueba T para muestras relacionadas. Los resultados muestran una reducción en el porcentaje de episodios de embriaguez, así como un efecto de mejora significativa sobre las variables protectoras del consumo. Se discuten estos hallazgos y se realizan propuestas para la mejora de futuras intervenciones.

Programa Mais Médicos : uma avaliação dos resultados iniciais referentes ao eixo do provimento emergencial a partir da teoria da avaliação de programas

Dissertação (mestrado)—Universidade de Brasília, Centro de Estudos Avançados Multidisciplinares, Programa de Pós-Graduação em Desenvolvimento Sociedade e Cooperação Internacional, 2016.

Étude d’évaluabilité et évaluation des processus et des effets d’un programme de prévention de l’usage de substances psychoactives lors de la transition primaire-secondaire

La mise en œuvre d’activités de prévention de la consommation de substances psychoactives (SPA) (tabac, alcool et cannabis) en milieu scolaire est une stratégie couramment utilisée pour rejoindre un grand nombre de jeunes. Ces activités s’inspirent, soit de programmes existant, soit d’innovations dictées par le contexte d’implantation ou l’existence de données de recherche. Dans un cas comme dans l’autre, l’évaluation de ces programmes représente la meilleure voie pour mesurer leur efficacité et/ou connaître comment ceux-ci sont implantés. C’est cet impératif qui a motivé une commission scolaire du Québec a recommandé l’évaluation de l’Intervention en Réseau (IR), un programme développé en vue de retarder l’âge d’initiation et de réduire la consommation problématique de SPA chez les élèves. Ce programme adopte une approche novatrice avec pour principal animateur un intervenant pivot (IP) qui assure le suivi des élèves de la 5e année du primaire jusqu’en 3e secondaire. Inspiré des modèles en prévention de la santé et de l’Approche École en santé (AES), le rôle de l’IP ici se démarque de ceux-ci. Certes, il est l’interface entre les différents acteurs impliqués et les élèves mais dans le cadre du programme IR, l’IP est intégré dans les écoles primaires et secondaires qu’il dessert. C’est cet intervenant qui assure la mobilisation des autres acteurs pour la mise en œuvre des activités. Cette thèse vise à rendre compte de ce processus d’évaluation ainsi que des résultats obtenus. L’approche d’évaluation en est une de type participatif et collaboratif avec des données quantitatives et qualitatives recueillies par le biais de questionnaires, d’entrevues, de groupes de discussion, d’un journal de bord et de notes de réunions. Les données ont été analysées dans le cadre de trois articles dont le premier concerne l’étude d’évaluabilité (ÉÉ) du programme. Les participants de cette ÉÉ sont des acteurs-clés du programme (N=13) rencontrés en entrevues. Une analyse documentaire (rapports et journal de bord) a également été effectuée. Cette ÉÉ a permis de clarifier les intentions des initiateurs du programme et les objectifs poursuivis par ces derniers. Elle a également permis de rendre la théorie du programme plus explicite et de développer le modèle logique, deux éléments qui ont facilité les opérations d’évaluation qui ont suivi. Le deuxième article porte sur l’évaluation des processus en utilisant la théorie de l’acteur-réseau (TAR) à travers ses quatre moments du processus de traduction des innovations (la problématisation, l’intéressement, l’enrôlement et la mobilisation des alliés), l’analyse des controverses et du rôle des acteurs humains et non-humains. Après l’analyse des données obtenues par entrevues auprès de 19 informateurs-clés, les résultats montrent que les phases d’implantation du programme passent effectivement par les quatre moments de la TAR, que la gestion des controverses par la négociation et le soutien était nécessaire pour la mobilisation de certains acteurs humains. Cette évaluation des processus a également permis de mettre en évidence le rôle des acteurs non-humains dans le processus d’implantation du programme. Le dernier article concerne une évaluation combinée des effets (volet quantitatif) et des processus (volet qualitatif) du programme. Pour le volet quantitatif, un devis quasi-expérimental a été adopté et les données ont été colligées de façon longitudinale par questionnaires auprès de 901 élèves de 5e et 6e année du primaire et leurs enseignants de 2010 à 2014. L’analyse des données ont montré que le programme n’a pas eu d’effets sur l’accessibilité et les risques perçus, l’usage problématique d’alcool et la polyconsommation (alcool et cannabis) chez les participants. Par contre, les résultats suggèrent que le programme pourrait favoriser la réduction du niveau de consommation et retarder l’âge d’initiation à l’alcool et au cannabis. Ils suggèrent également un effet potentiellement positif du programme sur l’intoxication à l’alcool chez les élèves. Quant au volet qualitatif, il a été réalisé à l’aide d’entrevues avec les intervenants (N=17), de groupes de discussion avec des élèves du secondaire (N=10) et d’une analyse documentaire. Les résultats montrent que le programme bénéficie d’un préjugé favorable de la part des différents acteurs ayant participé à l’évaluation et est bien acceptée par ces derniers. Cependant, le roulement fréquent de personnel et le grand nombre d’écoles à suivre peuvent constituer des obstacles à la bonne marche du programme. En revanche, le leadership et le soutien des directions d’écoles, la collaboration des enseignants, les qualités de l’IP et la flexibilité de la mise en œuvre sont identifiés comme des éléments ayant contribué au succès du programme. Les résultats et leur implication pour les programmes et l’évaluation sont discutés. Enfin, un plan de transfert des connaissances issues de la recherche évaluative est proposé.

The reliability and utility of spirometry performed on people with asthma in community pharmacies

Évaluation de l’impact des services en téléobstétrique du RUIS McGill offerts à une population de femmes inuites avec grossesse à risque élevé habitant sur la côte de la baie d’Hudson au Nunavik

L’accessibilité à des soins de santé pour une population habitant une région éloignée au Québec représente un défi de taille pour le Ministère de la santé et des services sociaux. Des solutions, telles que la télésanté, ont été présentées afin de pallier ce problème. Le RUIS McGill a ainsi développé un programme de téléobstétrique afin de desservir une population de femmes inuites à grossesse à risque élevé (GARE) habitant le Nunavik. L’objectif de ce mémoire fut de comprendre l’impact du service de téléobstétrique du RUIS McGill sur la santé des femmes et de leur nouveau-né ainsi que sur les coûts de santé et l’utilisation des services suite à son implantation au Centre de santé et de services sociaux Inuulitsivik sur la côte de la baie d’Hudson. Les femmes inuites à grossesse à risque élevé et leurs enfants de la région de la baie d’Hudson du Nunavik, éloignés des services obstétriques spécialisés, sont visés. Le service de téléobstétrique permet un accès aux obstétriciens du RUIS McGill localisés à Montréal. Un devis quasi-expérimental est utilisé pour examiner trois hypothèses portant sur l’état de santé des mères et des enfants, sur l’utilisation des services de santé et sur leurs coûts. Le service de téléobstétrique est devenu fonctionnel en 2006, offrant la possibilité de constituer une étude avant-après à deux groupes de femmes, soit celles ayant accouché avant 2006 (prétest) et celle ayant accouché après 2012 (post-test). La collecte de donnée se fit, dans son intégralité, par l’entremise des dossiers médicaux papier des participantes permettant l’analyse de 47 dossiers pour le prétest et de 81 dossiers pour le post-test. L’exécution d’analyse de covariance, de régression logistique et du test non paramétrique de Mann-Witney permit de conclure que le prétest et le post-test ne différent que sur deux variables, soient le poids à la naissance, plus faible dans le post-test et la pression artérielle de la mère à la naissance, plus élevée dans le post-test. Pour l’ensemble des autres variables portant sur les trois hypothèses à l’étude, les résultats de ce mémoire ne démontrent aucune différence significative entre les deux groupes démontrant ainsi qu’une même qualité de soins a été conservée suite à l’implantation du programme de téléobstétrique. Sur la base des résultats, ce mémoire recommande de revoir et modifier les objectifs du programme; de partager les bornes de communication de télésanté avec d’autres spécialités; d’entreprendre une évaluation du programme axée sur les coûts; de suivre rigoureusement l’utilisation du programme pour en maximiser l’efficacité et le potentiel; d’établir un tableau de bord; et d’entreprendre une étude évaluative comparative dans un service de téléobstétrique comparable.

Aider sans nuire: intervention de groupe destinée aux proches de victimes d'actes criminels

Rapport de stage présenté en vue de l’obtention du grade Maître ès sciences (M.Sc.) en criminologie option stage en intervention clinique.

Goma Curriculum, A Character Education Paradigm: Composing a Text for Shaping Classroom Character Culture

The written text, and approaches to reading it, serves well as an analogy for the classroom space as a “text” that teachers are able to compose; and students are able to read, interpret meaning(s) of, and make responses to and about (Rosenblatt, 1988). Researchers point to ways in which the classroom can be conceptualized as a text to be evoked, experienced, and read (Freire & Macedo, 1987; Powell, 2009; Rosenblatt, 1988; Spears-Bunton & Powell, 2009). The present study analyzed secondary data including: 10 transcripts of teacher talks and six self-reports retrieved from the program evaluation archives of DOR Foundation. The data described six teachers’ classroom experiences subsequent to professional development centered on Goma character education curriculum that was used during a summer youth program located in South Georgia. Goma, an acronym that stands for Goal, Objective, Method, and Attitude, is a character education paradigm derived from The Inclusive Community Building Ellison Model, the theoretical framework used for this study. The Model identifies conflict resolution as one of its five foci (Hunt, Howard, & Rice, 1998). Hunt (2006) conceived Goma as part of a 7-Step unitary process, also named the 7-Step pathway, to demonstrate how conflict resolution is accomplished within a variety of contexts. Analysis of the data involved: (a) a priori coding of teacher talks transcripts using the components of the Goma 7-Step pathway as coding categories, (b) emergent coding of teacher talks transcripts for the types of experiences teachers evidenced, and (c) emergent coding of teachers’ self-reports for categories of teachers’ instructional activities. Results of the study showed positive influence of Goma curriculum on participating teachers and their instructional practices. Teachers were shown to have had cognitive, instructional, emotional, and social experiences that were most evident when they reported changes in their attitudes toward their students, themselves, and their instructional practices. The present study provided implications for classroom teachers wherein all aspects of teachers’ instructional practices can be guided by principles of positive character; and can be used to help compose the kinds of “texts” that may likely contribute to a classroom character culture.

Évaluation de l’impact des services en téléobstétrique du RUIS McGill offerts à une population de femmes inuites avec grossesse à risque élevé habitant sur la côte de la baie d’Hudson au Nunavik

L’accessibilité à des soins de santé pour une population habitant une région éloignée au Québec représente un défi de taille pour le Ministère de la santé et des services sociaux. Des solutions, telles que la télésanté, ont été présentées afin de pallier ce problème. Le RUIS McGill a ainsi développé un programme de téléobstétrique afin de desservir une population de femmes inuites à grossesse à risque élevé (GARE) habitant le Nunavik. L’objectif de ce mémoire fut de comprendre l’impact du service de téléobstétrique du RUIS McGill sur la santé des femmes et de leur nouveau-né ainsi que sur les coûts de santé et l’utilisation des services suite à son implantation au Centre de santé et de services sociaux Inuulitsivik sur la côte de la baie d’Hudson. Les femmes inuites à grossesse à risque élevé et leurs enfants de la région de la baie d’Hudson du Nunavik, éloignés des services obstétriques spécialisés, sont visés. Le service de téléobstétrique permet un accès aux obstétriciens du RUIS McGill localisés à Montréal. Un devis quasi-expérimental est utilisé pour examiner trois hypothèses portant sur l’état de santé des mères et des enfants, sur l’utilisation des services de santé et sur leurs coûts. Le service de téléobstétrique est devenu fonctionnel en 2006, offrant la possibilité de constituer une étude avant-après à deux groupes de femmes, soit celles ayant accouché avant 2006 (prétest) et celle ayant accouché après 2012 (post-test). La collecte de donnée se fit, dans son intégralité, par l’entremise des dossiers médicaux papier des participantes permettant l’analyse de 47 dossiers pour le prétest et de 81 dossiers pour le post-test. L’exécution d’analyse de covariance, de régression logistique et du test non paramétrique de Mann-Witney permit de conclure que le prétest et le post-test ne différent que sur deux variables, soient le poids à la naissance, plus faible dans le post-test et la pression artérielle de la mère à la naissance, plus élevée dans le post-test. Pour l’ensemble des autres variables portant sur les trois hypothèses à l’étude, les résultats de ce mémoire ne démontrent aucune différence significative entre les deux groupes démontrant ainsi qu’une même qualité de soins a été conservée suite à l’implantation du programme de téléobstétrique. Sur la base des résultats, ce mémoire recommande de revoir et modifier les objectifs du programme; de partager les bornes de communication de télésanté avec d’autres spécialités; d’entreprendre une évaluation du programme axée sur les coûts; de suivre rigoureusement l’utilisation du programme pour en maximiser l’efficacité et le potentiel; d’établir un tableau de bord; et d’entreprendre une étude évaluative comparative dans un service de téléobstétrique comparable.