SlideShare una empresa de Scribd logo
1 de 67
Méthodes de recherche mixtes



               Pierre Pluye MD PhD
    Professeur agrégé, Nouveau chercheur IRSC
Département de médecine familiale, Université McGill

     Université du Québec à Montréal - UQAM
        Séminaire de recherche ComSanté
          24 janvier 2012 (10:00 – 12:00)
Présentation
Pierre Pluye
• Information: Quelle est la ‘valeur’ des informations?
     o Technologies de l‘information et de la communication
     o Approche centrée sur l’utilisateur (patient-centered)
• DENT 672: ‘Applied mixed methods in health research’
     o Drs. Levine, Nicolau and Pluye
     o Cours de 3 crédits (hiver)
• FMED 600: ‘Mixed studies reviews’
     o Cours de 1 crédit (été)
• ‘Mixed Methods Appraisal Tool’
• Divergence QUAL vs. QUAN
• Centre Cochrane canadien
Présentations
1. Sujet de recherche
– 1 titre (résumé, protocole, publication)
– 2 ou 3 mots clés
2. Méthode(s) de recherche
– Méthodes quantitatives?
– Méthodes qualitatives?
– Méthodes mixtes?
3. Revue(s) de littérature
– Revues quantitatives?
– Revues qualitatives?
– Revues mixtes?
Méthodes mixtes

Combinaison des méthodes qualitatives et
quantitatives

Depuis longtemps…

… Récemment conceptualisées en termes de
méthodes mixtes (premier livre de référence
‘handbook’ publié en 2003)
Méthodes mixtes: Besoins
3 principales raisons de combiner QUAL & QUAN
• Besoin de QUAL pour interpréter des résultats QUAN
• Besoin de QUAN pour généraliser des résultats QUAL
• Besoin d’explorer (QUAL) et de mesurer (QUAN)

1 caractéristique clé
• Intégration des aspects qualitatifs et quantitatifs
  (par opposition à 2 études séparées : 1 QUAL et 1 QUAN)
Méthodes mixtes: Objectif
Combiner les forces des méthodes qualitatives et quantitatives
QUAL
• Description de phénomènes sociaux complexes
   (par ex. interventions et programmes de santé publique)
• Résultats spécifiques (contexte)
• Leçons transférables (par ex., concepts et théories)
QUAN
• Mesures, descriptions généralisables et relations causales
   (inférences statistiques)
Exemple
• QUAN: Un programme est implanté, mais on comprend mal
   les raisons pour lesquelles il est ‘bien’ implanté dans certains
   contextes, et ‘mal’ implanté dans d’autres contextes
• QUAL: Mieux comprendre l’implantation des programmes
   complexes de santé publique et ses conséquences
Mixed Methods: Complementary QUAL & QUAN

QUALITATIVE ideal-type                           QUANTITATIVE ideal-type
Exploration & interpretation                       Explanation & causality


                  QUAL                                      QUAN

(e.g., to explore a new phenomenon* and generalize QUAL findings)


                  QUAL                                      QUAN

(e.g., to better understand processes* or QUAN ‘factors-outcomes’)

Qualitative approaches/designs                 Biostatistics & Epidemiology
(words, sounds, pictures, videos)                 (measures and numbers)

*An innovative clinical intervention or public health program for instance
Méthodes mixtes
            Combinaisons les plus fréquentes
MÉTHODES QUALITATIVES                       MÉTHODES QUANTITATIVES

• Ethnographie                              Essais randomisés
  (anthropologie & sociologie)
                                               Essai contrôlé randomisé
• Étude de cas
   (sciences sociales)                      Études non-randomisées
• ‘Description qualitative’                    Étude de Cohorte
   (sciences de la santé)                      Étude de comparaison de cas
• Phénoménologie
                                               Essai non randomisé
  (philosophie & psychologie)
• Narratifs: Biographies et récits de vie   Études descriptives
  (sciences sociales)                          Enquête transversale (I ou P)
• Théorisation ancrée                          Série de cas
   (sociologie)

     QUAL ou QUAN ou MIXED: Approche participative (recherche-action)
Méthodes mixtes: Conceptualisation
Idéal type QUAL                                       Idéal type QUAN
Interprétation                                                 Mesure
Recherches qualitatives                   Biostatistiques/Épidémiologie



Constructivisme                    ?                    Positivisme

• Idéalisme                 Pragmatisme               • Matérialisme

• Relativisme             Réalisme critique           • Réalisme

• Subjectivité             Constructionisme           • Objectivité
                           • ‘Looping effects’
                           • ‘Spiralling’
Deux types de devis séquentiel (2 phases)

    DEVIS                     DESCRIPTION

EXPLICATIF     • Phase QUAN puis explication QUAL
QUAN QUAL      • Intégration entre ou après les 2 phases
               Par ex., évaluation QUAN (échantillon), puis
               suivi QUAL (sous-échantillon)

EXPLORATOIRE   • Proposition QUAL puis phase QUAN
QUAL QUAN      • Intégration entre ou après les 2 phases
               Par ex., développement d’outils (contenu
               QUAL puis analyse des facteurs QUAN)
Devis concomitants (1 phase)
    DEVIS                      DESCRIPTION

CONVERGENCE • Évaluation concomitante QUAL et QUAN
QUAL + QUAN   • Intégration pendant la collecte et l’analyse
              des données
              • Deux principaux types d’analyse:
              1. Triangulation: Deux aspects
                  complémentaires de la même question
              2. Matrice: Collection et analyse des
                  données QUAL et QUAN sur les mêmes cas
MIXED METHODS
RESEARCH DESIGNS
   EXAMPLES
1


• Sequential explanatory design
• Sequential exploratory design
• Convergence design (concomitant)
Interpretation of
 QUAN           QUAL          QUAN results based
                              on QUAL findings


• QUAL data/findings assist in the interpretation of
  QUAN results

• Primary focus is to explain a phenomenon
   • Explaining and interpreting unexpected results
   • Exploring certain results in more detail
Sequential explanatory design

Sampling (examples)
• Same participants for QUAN and QUAL phases
  (small samples)
• Participants from the same sample for both
  phases QUAN and QUAL
• Participants from the same population for the
  two phases QUAN and QUAL
Sequential Explanatory Design: Example 2
 MM Purpose: To measure and better understand
 the role of passive smoking among subjects with
 and without Head & Neck Cancer (H&NC)
 Objectives
 QUAN: To estimate self reported passive smoking
 among H&NC patients and controls participating
 in a cohort study*
 Hypothesis: We hypothesized that H&NC patients
 will be more likely to report exposure to smoking
 compared to control subjects
 QUAL: To explore and understand participants’
 perception of exposure to smoke
*HeNCe life study: See www.mcgill.ca/dentistry/research/our-researchers/nicolau
2


• Sequential explanatory design
• Sequential exploratory design
• Convergence design (concomitant)
Transfer or generalize
   QUAL           QUAN                  QUAL findings
                                    based on QUAN results


• QUAN data/results assist in the transferability or
  generalization of QUAL findings
• Primary focus is to explore a phenomenon
   • Testing elements of emergent theory, framework, instrument
   • Transferring QUAL findings in different samples (contexts)
   • Determining the distribution of the phenomenon within a
     chosen population (or testing an instrument)
Sequential exploratory design: Example 1
MM purpose: To develop a method for assessing information objects derived from
electronic knowledge resources: (I) Discover broad categories of impacts; and (II)
Test an assessment method and compare two databases in a larger population.
               Phase I                                      Phase II
                                                        Data            Data
    Data          Data                         I     collection        Analysis
                                                                                    Results
                                Results
 collection      Analysis                      N
                                                                                  Impact of
 Qualitative      Thematic        Themes
                                               T   Cohort study:
                                                   - Hand held
                                                                   Descriptive
                                                                   statistics &   searches
 multiple        analysis of   Six types of    E   computer        Chi-square     reported by
 case study:     qualitative   cognitive                                          FM residents
 - Critical         data       impact:
                                               G   - Databases
                                                   - Search                       Comparison
 incident                      •Practice       R   tracking and                   of Clinical
 technique                     improvement                                        information
 - Interviews                  •Learning       A   theme-base
                                                   questionnaire                  retrieval
 - Observation
                               •Confirmation
                               •Reassurance
                                               T                                  technology
                                                                                  vs. Clinical
                               •Recall         I                                  decision
                               •Frustration
                               •No impact      O                                  support
  Six family                                        20 FM residents               systems
  physicians                                   N   N= 2,495 searches

Final integration of QUAN results & QUAL findings: Information Assessment Method
3


• Sequential explanatory design
• Sequential exploratory design
• Convergence design
Convergence Design

                                   +
                   QUAN                        QUAL
                              concomitant


                           ONE-PHASE DESIGN
                           ONE PHENOMENON
                   Interpretation based on QUAN + QUAL


Objectives
• To integrate the analysis of 2 concomitant datasets (QUAN+QUAL)
addressing the same topic by either bringing separate data analysis
together in the interpretation or by transforming data
• To “obtain different but complementary data” (Morse 1991)
Convergence design
        Two common types of data analysis

   DESIGN                         DESCRIPTION

CONVERGENCE • Concomitant assessment QUAL and QUAN
QUAL + QUAN   • Integration during data collection/analysis
              • Two types of data analysis (mixing data)
              1. Triangulation: Two complementary aspects of
              the same question
              2. Mixed methods matrix: E.g., collection/analysis
              of QUAL and QUAN data on the same cases
Convergence design: Examples

   3.1. Triangulation
   • Data validation
   • Data transformation
   • Multi-level analysis
3.1.1. Convergence design
   with data validation
CONTEXT
The Information Assessment Method (IAM) documents:
1. Why doctors search for information
2. What are the associated cognitive impacts
3. How information is used for a specific patient
4. What are the subsequent patient health outcomes

OBJECTIVES
• To assess the relevance of IAM items (QUAN)
• To assess the representativeness of IAM items (QUAL)

Content validity is the degree to which elements of an
assessment instrument are relevant to and representative
of the targeted construct.
DESIGN
Mixed methods research study – convergence design
• A quantitative prospective observational study
• Combined with a qualitative multiple case study

PARTICIPANTS & INTERVENTION
• 40 Canadian family physicians
• Searches in Essential Evidence Plus (7 databases)
• Over an average of 320 days

DATA COLLECTION
Quantitative
• For each search: Information rated using the IAM questionnaire
Qualitative
• Participants interviewed to explain a purposeful sample of ratings
DATA ANALYSIS

QUAN
Relevance: R = Number of ratings for the item
               Number of ratings for all items (same construct)

Item considered relevant when R ≥ 10%

E.g., number of ratings “Address a clinical question” = 1310
And total number of ratings (Reasons to search) = 4253
    1310
R        100 31%
    4253
QUAL
Representative: Participant’s explanation fits the researchers’
definition for the item (in the context of a clinical story)

Item considered representative when the number of ‘fits’ ≥ 80%
Validation vs. Illustration

  Systematic and rigorous validation studies
  Vs. illustration of QUAN using QUAL


Illustration of QUAN using QUAL
• E.g, optional open-ended question at the end of a self-
  administered questionnaire (free comment box)
• Caveat: “Because the QUAL items are an add-on to a
  QUAN survey, the items do not result in a rigorous
  qualitative dataset” (illustrative quotes)
• Constitutes a grey area of mixed methods research
Convergence design: Examples

  2. Mixed methods matrix




                 NAPCRG annual conference 2010
http://itpcrg.pbworks.com
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
   en médecine familiale: Étude avec des méthodes mixtes
   Pierre Pluye, Roland M Grad, Janique Johnson-Lafleur, Vera
   Granikov, Michael Shulha, Bernard Marlow, Ivan L Marques Ricarte

Introduction
• Grâce aux ressources électroniques, les médecins peuvent obtenir
    rapidement des réponses à leurs questions cliniques.
• Études observationnelles: Effets cognitifs positifs sur les médecins.
• Aucune étude systématique sur les résultats associés à l'utilisation des
    informations en terme de santé des patients.
• En médecine familiale, environ la moitié des questions cliniques ne sont
    pas poursuivies par les médecins en raison de la pression du temps etc.
• Question de recherche: Pour combien de patients un médecin doit trouver
    des informations cliniques en cherchant dans des ressources électroniques
    afin d’obtenir des résultats sur la santé d’un patient?
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
  en médecine familiale: Étude avec des méthodes mixtes

Revue de littérature mixte
• Revue critique de 29 études qualitatives et quantitatives
  sur l'utilisation des informations en médecine.
• Aucune étude fondée sur un cadre conceptuel ou un
  modèle théorique.
• Aucune étude systématique des objets d'informations.
• Aucune évaluation exhaustive de leur utilisation et des
  résultats en terme de santé.
• Données qualitatives et quantitatives rapportées
  séparément.
• Aucune étude combinant des données quantitatives (suivi
  de l'utilisation des informations) avec des données
  qualitatives (histoires cliniques détaillées).
Acquisition of information




                      Cognition




                     Application



                     Outcomes




International Journal of Person Centered Medicine, 2011, 1(2), 385-394.
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
 en médecine familiale: Étude avec des méthodes mixtes
                           NNBI = 7
 Projet pilote avec des résidents en médecine familiale (R1)




            Résultats en terme de santé des patients
            • Amélioration de l’état de santé
            • Prévention des maladies ou de leur aggravation
            • Évitement d’interventions inappropriées ou inutiles
            • Diminution de l’anxiété vis-à-vis des maladies ou des soins de santé
            • Augmentation des connaissances sur la santé ou les maladies
            International Journal of Person Centered Medicine, 2011, 1(2),395-404.
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
 en médecine familiale: Étude avec des méthodes mixtes

Objectifs
• A partir d’un modèle théorique, décrire l'utilisation par les
  médecins de famille de l'information clinique issue d'une ressource
  électronique, et les résultats sur la santé des patients.
Méthodes
• Devis: méthodes mixtes (convergence) combinant une étude
  quantitative observationnelle prospective, et une étude qualitative
  de cas multiples.
• Cliniques de soins de santé primaire - Canada.
• 41 médecins de famille provenant de neuf provinces.
• Accès à une ressource sur un ordinateur de poche.
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
 en médecine familiale: Étude avec des méthodes mixtes
Méthodes (suite)
• Quantitative: Méthode d'évaluation des informations (questionnaire ‘pop-
  up’ après chaque recherche d’information)
• Qualitative: Entretiens guidés par les ‘log-reports’ (date, heure, titre des
  informations retrouvées, questionnaires complétés). Multiple sources de
  données : archives, log reports, interviews and observations.
• Recherches critiques (cas) définies comme les recherches décrites
  clairement où l'information clinique a été utilisée pour un patient
  spécifique.
• Pour chaque cas, les personnes interrogées ont décrit les informations
  retrouvées, la situation clinique, et les résultats en terme de santé.
• Analyse des données: Les données quantitatives et qualitatives ont été
  fusionnées sous forme de vignettes cliniques (données mixtes).
• Calcul du nombre de patients (recherches) pour lesquels l'information
  clinique doit être trouvée afin qu’un patient en bénéficie (NNBI).
QUAN



   Situational
                 Cognition   Application
   relevance
Quantitative                       +                     Qualitative
                         longitudinal study            concomitantly            multiple case study


                  Information Assessment Method                           For each search with IAM rating
                               (IAM)                                       ‘information use for a patient’:
                  For each search for information:                       • In-depth interview stimulated by
Data collection                                         integration
                  Pop-up questionnaire on search                             the corresponding log-report
                  objectives, and cognitive impact                      • Information content read and rated
                       and use of information                                     by the interviewee


                                                                             Critical incident technique
                       Descriptive statistics
                                                                                  Thematic analysis
                   Log-reports including dates of
Data analysis                                                           Identification and coding of critical
                   searches, titles of information
                                                                        searches (clear clinical situation and
                       hits, and IAM ratings
                                                                                   information use)



                                                          integration

                  • For each critical search (case): Cross-tabulation of qualitative and quantitative data
                  • Interpretation of qualitative and quantitative data for writing clinical vignettes
Mixing data
                  • Building a meta-matrix (rows representing vignettes and columns mixed data)
                  • Creation of a path diagram (visual representation of all vignettes)
Quantitative                     +                     Qualitative
                         longitudinal study            concomitantly            multiple case study


                  Information Assessment Method                           For each search with IAM rating
                               (IAM)                                       ‘information use for a patient’:
                  For each search for information:                       • In-depth interview stimulated by
Data collection                                         integration
                  Pop-up questionnaire on search                             the corresponding log-report
                  objectives, and cognitive impact                      • Information content read and rated
                       and use of information                                     by the interviewee


                                                                             Critical incident technique
                       Descriptive statistics
                                                                                  Thematic analysis
                   Log-reports including dates of
Data analysis                                                           Identification and coding of critical
                   searches, titles of information
                                                                        searches (clear clinical situation and
                       hits, and IAM ratings
                                                                                   information use)



                                                          integration

                  • For each critical search (case): Cross-tabulation of qualitative and quantitative data
Mixing            • Interpretation of qualitative and quantitative data for writing clinical vignettes
                  • Building a meta-matrix (rows representing vignettes and columns mixed data)
data              • Creation of a path diagram (visual representation of all vignettes)
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
   en médecine familiale: Étude avec des méthodes mixtes


Résultats
• 39 médecins interviewés
  (1 sans données et 1 non disponible)
• 26 médecins (66,7%) ‘académiques’
• 23 hommes et 16 femmes en pratique active
• Agés de 28 à 70 ans (médiane 44 ans)
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
    en médecine familiale: Étude avec des méthodes mixtes



Résultats: Recherches d’information
• 1193 recherches en 2008-2009 (moyenne 86 jours)
• 715 (59,9%) avec objectif directement liée à un patient:
   – répondre à une question clinique,
   – partager des informations avec un patient,
   – planifier ou gérer des soins avec d'autres professionnels.
• 365 (30,6%) avec information utilisée pour un patient
• 188 (15,8%) recherches critiques (cas) = 188 vignettes
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
 en médecine familiale: Étude avec des méthodes mixtes

Résultats (suite)
188 recherches critiques (cas) décrites en vignettes cliniques.
• Dans 53 cas, les médecins interrogés ont associé l'utilisation des
  informations avec au moins un avantage pour la santé des patients.
• Par exemple, dans 28 cas, ils ont associés l'utilisation des
  informations avec l’évitement d’interventions inutiles ou
  inappropriés.
• En conséquence, les médecins interrogées ont trouvé des
  informations cliniques pour 715 patients, et rapporté des bénéfices
  de santé pour 53: Cela suggère ‘NNBI = 14’.
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
  en médecine familiale: Étude avec des méthodes mixtes

Résultats
NNBI=14             ACQUISITION (n=715 searches done for a patient)
                    Information object relevant to fulfill the search objective?

                                                Yes


                                           COGNITION
                                Having positive cognitive impact?

                                                Yes


                                           APPLICATION
                                        Used for a patient?

                                                 Yes


                                           OUTCOMES
                                              (n=53)
MIXED METHODS MATRIX
   Quantitative + qualitative data on the same cases

DIAGNOSIS EXAMPLE: CLINICAL VIGNETTE
Acquisition
• QUAN : Family physician in Quebec; Search for information on
  wrist trauma; Reasons: (1) to address a clinical question, and
  (2) to share information with a patient
• QUAL : “This is a woman in her forties. She had taken a fall
  some weeks before onto her hand, um, and initial x-rays, and
  then a follow up x-ray didn’t show any fracture. (…) She tried
  to return to work, it didn’t work out, she was still having a lot
  of difficulty. (…) I was looking up the next step in terms of
  imaging… because she’d already had two negative x-rays”
Cognition
• QUAN: The above information object ; ‘I learned something new’ and
   ‘My practice will be changed and improved’
• QUAL: “The new information was that MRI is the test to do when
   you’re in the situation of suspecting a fracture. (…) The usefulness of
   the MRI in diagnosing a fracture if the plain x-ray was negative, but
   you’re still suspecting it clinically.”
 Application
• QUAN: ‘I used this information for a specific patient’
• QUAL: “Choosing the appropriate diagnostic test, because there’s a
   repertoire of things that one would consider doing… bone scans, and
   CT and such, and the MRI seemed to be the definitive thing.”
Outcomes
• QUAL: Regarding patient health, MD reported this clinical information
   helped avoid unnecessary diagnostic procedure (CT scan)
MATRIX
         COLUMNS: MIXED METHODS DATA SUMMARY




ROWS:
CASES
http://iamclinicalvignettes.mcgill.ca
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
   en médecine familiale: Étude avec des méthodes mixtes

Discussion
• Première étude systématique de l'utilisation des informations par
   des médecins de famille, et des résultats sur la santé des patients.
• Limites
    – Étude observationnelle
    – ‘Self-report’ (perception des résultats selon les médecins)
    – Manque de suivi (résultats au moment de l’entretien)
• Forces
    – Étude mixte (nombreux cas décrits en profondeur).
    – QUAN: Questionnaire diminuant le biais de mémoire
    – QUAL: ‘Log reports’ stimulant la mémoire des participants
    – Validité de la technique des incidents critiques (cf. revue)
Nombre Nécessaire pour Bénéficier des Informations (NNBI)
 en médecine familiale: Étude avec des méthodes mixtes

Conclusion
Proposition à tester: NNBI
• Projet pilote avec des résidents (R1): NNBI = 7
• Médecins en pratique active: NNBI = 14
Plus le NNBI est faible, mieux c’est, et un NNBI faible peut:
• encourager les cliniciens à chercher des informations plus souvent
• justifier plus de formation pour chercher des informations
• modifier la perception des patients sur les recherches d’information
Besoin de recherches expérimentales futures pour :
• mesurer le NNBI (tester notre proposition)
• comparer des ressources documentaires ($$$)
4


•   Sequential explanatory design
•   Sequential exploratory design
•   Convergence design
•   Variants of previous designs
Variants of previous designs
  DESIGNS                        DESCRIPTION
EMBEDDED        • Variant of Convergent design
• QUAL(quan)    E.g., Triangulation: a (qual) case study (process)
• QUANT(qual)   embedded within a (QUAN) Randomized Controlled
                Trial (outcomes)
                • Variant of Sequential exploratory design
                E.g., Development of an intervention with children
                (QUAL) and assessment in schools (quan)
MULTIPHASE      • Multiple phases of a research program
                • Long-term goal, e.g., assess PUSH & PULL health
                information, and multiple mixed methods studies
                • « We are only beginning to think about how to
                classify variants » (Creswell & Plano Clark, p. 103).
RECAP TABLE : Take-home message
   DESIGN                                DESCRIPTION

EXPLANATORY      • QUAN then QUAL explanation
QUAN QUAL        • Integration between/after the 2 phases
                 E.g., QUAN assessment then QUAL follow-up
EXPLORATORY      • QUAL proposal then QUAN
QUAL QUAN        • Integration between/after the 2 phases
                 E.g., tool dvt. (QUAL content & QUAN factor analysis)

CONVERGENCE • Concomitant assessment QUAL and QUAN
QUAL + QUAN • Integration during data collection/analysis
            • Two types of data analysis (mixing)
                 1. Triangulation
                 Two complementary aspects of the same question
                 E.g., data validation, transformation, multilevel analysis
                 2. Mixed methods matrix
                 Collection/analysis of QUAL & QUAN data on same cases
Supplemental slides

If time allows…
  – Data mixing

  – GRAMMS

  – Quality appraisal

  – Divergence
Strategies for mixing QUAL & QUAN data and/or results
5 strategies      Creswell          *O’Cathain, Murphy &
                  & Plano Clark     Nicholl, 2011
                  2007 < 2010
Typology          Good definition   NA
development
Extreme case      Good definition   NA
analysis
Data              Good definition   NA
transformation    and examples

Results           Triangulation     Good examples
comparison        design            (2 sets of findings)
Data merging      Rare (2007)       Mixed methods matrix
(joint display)   Good definition   Going back & forth
                  (2010)            (“following a thread”)

*See dropbox                                                 56
Writing Mixed Methods Research

Good Reporting of A Mixed Methods Study (GRAMMS)
O'Cathain et al. J. Health Services Research & Policy, 2008, 13(2), 92-98.
•   Justification for using mixed methods
•   Description of the design
•   Description of each methods (sampling, etc.)
•   Integration of data collection/analysis and/or results
•   Limitations because of the mixing
•   Insights gained from mixing
Mixed Methods Appraisal Tool
The 2011 version (criteria and tutorial)
   http://mixedmethodsappraisaltoolpublic.pbworks.com
  Checklist for appraising and/or describing studies included in
  systematic mixed studies reviews (reviews including original
  qualitative, quantitative and mixed methods studies).

Pilot version (reliability testing)
   Pace, Pluye et al. (2011). Testing the reliability and efficiency
   of the pilot Mixed Methods Appraisal Tool (MMAT) for
   systematic mixed studies review. International Journal of
   Nursing Studies. doi:10.1016/j.ijnurstu.2011.07.002
Divergence QUAN vs. QUAL

• Divergence usually observed during data analysis or
  interpretation of results (rarely by design: dialectical)
• Differences between QUAL and QUAN data or results
  (difference, conflict, contradiction, discordance,
  discrepancy, dissonance and inconsistency)
• Strategies: Reconciliation, Initiation, Exclusion

  Pluye et al. (2009). Divergence of qualitative and
  quantitative evidence in mixed methods studies. Int. J.
  Multiple Research Approaches, 3(1): 58-72.

                                                              59
REVUES MIXTES
Définition
• Revues de littérature incluant des études
  qualitative, quantitative et mixtes, par ex.,
  processus et résultats
• Par opposition aux revues incluant uniquement
  des études QUAN (par ex., revues systématiques
  des essais contrôlés randomisés) ou uniquement
  des études QUAL (par ex., méta-ethnographies)
• Méthodes mixtes appliquées aux revues de
  littérature (données = texte des publications)
REVUES MIXTES EN SANTE
Identification
    – 2,322 références (auteurs, titre, source, résumé)
    – PubMed: stratégie « quantitative AND qualitative OR
      mixed method(s) OR multi(-)method (review, abstract) »
      (jusqu’en mars 2006)
Sélection
    – 149 articles examinés par 2 réviseurs
    – Inclusion: Revues de littérature incluant des études
      qualitative et quantitative (et-ou mixtes)
Synthèse
    – 59 articles
    – Analyse thématique
             Pluye et al. International Journal of Nursing Studies, 2009,46:529-546.
REVUES MIXTES
                     SYSTEMATIQUE*           REPRODUCTIBLE           CONVENANCE

 Question                      X                       X                    X
 (N=59)
 Identification                X                       X
 (N=40)
 Selection                     X                       X
 (N=40)
 Appraisal                     X
 (N=17)
 Synthesis                     X                       X                    X
 (N=59)
 Number (%)               17 (29%)                23 (39%)              19 (32%)

*Recherche exhaustive, réviseurs indépendants, évaluation de la qualité méthodologique:
Mixed Methods Appraisal Tool = http://mixedmethodsappraisaltoolpublic.pbworks.com
Cadre conceptuel pour les revues mixtes
Types de synthèse                                              Articles
1. Convergence: Synthèse QUAN d’études QUAL, QUAN & MM
Analyse de contenu (transformation en valeurs de variables)     Rare
Quantitative case survey (méthodologie)                         Rare
2. Convergence: Synthèse QUAL d’études QUAL, QUAN & MM
Analyse thématique (transformation en thèmes)                  Fréquent
Qualitative multiple case study (méthodologie)                  Rare
Théorisation ancrée (méthodologie conduisant à un modèle)       Rare
3. Séquentiel
• Explicatif: Analyse des études QUAN puis des études QUAL     Fréquent
• Exploratoire: Analyse des études QUAL puis des études QUAN    Rare
All types of synthesis for MSRs   Recommended   Specialized   Research
1. Convergence QUAN
Quantitative case survey               X
Content analysis                       X
Bayesian analysis                                   X
Boolean analysis                                                 X
Lexical-semantic analysis                                        X
2. Convergence QUAL
Qualitative multiple case study        X
Thematic analysis                      X
Grounded Theory                        X
Critical interpretive synthesis                     X
Realist synthesis                                   X
3. Sequential
Explanatory                            X
Exploratory                            X
RESSOURCES
Ressources
•   DENT672 - FMED603: Méthodes mixtes (hiver - 3 crédits)
•   FMED600: Revues mixtes (été - 1 crédit)
•   Creswell & Plano-Clark (2010). Designing & conducting mixed methods
    research. Sage .
•   Pope, Mays & Popay (2007). Synthesizing Quantitative and Qualitative Health
    Research. Ramsay Books.
•   Pluye et al. (2009). Les méthodes mixtes pour l’évaluation des programmes.
    In Ridde V & Dagenais C (eds.), Théories et pratiques en évaluation de
    programme: Manuel d’enseignement (pp. 123-141). Presses de l’Université de
    Montréal.
•   Pluye et al. (2009). A scoring system for appraising mixed methods research,
    and concomitantly appraising qualitative, quantitative and mixed methods
    primary studies in mixed studies reviews. International Journal of Nursing
    Studies, 46(4):529-546.
•   Pluye et al. (2009). Understanding divergence of quantitative and qualitative
    data (or results) in mixed methods studies. International Journal of Multiple
    Research Approaches, 3(1):58-72.
Merci

QUESTIONS - COMMENTAIRES




                           67

Más contenido relacionado

La actualidad más candente

Methodologie de recherche (de mémoire) Pr. Souiah master 2
Methodologie de recherche (de mémoire) Pr. Souiah master 2 Methodologie de recherche (de mémoire) Pr. Souiah master 2
Methodologie de recherche (de mémoire) Pr. Souiah master 2 k Marou
 
Module de formation en foncier et tenue du dossier rural au niger
Module de formation en foncier et tenue du dossier rural au nigerModule de formation en foncier et tenue du dossier rural au niger
Module de formation en foncier et tenue du dossier rural au nigerDjibril Hassane
 
methode echantillonnage
methode echantillonnagemethode echantillonnage
methode echantillonnageMouhcine Rabi
 
Construire une problématique de recherche
Construire une problématique de recherche Construire une problématique de recherche
Construire une problématique de recherche Hubert Maisonneuve
 
Management de la qualité
Management de la qualitéManagement de la qualité
Management de la qualitéSaber Ferjani
 
Cours Statistique descriptive pr Falloul
Cours Statistique descriptive pr FalloulCours Statistique descriptive pr Falloul
Cours Statistique descriptive pr FalloulProfesseur Falloul
 
Statistique descriptive
Statistique descriptiveStatistique descriptive
Statistique descriptiveeninioo
 
Analyse de régression linéaire
Analyse de régression linéaire Analyse de régression linéaire
Analyse de régression linéaire Adad Med Chérif
 
10 minutes : Tableaux de bord
10 minutes : Tableaux de bord10 minutes : Tableaux de bord
10 minutes : Tableaux de bordConverteo
 
Presentation sur la fiche de poste
Presentation sur la fiche de postePresentation sur la fiche de poste
Presentation sur la fiche de posteWiyao Gnangba
 
Déroulement d'une mission d'audit
Déroulement d'une mission d'auditDéroulement d'une mission d'audit
Déroulement d'une mission d'auditBRAHIM MELLOUL
 
La soutenance du mémoire
La soutenance du mémoireLa soutenance du mémoire
La soutenance du mémoireS/Abdessemed
 
Analyse critique de la littérature scientifique, congrès AFREK du 22/09/2011
Analyse critique de la littérature scientifique, congrès AFREK du 22/09/2011Analyse critique de la littérature scientifique, congrès AFREK du 22/09/2011
Analyse critique de la littérature scientifique, congrès AFREK du 22/09/2011Collectif GERAR
 

La actualidad más candente (20)

Methodologie de recherche (de mémoire) Pr. Souiah master 2
Methodologie de recherche (de mémoire) Pr. Souiah master 2 Methodologie de recherche (de mémoire) Pr. Souiah master 2
Methodologie de recherche (de mémoire) Pr. Souiah master 2
 
Protocole de recherche
Protocole de rechercheProtocole de recherche
Protocole de recherche
 
Assurance qualité
Assurance qualitéAssurance qualité
Assurance qualité
 
Module de formation en foncier et tenue du dossier rural au niger
Module de formation en foncier et tenue du dossier rural au nigerModule de formation en foncier et tenue du dossier rural au niger
Module de formation en foncier et tenue du dossier rural au niger
 
methode echantillonnage
methode echantillonnagemethode echantillonnage
methode echantillonnage
 
Construire une problématique de recherche
Construire une problématique de recherche Construire une problématique de recherche
Construire une problématique de recherche
 
Management de la qualité
Management de la qualitéManagement de la qualité
Management de la qualité
 
management hospitalier.pdf
management hospitalier.pdfmanagement hospitalier.pdf
management hospitalier.pdf
 
Cours Statistique descriptive pr Falloul
Cours Statistique descriptive pr FalloulCours Statistique descriptive pr Falloul
Cours Statistique descriptive pr Falloul
 
Statistique descriptive
Statistique descriptiveStatistique descriptive
Statistique descriptive
 
Analyse de régression linéaire
Analyse de régression linéaire Analyse de régression linéaire
Analyse de régression linéaire
 
Tableau de bord prospectif
Tableau de bord prospectifTableau de bord prospectif
Tableau de bord prospectif
 
Tableau de bord
Tableau de bordTableau de bord
Tableau de bord
 
10 minutes : Tableaux de bord
10 minutes : Tableaux de bord10 minutes : Tableaux de bord
10 minutes : Tableaux de bord
 
Presentation sur la fiche de poste
Presentation sur la fiche de postePresentation sur la fiche de poste
Presentation sur la fiche de poste
 
Déroulement d'une mission d'audit
Déroulement d'une mission d'auditDéroulement d'une mission d'audit
Déroulement d'une mission d'audit
 
La soutenance du mémoire
La soutenance du mémoireLa soutenance du mémoire
La soutenance du mémoire
 
Découvrir la systémique
Découvrir la systémiqueDécouvrir la systémique
Découvrir la systémique
 
Analyse critique de la littérature scientifique, congrès AFREK du 22/09/2011
Analyse critique de la littérature scientifique, congrès AFREK du 22/09/2011Analyse critique de la littérature scientifique, congrès AFREK du 22/09/2011
Analyse critique de la littérature scientifique, congrès AFREK du 22/09/2011
 
Chapitre Introductif
Chapitre IntroductifChapitre Introductif
Chapitre Introductif
 

Similar a Méthodes de recherche mixtes

K le malicot méthodologie 13 10-12
K le malicot méthodologie 13 10-12K le malicot méthodologie 13 10-12
K le malicot méthodologie 13 10-12vdimartino
 
Maîtriser la lecture critique d’essais cliniques et de méta-analyses au trave...
Maîtriser la lecture critique d’essais cliniques et de méta-analyses au trave...Maîtriser la lecture critique d’essais cliniques et de méta-analyses au trave...
Maîtriser la lecture critique d’essais cliniques et de méta-analyses au trave...Jean-Luc Balança
 
Atelier de lecture critique d’un article.pptx
Atelier de lecture critique d’un article.pptxAtelier de lecture critique d’un article.pptx
Atelier de lecture critique d’un article.pptxJeanYvesESTINFIL1
 
Formation : "Maîtriser la lecture critique d’essais cliniques et de méta-anal...
Formation : "Maîtriser la lecture critique d’essais cliniques et de méta-anal...Formation : "Maîtriser la lecture critique d’essais cliniques et de méta-anal...
Formation : "Maîtriser la lecture critique d’essais cliniques et de méta-anal...Jean-Luc Balança
 
Comment fonctionne la recherche par Dr. Simon Lambrey
Comment fonctionne la recherche par Dr. Simon LambreyComment fonctionne la recherche par Dr. Simon Lambrey
Comment fonctionne la recherche par Dr. Simon LambreyLACT
 
Pierre Minn - Atelier de recherche
Pierre Minn - Atelier de recherchePierre Minn - Atelier de recherche
Pierre Minn - Atelier de rechercheNECH-CIEH
 
Plan de rédaction d’un article rapportant un essai clinique
Plan de rédaction d’un article rapportant un essai cliniquePlan de rédaction d’un article rapportant un essai clinique
Plan de rédaction d’un article rapportant un essai cliniqueMichel Cucherat
 
Introduction aux évaluations en milieu de travail
Introduction aux évaluations en milieu de travailIntroduction aux évaluations en milieu de travail
Introduction aux évaluations en milieu de travailMedCouncilCan
 
Protocole de recherche-1.pptx
Protocole de recherche-1.pptxProtocole de recherche-1.pptx
Protocole de recherche-1.pptxCryspus Assoukavi
 
Inscrivez-vous à la formation EMFPS du 25 au 27 septembre 2018 "Maîtriser la...
Inscrivez-vous à la formation EMFPS  du 25 au 27 septembre 2018 "Maîtriser la...Inscrivez-vous à la formation EMFPS  du 25 au 27 septembre 2018 "Maîtriser la...
Inscrivez-vous à la formation EMFPS du 25 au 27 septembre 2018 "Maîtriser la...Jean-Luc Balança
 
Data Analysis pas à pas avec R
Data Analysis pas à pas avec RData Analysis pas à pas avec R
Data Analysis pas à pas avec RAmar LAKEL, PhD
 
evaluation en sante publique dr hassana belafki.pptx
evaluation en sante publique dr hassana belafki.pptxevaluation en sante publique dr hassana belafki.pptx
evaluation en sante publique dr hassana belafki.pptxfadilabousgheiri
 
Présentation S6 Info Gest (1).pdf
Présentation S6 Info Gest (1).pdfPrésentation S6 Info Gest (1).pdf
Présentation S6 Info Gest (1).pdfannaraf
 
Introduction à la recherche quantitative en soins infirmiers
Introduction à la recherche quantitative en soins infirmiersIntroduction à la recherche quantitative en soins infirmiers
Introduction à la recherche quantitative en soins infirmiersNECH-CIEH
 
L’approche actuarielle dans la prise de décision
L’approche actuarielle dans la prise de décisionL’approche actuarielle dans la prise de décision
L’approche actuarielle dans la prise de décisionVincent Berthet
 
Pluye et al._mthodes_mixtes
Pluye et al._mthodes_mixtesPluye et al._mthodes_mixtes
Pluye et al._mthodes_mixtesTayeb Sid
 

Similar a Méthodes de recherche mixtes (20)

K le malicot méthodologie 13 10-12
K le malicot méthodologie 13 10-12K le malicot méthodologie 13 10-12
K le malicot méthodologie 13 10-12
 
Résumé j2
Résumé j2Résumé j2
Résumé j2
 
Maîtriser la lecture critique d’essais cliniques et de méta-analyses au trave...
Maîtriser la lecture critique d’essais cliniques et de méta-analyses au trave...Maîtriser la lecture critique d’essais cliniques et de méta-analyses au trave...
Maîtriser la lecture critique d’essais cliniques et de méta-analyses au trave...
 
Atelier de lecture critique d’un article.pptx
Atelier de lecture critique d’un article.pptxAtelier de lecture critique d’un article.pptx
Atelier de lecture critique d’un article.pptx
 
Formation : "Maîtriser la lecture critique d’essais cliniques et de méta-anal...
Formation : "Maîtriser la lecture critique d’essais cliniques et de méta-anal...Formation : "Maîtriser la lecture critique d’essais cliniques et de méta-anal...
Formation : "Maîtriser la lecture critique d’essais cliniques et de méta-anal...
 
Module 6 : Analyses multi-incidents
Module 6 : Analyses multi-incidentsModule 6 : Analyses multi-incidents
Module 6 : Analyses multi-incidents
 
Comment fonctionne la recherche par Dr. Simon Lambrey
Comment fonctionne la recherche par Dr. Simon LambreyComment fonctionne la recherche par Dr. Simon Lambrey
Comment fonctionne la recherche par Dr. Simon Lambrey
 
Pierre Minn - Atelier de recherche
Pierre Minn - Atelier de recherchePierre Minn - Atelier de recherche
Pierre Minn - Atelier de recherche
 
Plan de rédaction d’un article rapportant un essai clinique
Plan de rédaction d’un article rapportant un essai cliniquePlan de rédaction d’un article rapportant un essai clinique
Plan de rédaction d’un article rapportant un essai clinique
 
Introduction aux évaluations en milieu de travail
Introduction aux évaluations en milieu de travailIntroduction aux évaluations en milieu de travail
Introduction aux évaluations en milieu de travail
 
Protocole de recherche-1.pptx
Protocole de recherche-1.pptxProtocole de recherche-1.pptx
Protocole de recherche-1.pptx
 
Inscrivez-vous à la formation EMFPS du 25 au 27 septembre 2018 "Maîtriser la...
Inscrivez-vous à la formation EMFPS  du 25 au 27 septembre 2018 "Maîtriser la...Inscrivez-vous à la formation EMFPS  du 25 au 27 septembre 2018 "Maîtriser la...
Inscrivez-vous à la formation EMFPS du 25 au 27 septembre 2018 "Maîtriser la...
 
Data Analysis pas à pas avec R
Data Analysis pas à pas avec RData Analysis pas à pas avec R
Data Analysis pas à pas avec R
 
evaluation en sante publique dr hassana belafki.pptx
evaluation en sante publique dr hassana belafki.pptxevaluation en sante publique dr hassana belafki.pptx
evaluation en sante publique dr hassana belafki.pptx
 
Présentation S6 Info Gest (1).pdf
Présentation S6 Info Gest (1).pdfPrésentation S6 Info Gest (1).pdf
Présentation S6 Info Gest (1).pdf
 
Introduction à la recherche quantitative en soins infirmiers
Introduction à la recherche quantitative en soins infirmiersIntroduction à la recherche quantitative en soins infirmiers
Introduction à la recherche quantitative en soins infirmiers
 
L’approche actuarielle dans la prise de décision
L’approche actuarielle dans la prise de décisionL’approche actuarielle dans la prise de décision
L’approche actuarielle dans la prise de décision
 
Pluye et al._mthodes_mixtes
Pluye et al._mthodes_mixtesPluye et al._mthodes_mixtes
Pluye et al._mthodes_mixtes
 
Introduction rq exercer
Introduction rq exercerIntroduction rq exercer
Introduction rq exercer
 
Data Analyse
Data AnalyseData Analyse
Data Analyse
 

Más de ComSanté

La crise du journalisme et la qualité de l'information à l'ère numérique I Co...
La crise du journalisme et la qualité de l'information à l'ère numérique I Co...La crise du journalisme et la qualité de l'information à l'ère numérique I Co...
La crise du journalisme et la qualité de l'information à l'ère numérique I Co...ComSanté
 
L'accusation de 'fake news' : médias sociaux et effets politiques I Serge Proulx
L'accusation de 'fake news' : médias sociaux et effets politiques I Serge ProulxL'accusation de 'fake news' : médias sociaux et effets politiques I Serge Proulx
L'accusation de 'fake news' : médias sociaux et effets politiques I Serge ProulxComSanté
 
Portrait compétences informationnelles des élèves et des enseignants du Québec
Portrait compétences informationnelles des élèves et des enseignants du QuébecPortrait compétences informationnelles des élèves et des enseignants du Québec
Portrait compétences informationnelles des élèves et des enseignants du QuébecComSanté
 
Études de cas : reconnaissance d'une information en ligne | Alexandre Coutant
Études de cas : reconnaissance d'une information en ligne | Alexandre CoutantÉtudes de cas : reconnaissance d'une information en ligne | Alexandre Coutant
Études de cas : reconnaissance d'une information en ligne | Alexandre CoutantComSanté
 
Maitrise des compétences informationnelles : politiques éducatives et modèles...
Maitrise des compétences informationnelles : politiques éducatives et modèles...Maitrise des compétences informationnelles : politiques éducatives et modèles...
Maitrise des compétences informationnelles : politiques éducatives et modèles...ComSanté
 
Littératies et évaluation de l’information | Olivier Le Deuff
Littératies et évaluation de l’information | Olivier Le DeuffLittératies et évaluation de l’information | Olivier Le Deuff
Littératies et évaluation de l’information | Olivier Le DeuffComSanté
 
Autorités numériques et fausses nouvelles. L'autorité à l'époque du numérique
Autorités numériques et fausses nouvelles. L'autorité à l'époque du numérique Autorités numériques et fausses nouvelles. L'autorité à l'époque du numérique
Autorités numériques et fausses nouvelles. L'autorité à l'époque du numérique ComSanté
 
Études de cas : les contenus santé sur Facebook et leur engagement; reconnais...
Études de cas : les contenus santé sur Facebook et leur engagement; reconnais...Études de cas : les contenus santé sur Facebook et leur engagement; reconnais...
Études de cas : les contenus santé sur Facebook et leur engagement; reconnais...ComSanté
 
Circulation et visibilité des fausses informations dans un écosystème socionu...
Circulation et visibilité des fausses informations dans un écosystème socionu...Circulation et visibilité des fausses informations dans un écosystème socionu...
Circulation et visibilité des fausses informations dans un écosystème socionu...ComSanté
 
Définir les fausses informations et le contexte social de leur centralité
Définir les fausses informations et le contexte social de leur centralitéDéfinir les fausses informations et le contexte social de leur centralité
Définir les fausses informations et le contexte social de leur centralitéComSanté
 
Myelin : L’intelligence artificielle pour faciliter le transfert des connaiss...
Myelin : L’intelligence artificielle pour faciliter le transfert des connaiss...Myelin : L’intelligence artificielle pour faciliter le transfert des connaiss...
Myelin : L’intelligence artificielle pour faciliter le transfert des connaiss...ComSanté
 
L’application Jooay : Pour la promotion de la participation des enfants en si...
L’application Jooay : Pour la promotion de la participation des enfants en si...L’application Jooay : Pour la promotion de la participation des enfants en si...
L’application Jooay : Pour la promotion de la participation des enfants en si...ComSanté
 
Acceptabilité des contenus sponsorisés sur Instagram
Acceptabilité des contenus sponsorisés sur Instagram Acceptabilité des contenus sponsorisés sur Instagram
Acceptabilité des contenus sponsorisés sur Instagram ComSanté
 
À table avec Instagram : tendances normatives de l’alimentation proposées par...
À table avec Instagram : tendances normatives de l’alimentation proposées par...À table avec Instagram : tendances normatives de l’alimentation proposées par...
À table avec Instagram : tendances normatives de l’alimentation proposées par...ComSanté
 
Rapprocher et faire autrement
Rapprocher et faire autrementRapprocher et faire autrement
Rapprocher et faire autrementComSanté
 
État de la collaboration interprofessionnelle dans les GMF estriens
État de la collaboration interprofessionnelle dans les GMF estriensÉtat de la collaboration interprofessionnelle dans les GMF estriens
État de la collaboration interprofessionnelle dans les GMF estriensComSanté
 
Silence ! On cuisine : Produire des capsules vidéo sur l'alimentation en seco...
Silence ! On cuisine : Produire des capsules vidéo sur l'alimentation en seco...Silence ! On cuisine : Produire des capsules vidéo sur l'alimentation en seco...
Silence ! On cuisine : Produire des capsules vidéo sur l'alimentation en seco...ComSanté
 
Création d’un guide méthodologique pour favoriser le transfert du projet Arts...
Création d’un guide méthodologique pour favoriser le transfert du projet Arts...Création d’un guide méthodologique pour favoriser le transfert du projet Arts...
Création d’un guide méthodologique pour favoriser le transfert du projet Arts...ComSanté
 
La confiance et les publicités alimentaires sur Instagram
La confiance et les publicités alimentaires sur InstagramLa confiance et les publicités alimentaires sur Instagram
La confiance et les publicités alimentaires sur InstagramComSanté
 
L’influence parentale en alimentation abordée en entrevues individuelles par ...
L’influence parentale en alimentation abordée en entrevues individuelles par ...L’influence parentale en alimentation abordée en entrevues individuelles par ...
L’influence parentale en alimentation abordée en entrevues individuelles par ...ComSanté
 

Más de ComSanté (20)

La crise du journalisme et la qualité de l'information à l'ère numérique I Co...
La crise du journalisme et la qualité de l'information à l'ère numérique I Co...La crise du journalisme et la qualité de l'information à l'ère numérique I Co...
La crise du journalisme et la qualité de l'information à l'ère numérique I Co...
 
L'accusation de 'fake news' : médias sociaux et effets politiques I Serge Proulx
L'accusation de 'fake news' : médias sociaux et effets politiques I Serge ProulxL'accusation de 'fake news' : médias sociaux et effets politiques I Serge Proulx
L'accusation de 'fake news' : médias sociaux et effets politiques I Serge Proulx
 
Portrait compétences informationnelles des élèves et des enseignants du Québec
Portrait compétences informationnelles des élèves et des enseignants du QuébecPortrait compétences informationnelles des élèves et des enseignants du Québec
Portrait compétences informationnelles des élèves et des enseignants du Québec
 
Études de cas : reconnaissance d'une information en ligne | Alexandre Coutant
Études de cas : reconnaissance d'une information en ligne | Alexandre CoutantÉtudes de cas : reconnaissance d'une information en ligne | Alexandre Coutant
Études de cas : reconnaissance d'une information en ligne | Alexandre Coutant
 
Maitrise des compétences informationnelles : politiques éducatives et modèles...
Maitrise des compétences informationnelles : politiques éducatives et modèles...Maitrise des compétences informationnelles : politiques éducatives et modèles...
Maitrise des compétences informationnelles : politiques éducatives et modèles...
 
Littératies et évaluation de l’information | Olivier Le Deuff
Littératies et évaluation de l’information | Olivier Le DeuffLittératies et évaluation de l’information | Olivier Le Deuff
Littératies et évaluation de l’information | Olivier Le Deuff
 
Autorités numériques et fausses nouvelles. L'autorité à l'époque du numérique
Autorités numériques et fausses nouvelles. L'autorité à l'époque du numérique Autorités numériques et fausses nouvelles. L'autorité à l'époque du numérique
Autorités numériques et fausses nouvelles. L'autorité à l'époque du numérique
 
Études de cas : les contenus santé sur Facebook et leur engagement; reconnais...
Études de cas : les contenus santé sur Facebook et leur engagement; reconnais...Études de cas : les contenus santé sur Facebook et leur engagement; reconnais...
Études de cas : les contenus santé sur Facebook et leur engagement; reconnais...
 
Circulation et visibilité des fausses informations dans un écosystème socionu...
Circulation et visibilité des fausses informations dans un écosystème socionu...Circulation et visibilité des fausses informations dans un écosystème socionu...
Circulation et visibilité des fausses informations dans un écosystème socionu...
 
Définir les fausses informations et le contexte social de leur centralité
Définir les fausses informations et le contexte social de leur centralitéDéfinir les fausses informations et le contexte social de leur centralité
Définir les fausses informations et le contexte social de leur centralité
 
Myelin : L’intelligence artificielle pour faciliter le transfert des connaiss...
Myelin : L’intelligence artificielle pour faciliter le transfert des connaiss...Myelin : L’intelligence artificielle pour faciliter le transfert des connaiss...
Myelin : L’intelligence artificielle pour faciliter le transfert des connaiss...
 
L’application Jooay : Pour la promotion de la participation des enfants en si...
L’application Jooay : Pour la promotion de la participation des enfants en si...L’application Jooay : Pour la promotion de la participation des enfants en si...
L’application Jooay : Pour la promotion de la participation des enfants en si...
 
Acceptabilité des contenus sponsorisés sur Instagram
Acceptabilité des contenus sponsorisés sur Instagram Acceptabilité des contenus sponsorisés sur Instagram
Acceptabilité des contenus sponsorisés sur Instagram
 
À table avec Instagram : tendances normatives de l’alimentation proposées par...
À table avec Instagram : tendances normatives de l’alimentation proposées par...À table avec Instagram : tendances normatives de l’alimentation proposées par...
À table avec Instagram : tendances normatives de l’alimentation proposées par...
 
Rapprocher et faire autrement
Rapprocher et faire autrementRapprocher et faire autrement
Rapprocher et faire autrement
 
État de la collaboration interprofessionnelle dans les GMF estriens
État de la collaboration interprofessionnelle dans les GMF estriensÉtat de la collaboration interprofessionnelle dans les GMF estriens
État de la collaboration interprofessionnelle dans les GMF estriens
 
Silence ! On cuisine : Produire des capsules vidéo sur l'alimentation en seco...
Silence ! On cuisine : Produire des capsules vidéo sur l'alimentation en seco...Silence ! On cuisine : Produire des capsules vidéo sur l'alimentation en seco...
Silence ! On cuisine : Produire des capsules vidéo sur l'alimentation en seco...
 
Création d’un guide méthodologique pour favoriser le transfert du projet Arts...
Création d’un guide méthodologique pour favoriser le transfert du projet Arts...Création d’un guide méthodologique pour favoriser le transfert du projet Arts...
Création d’un guide méthodologique pour favoriser le transfert du projet Arts...
 
La confiance et les publicités alimentaires sur Instagram
La confiance et les publicités alimentaires sur InstagramLa confiance et les publicités alimentaires sur Instagram
La confiance et les publicités alimentaires sur Instagram
 
L’influence parentale en alimentation abordée en entrevues individuelles par ...
L’influence parentale en alimentation abordée en entrevues individuelles par ...L’influence parentale en alimentation abordée en entrevues individuelles par ...
L’influence parentale en alimentation abordée en entrevues individuelles par ...
 

Méthodes de recherche mixtes

  • 1. Méthodes de recherche mixtes Pierre Pluye MD PhD Professeur agrégé, Nouveau chercheur IRSC Département de médecine familiale, Université McGill Université du Québec à Montréal - UQAM Séminaire de recherche ComSanté 24 janvier 2012 (10:00 – 12:00)
  • 2. Présentation Pierre Pluye • Information: Quelle est la ‘valeur’ des informations? o Technologies de l‘information et de la communication o Approche centrée sur l’utilisateur (patient-centered) • DENT 672: ‘Applied mixed methods in health research’ o Drs. Levine, Nicolau and Pluye o Cours de 3 crédits (hiver) • FMED 600: ‘Mixed studies reviews’ o Cours de 1 crédit (été) • ‘Mixed Methods Appraisal Tool’ • Divergence QUAL vs. QUAN • Centre Cochrane canadien
  • 3. Présentations 1. Sujet de recherche – 1 titre (résumé, protocole, publication) – 2 ou 3 mots clés 2. Méthode(s) de recherche – Méthodes quantitatives? – Méthodes qualitatives? – Méthodes mixtes? 3. Revue(s) de littérature – Revues quantitatives? – Revues qualitatives? – Revues mixtes?
  • 4. Méthodes mixtes Combinaison des méthodes qualitatives et quantitatives Depuis longtemps… … Récemment conceptualisées en termes de méthodes mixtes (premier livre de référence ‘handbook’ publié en 2003)
  • 5. Méthodes mixtes: Besoins 3 principales raisons de combiner QUAL & QUAN • Besoin de QUAL pour interpréter des résultats QUAN • Besoin de QUAN pour généraliser des résultats QUAL • Besoin d’explorer (QUAL) et de mesurer (QUAN) 1 caractéristique clé • Intégration des aspects qualitatifs et quantitatifs (par opposition à 2 études séparées : 1 QUAL et 1 QUAN)
  • 6. Méthodes mixtes: Objectif Combiner les forces des méthodes qualitatives et quantitatives QUAL • Description de phénomènes sociaux complexes (par ex. interventions et programmes de santé publique) • Résultats spécifiques (contexte) • Leçons transférables (par ex., concepts et théories) QUAN • Mesures, descriptions généralisables et relations causales (inférences statistiques) Exemple • QUAN: Un programme est implanté, mais on comprend mal les raisons pour lesquelles il est ‘bien’ implanté dans certains contextes, et ‘mal’ implanté dans d’autres contextes • QUAL: Mieux comprendre l’implantation des programmes complexes de santé publique et ses conséquences
  • 7. Mixed Methods: Complementary QUAL & QUAN QUALITATIVE ideal-type QUANTITATIVE ideal-type Exploration & interpretation Explanation & causality QUAL QUAN (e.g., to explore a new phenomenon* and generalize QUAL findings) QUAL QUAN (e.g., to better understand processes* or QUAN ‘factors-outcomes’) Qualitative approaches/designs Biostatistics & Epidemiology (words, sounds, pictures, videos) (measures and numbers) *An innovative clinical intervention or public health program for instance
  • 8. Méthodes mixtes Combinaisons les plus fréquentes MÉTHODES QUALITATIVES MÉTHODES QUANTITATIVES • Ethnographie Essais randomisés (anthropologie & sociologie) Essai contrôlé randomisé • Étude de cas (sciences sociales) Études non-randomisées • ‘Description qualitative’ Étude de Cohorte (sciences de la santé) Étude de comparaison de cas • Phénoménologie Essai non randomisé (philosophie & psychologie) • Narratifs: Biographies et récits de vie Études descriptives (sciences sociales) Enquête transversale (I ou P) • Théorisation ancrée Série de cas (sociologie) QUAL ou QUAN ou MIXED: Approche participative (recherche-action)
  • 9. Méthodes mixtes: Conceptualisation Idéal type QUAL Idéal type QUAN Interprétation Mesure Recherches qualitatives Biostatistiques/Épidémiologie Constructivisme ? Positivisme • Idéalisme Pragmatisme • Matérialisme • Relativisme Réalisme critique • Réalisme • Subjectivité Constructionisme • Objectivité • ‘Looping effects’ • ‘Spiralling’
  • 10. Deux types de devis séquentiel (2 phases) DEVIS DESCRIPTION EXPLICATIF • Phase QUAN puis explication QUAL QUAN QUAL • Intégration entre ou après les 2 phases Par ex., évaluation QUAN (échantillon), puis suivi QUAL (sous-échantillon) EXPLORATOIRE • Proposition QUAL puis phase QUAN QUAL QUAN • Intégration entre ou après les 2 phases Par ex., développement d’outils (contenu QUAL puis analyse des facteurs QUAN)
  • 11. Devis concomitants (1 phase) DEVIS DESCRIPTION CONVERGENCE • Évaluation concomitante QUAL et QUAN QUAL + QUAN • Intégration pendant la collecte et l’analyse des données • Deux principaux types d’analyse: 1. Triangulation: Deux aspects complémentaires de la même question 2. Matrice: Collection et analyse des données QUAL et QUAN sur les mêmes cas
  • 13. 1 • Sequential explanatory design • Sequential exploratory design • Convergence design (concomitant)
  • 14. Interpretation of QUAN QUAL QUAN results based on QUAL findings • QUAL data/findings assist in the interpretation of QUAN results • Primary focus is to explain a phenomenon • Explaining and interpreting unexpected results • Exploring certain results in more detail
  • 15. Sequential explanatory design Sampling (examples) • Same participants for QUAN and QUAL phases (small samples) • Participants from the same sample for both phases QUAN and QUAL • Participants from the same population for the two phases QUAN and QUAL
  • 16. Sequential Explanatory Design: Example 2 MM Purpose: To measure and better understand the role of passive smoking among subjects with and without Head & Neck Cancer (H&NC) Objectives QUAN: To estimate self reported passive smoking among H&NC patients and controls participating in a cohort study* Hypothesis: We hypothesized that H&NC patients will be more likely to report exposure to smoking compared to control subjects QUAL: To explore and understand participants’ perception of exposure to smoke *HeNCe life study: See www.mcgill.ca/dentistry/research/our-researchers/nicolau
  • 17. 2 • Sequential explanatory design • Sequential exploratory design • Convergence design (concomitant)
  • 18. Transfer or generalize QUAL QUAN QUAL findings based on QUAN results • QUAN data/results assist in the transferability or generalization of QUAL findings • Primary focus is to explore a phenomenon • Testing elements of emergent theory, framework, instrument • Transferring QUAL findings in different samples (contexts) • Determining the distribution of the phenomenon within a chosen population (or testing an instrument)
  • 19. Sequential exploratory design: Example 1 MM purpose: To develop a method for assessing information objects derived from electronic knowledge resources: (I) Discover broad categories of impacts; and (II) Test an assessment method and compare two databases in a larger population. Phase I Phase II Data Data Data Data I collection Analysis Results Results collection Analysis N Impact of Qualitative Thematic Themes T Cohort study: - Hand held Descriptive statistics & searches multiple analysis of Six types of E computer Chi-square reported by case study: qualitative cognitive FM residents - Critical data impact: G - Databases - Search Comparison incident •Practice R tracking and of Clinical technique improvement information - Interviews •Learning A theme-base questionnaire retrieval - Observation •Confirmation •Reassurance T technology vs. Clinical •Recall I decision •Frustration •No impact O support Six family 20 FM residents systems physicians N N= 2,495 searches Final integration of QUAN results & QUAL findings: Information Assessment Method
  • 20. 3 • Sequential explanatory design • Sequential exploratory design • Convergence design
  • 21. Convergence Design + QUAN QUAL concomitant ONE-PHASE DESIGN ONE PHENOMENON Interpretation based on QUAN + QUAL Objectives • To integrate the analysis of 2 concomitant datasets (QUAN+QUAL) addressing the same topic by either bringing separate data analysis together in the interpretation or by transforming data • To “obtain different but complementary data” (Morse 1991)
  • 22. Convergence design Two common types of data analysis DESIGN DESCRIPTION CONVERGENCE • Concomitant assessment QUAL and QUAN QUAL + QUAN • Integration during data collection/analysis • Two types of data analysis (mixing data) 1. Triangulation: Two complementary aspects of the same question 2. Mixed methods matrix: E.g., collection/analysis of QUAL and QUAN data on the same cases
  • 23. Convergence design: Examples 3.1. Triangulation • Data validation • Data transformation • Multi-level analysis
  • 24. 3.1.1. Convergence design with data validation
  • 25. CONTEXT The Information Assessment Method (IAM) documents: 1. Why doctors search for information 2. What are the associated cognitive impacts 3. How information is used for a specific patient 4. What are the subsequent patient health outcomes OBJECTIVES • To assess the relevance of IAM items (QUAN) • To assess the representativeness of IAM items (QUAL) Content validity is the degree to which elements of an assessment instrument are relevant to and representative of the targeted construct.
  • 26. DESIGN Mixed methods research study – convergence design • A quantitative prospective observational study • Combined with a qualitative multiple case study PARTICIPANTS & INTERVENTION • 40 Canadian family physicians • Searches in Essential Evidence Plus (7 databases) • Over an average of 320 days DATA COLLECTION Quantitative • For each search: Information rated using the IAM questionnaire Qualitative • Participants interviewed to explain a purposeful sample of ratings
  • 27. DATA ANALYSIS QUAN Relevance: R = Number of ratings for the item Number of ratings for all items (same construct) Item considered relevant when R ≥ 10% E.g., number of ratings “Address a clinical question” = 1310 And total number of ratings (Reasons to search) = 4253 1310 R 100 31% 4253 QUAL Representative: Participant’s explanation fits the researchers’ definition for the item (in the context of a clinical story) Item considered representative when the number of ‘fits’ ≥ 80%
  • 28.
  • 29. Validation vs. Illustration Systematic and rigorous validation studies Vs. illustration of QUAN using QUAL Illustration of QUAN using QUAL • E.g, optional open-ended question at the end of a self- administered questionnaire (free comment box) • Caveat: “Because the QUAL items are an add-on to a QUAN survey, the items do not result in a rigorous qualitative dataset” (illustrative quotes) • Constitutes a grey area of mixed methods research
  • 30. Convergence design: Examples 2. Mixed methods matrix NAPCRG annual conference 2010
  • 32. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Pierre Pluye, Roland M Grad, Janique Johnson-Lafleur, Vera Granikov, Michael Shulha, Bernard Marlow, Ivan L Marques Ricarte Introduction • Grâce aux ressources électroniques, les médecins peuvent obtenir rapidement des réponses à leurs questions cliniques. • Études observationnelles: Effets cognitifs positifs sur les médecins. • Aucune étude systématique sur les résultats associés à l'utilisation des informations en terme de santé des patients. • En médecine familiale, environ la moitié des questions cliniques ne sont pas poursuivies par les médecins en raison de la pression du temps etc. • Question de recherche: Pour combien de patients un médecin doit trouver des informations cliniques en cherchant dans des ressources électroniques afin d’obtenir des résultats sur la santé d’un patient?
  • 33. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Revue de littérature mixte • Revue critique de 29 études qualitatives et quantitatives sur l'utilisation des informations en médecine. • Aucune étude fondée sur un cadre conceptuel ou un modèle théorique. • Aucune étude systématique des objets d'informations. • Aucune évaluation exhaustive de leur utilisation et des résultats en terme de santé. • Données qualitatives et quantitatives rapportées séparément. • Aucune étude combinant des données quantitatives (suivi de l'utilisation des informations) avec des données qualitatives (histoires cliniques détaillées).
  • 34. Acquisition of information Cognition Application Outcomes International Journal of Person Centered Medicine, 2011, 1(2), 385-394.
  • 35. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes NNBI = 7 Projet pilote avec des résidents en médecine familiale (R1) Résultats en terme de santé des patients • Amélioration de l’état de santé • Prévention des maladies ou de leur aggravation • Évitement d’interventions inappropriées ou inutiles • Diminution de l’anxiété vis-à-vis des maladies ou des soins de santé • Augmentation des connaissances sur la santé ou les maladies International Journal of Person Centered Medicine, 2011, 1(2),395-404.
  • 36. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Objectifs • A partir d’un modèle théorique, décrire l'utilisation par les médecins de famille de l'information clinique issue d'une ressource électronique, et les résultats sur la santé des patients. Méthodes • Devis: méthodes mixtes (convergence) combinant une étude quantitative observationnelle prospective, et une étude qualitative de cas multiples. • Cliniques de soins de santé primaire - Canada. • 41 médecins de famille provenant de neuf provinces. • Accès à une ressource sur un ordinateur de poche.
  • 37. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Méthodes (suite) • Quantitative: Méthode d'évaluation des informations (questionnaire ‘pop- up’ après chaque recherche d’information) • Qualitative: Entretiens guidés par les ‘log-reports’ (date, heure, titre des informations retrouvées, questionnaires complétés). Multiple sources de données : archives, log reports, interviews and observations. • Recherches critiques (cas) définies comme les recherches décrites clairement où l'information clinique a été utilisée pour un patient spécifique. • Pour chaque cas, les personnes interrogées ont décrit les informations retrouvées, la situation clinique, et les résultats en terme de santé. • Analyse des données: Les données quantitatives et qualitatives ont été fusionnées sous forme de vignettes cliniques (données mixtes). • Calcul du nombre de patients (recherches) pour lesquels l'information clinique doit être trouvée afin qu’un patient en bénéficie (NNBI).
  • 38. QUAN Situational Cognition Application relevance
  • 39. Quantitative + Qualitative longitudinal study concomitantly multiple case study Information Assessment Method For each search with IAM rating (IAM) ‘information use for a patient’: For each search for information: • In-depth interview stimulated by Data collection integration Pop-up questionnaire on search the corresponding log-report objectives, and cognitive impact • Information content read and rated and use of information by the interviewee Critical incident technique Descriptive statistics Thematic analysis Log-reports including dates of Data analysis Identification and coding of critical searches, titles of information searches (clear clinical situation and hits, and IAM ratings information use) integration • For each critical search (case): Cross-tabulation of qualitative and quantitative data • Interpretation of qualitative and quantitative data for writing clinical vignettes Mixing data • Building a meta-matrix (rows representing vignettes and columns mixed data) • Creation of a path diagram (visual representation of all vignettes)
  • 40. Quantitative + Qualitative longitudinal study concomitantly multiple case study Information Assessment Method For each search with IAM rating (IAM) ‘information use for a patient’: For each search for information: • In-depth interview stimulated by Data collection integration Pop-up questionnaire on search the corresponding log-report objectives, and cognitive impact • Information content read and rated and use of information by the interviewee Critical incident technique Descriptive statistics Thematic analysis Log-reports including dates of Data analysis Identification and coding of critical searches, titles of information searches (clear clinical situation and hits, and IAM ratings information use) integration • For each critical search (case): Cross-tabulation of qualitative and quantitative data Mixing • Interpretation of qualitative and quantitative data for writing clinical vignettes • Building a meta-matrix (rows representing vignettes and columns mixed data) data • Creation of a path diagram (visual representation of all vignettes)
  • 41. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Résultats • 39 médecins interviewés (1 sans données et 1 non disponible) • 26 médecins (66,7%) ‘académiques’ • 23 hommes et 16 femmes en pratique active • Agés de 28 à 70 ans (médiane 44 ans)
  • 42. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Résultats: Recherches d’information • 1193 recherches en 2008-2009 (moyenne 86 jours) • 715 (59,9%) avec objectif directement liée à un patient: – répondre à une question clinique, – partager des informations avec un patient, – planifier ou gérer des soins avec d'autres professionnels. • 365 (30,6%) avec information utilisée pour un patient • 188 (15,8%) recherches critiques (cas) = 188 vignettes
  • 43. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Résultats (suite) 188 recherches critiques (cas) décrites en vignettes cliniques. • Dans 53 cas, les médecins interrogés ont associé l'utilisation des informations avec au moins un avantage pour la santé des patients. • Par exemple, dans 28 cas, ils ont associés l'utilisation des informations avec l’évitement d’interventions inutiles ou inappropriés. • En conséquence, les médecins interrogées ont trouvé des informations cliniques pour 715 patients, et rapporté des bénéfices de santé pour 53: Cela suggère ‘NNBI = 14’.
  • 44. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Résultats NNBI=14 ACQUISITION (n=715 searches done for a patient) Information object relevant to fulfill the search objective? Yes COGNITION Having positive cognitive impact? Yes APPLICATION Used for a patient? Yes OUTCOMES (n=53)
  • 45. MIXED METHODS MATRIX Quantitative + qualitative data on the same cases DIAGNOSIS EXAMPLE: CLINICAL VIGNETTE Acquisition • QUAN : Family physician in Quebec; Search for information on wrist trauma; Reasons: (1) to address a clinical question, and (2) to share information with a patient • QUAL : “This is a woman in her forties. She had taken a fall some weeks before onto her hand, um, and initial x-rays, and then a follow up x-ray didn’t show any fracture. (…) She tried to return to work, it didn’t work out, she was still having a lot of difficulty. (…) I was looking up the next step in terms of imaging… because she’d already had two negative x-rays”
  • 46.
  • 47. Cognition • QUAN: The above information object ; ‘I learned something new’ and ‘My practice will be changed and improved’ • QUAL: “The new information was that MRI is the test to do when you’re in the situation of suspecting a fracture. (…) The usefulness of the MRI in diagnosing a fracture if the plain x-ray was negative, but you’re still suspecting it clinically.” Application • QUAN: ‘I used this information for a specific patient’ • QUAL: “Choosing the appropriate diagnostic test, because there’s a repertoire of things that one would consider doing… bone scans, and CT and such, and the MRI seemed to be the definitive thing.” Outcomes • QUAL: Regarding patient health, MD reported this clinical information helped avoid unnecessary diagnostic procedure (CT scan)
  • 48. MATRIX COLUMNS: MIXED METHODS DATA SUMMARY ROWS: CASES
  • 50. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Discussion • Première étude systématique de l'utilisation des informations par des médecins de famille, et des résultats sur la santé des patients. • Limites – Étude observationnelle – ‘Self-report’ (perception des résultats selon les médecins) – Manque de suivi (résultats au moment de l’entretien) • Forces – Étude mixte (nombreux cas décrits en profondeur). – QUAN: Questionnaire diminuant le biais de mémoire – QUAL: ‘Log reports’ stimulant la mémoire des participants – Validité de la technique des incidents critiques (cf. revue)
  • 51. Nombre Nécessaire pour Bénéficier des Informations (NNBI) en médecine familiale: Étude avec des méthodes mixtes Conclusion Proposition à tester: NNBI • Projet pilote avec des résidents (R1): NNBI = 7 • Médecins en pratique active: NNBI = 14 Plus le NNBI est faible, mieux c’est, et un NNBI faible peut: • encourager les cliniciens à chercher des informations plus souvent • justifier plus de formation pour chercher des informations • modifier la perception des patients sur les recherches d’information Besoin de recherches expérimentales futures pour : • mesurer le NNBI (tester notre proposition) • comparer des ressources documentaires ($$$)
  • 52. 4 • Sequential explanatory design • Sequential exploratory design • Convergence design • Variants of previous designs
  • 53. Variants of previous designs DESIGNS DESCRIPTION EMBEDDED • Variant of Convergent design • QUAL(quan) E.g., Triangulation: a (qual) case study (process) • QUANT(qual) embedded within a (QUAN) Randomized Controlled Trial (outcomes) • Variant of Sequential exploratory design E.g., Development of an intervention with children (QUAL) and assessment in schools (quan) MULTIPHASE • Multiple phases of a research program • Long-term goal, e.g., assess PUSH & PULL health information, and multiple mixed methods studies • « We are only beginning to think about how to classify variants » (Creswell & Plano Clark, p. 103).
  • 54. RECAP TABLE : Take-home message DESIGN DESCRIPTION EXPLANATORY • QUAN then QUAL explanation QUAN QUAL • Integration between/after the 2 phases E.g., QUAN assessment then QUAL follow-up EXPLORATORY • QUAL proposal then QUAN QUAL QUAN • Integration between/after the 2 phases E.g., tool dvt. (QUAL content & QUAN factor analysis) CONVERGENCE • Concomitant assessment QUAL and QUAN QUAL + QUAN • Integration during data collection/analysis • Two types of data analysis (mixing) 1. Triangulation Two complementary aspects of the same question E.g., data validation, transformation, multilevel analysis 2. Mixed methods matrix Collection/analysis of QUAL & QUAN data on same cases
  • 55. Supplemental slides If time allows… – Data mixing – GRAMMS – Quality appraisal – Divergence
  • 56. Strategies for mixing QUAL & QUAN data and/or results 5 strategies Creswell *O’Cathain, Murphy & & Plano Clark Nicholl, 2011 2007 < 2010 Typology Good definition NA development Extreme case Good definition NA analysis Data Good definition NA transformation and examples Results Triangulation Good examples comparison design (2 sets of findings) Data merging Rare (2007) Mixed methods matrix (joint display) Good definition Going back & forth (2010) (“following a thread”) *See dropbox 56
  • 57. Writing Mixed Methods Research Good Reporting of A Mixed Methods Study (GRAMMS) O'Cathain et al. J. Health Services Research & Policy, 2008, 13(2), 92-98. • Justification for using mixed methods • Description of the design • Description of each methods (sampling, etc.) • Integration of data collection/analysis and/or results • Limitations because of the mixing • Insights gained from mixing
  • 58. Mixed Methods Appraisal Tool The 2011 version (criteria and tutorial) http://mixedmethodsappraisaltoolpublic.pbworks.com Checklist for appraising and/or describing studies included in systematic mixed studies reviews (reviews including original qualitative, quantitative and mixed methods studies). Pilot version (reliability testing) Pace, Pluye et al. (2011). Testing the reliability and efficiency of the pilot Mixed Methods Appraisal Tool (MMAT) for systematic mixed studies review. International Journal of Nursing Studies. doi:10.1016/j.ijnurstu.2011.07.002
  • 59. Divergence QUAN vs. QUAL • Divergence usually observed during data analysis or interpretation of results (rarely by design: dialectical) • Differences between QUAL and QUAN data or results (difference, conflict, contradiction, discordance, discrepancy, dissonance and inconsistency) • Strategies: Reconciliation, Initiation, Exclusion Pluye et al. (2009). Divergence of qualitative and quantitative evidence in mixed methods studies. Int. J. Multiple Research Approaches, 3(1): 58-72. 59
  • 60. REVUES MIXTES Définition • Revues de littérature incluant des études qualitative, quantitative et mixtes, par ex., processus et résultats • Par opposition aux revues incluant uniquement des études QUAN (par ex., revues systématiques des essais contrôlés randomisés) ou uniquement des études QUAL (par ex., méta-ethnographies) • Méthodes mixtes appliquées aux revues de littérature (données = texte des publications)
  • 61. REVUES MIXTES EN SANTE Identification – 2,322 références (auteurs, titre, source, résumé) – PubMed: stratégie « quantitative AND qualitative OR mixed method(s) OR multi(-)method (review, abstract) » (jusqu’en mars 2006) Sélection – 149 articles examinés par 2 réviseurs – Inclusion: Revues de littérature incluant des études qualitative et quantitative (et-ou mixtes) Synthèse – 59 articles – Analyse thématique Pluye et al. International Journal of Nursing Studies, 2009,46:529-546.
  • 62. REVUES MIXTES SYSTEMATIQUE* REPRODUCTIBLE CONVENANCE Question X X X (N=59) Identification X X (N=40) Selection X X (N=40) Appraisal X (N=17) Synthesis X X X (N=59) Number (%) 17 (29%) 23 (39%) 19 (32%) *Recherche exhaustive, réviseurs indépendants, évaluation de la qualité méthodologique: Mixed Methods Appraisal Tool = http://mixedmethodsappraisaltoolpublic.pbworks.com
  • 63. Cadre conceptuel pour les revues mixtes Types de synthèse Articles 1. Convergence: Synthèse QUAN d’études QUAL, QUAN & MM Analyse de contenu (transformation en valeurs de variables) Rare Quantitative case survey (méthodologie) Rare 2. Convergence: Synthèse QUAL d’études QUAL, QUAN & MM Analyse thématique (transformation en thèmes) Fréquent Qualitative multiple case study (méthodologie) Rare Théorisation ancrée (méthodologie conduisant à un modèle) Rare 3. Séquentiel • Explicatif: Analyse des études QUAN puis des études QUAL Fréquent • Exploratoire: Analyse des études QUAL puis des études QUAN Rare
  • 64. All types of synthesis for MSRs Recommended Specialized Research 1. Convergence QUAN Quantitative case survey X Content analysis X Bayesian analysis X Boolean analysis X Lexical-semantic analysis X 2. Convergence QUAL Qualitative multiple case study X Thematic analysis X Grounded Theory X Critical interpretive synthesis X Realist synthesis X 3. Sequential Explanatory X Exploratory X
  • 66. Ressources • DENT672 - FMED603: Méthodes mixtes (hiver - 3 crédits) • FMED600: Revues mixtes (été - 1 crédit) • Creswell & Plano-Clark (2010). Designing & conducting mixed methods research. Sage . • Pope, Mays & Popay (2007). Synthesizing Quantitative and Qualitative Health Research. Ramsay Books. • Pluye et al. (2009). Les méthodes mixtes pour l’évaluation des programmes. In Ridde V & Dagenais C (eds.), Théories et pratiques en évaluation de programme: Manuel d’enseignement (pp. 123-141). Presses de l’Université de Montréal. • Pluye et al. (2009). A scoring system for appraising mixed methods research, and concomitantly appraising qualitative, quantitative and mixed methods primary studies in mixed studies reviews. International Journal of Nursing Studies, 46(4):529-546. • Pluye et al. (2009). Understanding divergence of quantitative and qualitative data (or results) in mixed methods studies. International Journal of Multiple Research Approaches, 3(1):58-72.