Eight ways to get a grip on intercoder reliability using qualitative-based measures Huit façons de maîtriser la fidélité intercodeur en utilisant des mesures qualitatives

Abstract

The use of quantitative intercoder reliability measures in the analysis of qualitative research data has often generated acrimonious debates among researchers who view quantitative and qualitative research methodologies as incompatible due to their unique ontological and epistemological traditions. While these measures are invaluable in many contexts, critics point out that the use of such measures in qualitative analysis represents an attempt to import standards derived for positivist research. Guided by extant research and our experience in qualitative research, we argue that it is possible to develop a qualitative-based measure of intercoder reliability that is compatible with the interpretivist epistemological paradigm of qualitative research. We present eight qualitative research process-based guidelines for evaluating and reporting intercoder reliability in qualitative research and anticipate that these recommendations will particularly guide beginning researchers in the coding and analysis processes of qualitative data analysis.

Résumé

L’utilisation de mesures quantitatives de la fidélité intercodeur dans l’analyse de données de recherche qualitative a souvent suscité des débats acrimonieux parmi les chercheurs qui considèrent qu’en raison de leurs traditions ontologiques et épistémologiques différentes, les méthodologies de recherche quantitative et qualitative sont incompatibles. Bien que ces mesures soient précieuses dans de nombreux contextes, les critiques soulignent que leur utilisation dans l’analyse qualitative constitue une tentative d’importer des normes dérivées de la recherche positiviste. Nous nous appuyons sur les recherches existantes et sur notre expérience en recherche qualitative pour soutenir qu’il est possible de développer une mesure qualitative de la fidélité intercodeur qui soit compatible avec le paradigme épistémologique interprétativiste de la recherche qualitative. Nous proposons huit recommandations, fondées sur des lignes directrices en recherche qualitative pour évaluer et rapporter la fidélité intercodeur en recherche qualitative. Nous espérons qu’elles seront particulièrement utiles pour guider les chercheurs débutants dans les processus de codage et d’analyse des données qualitatives.