Évaluation de la mise en oeuvre d’interventions à déploiement variable : exemple d’utilisation pratique de la théorie

Résumé

Dans le cadre de l’évaluation de la mise en oeuvre d’un programme, il est fréquent que les évaluateurs s’en tiennent à une évaluation de la conformité, soit une évaluation du niveau de respect du modèle initial proposé dans ce programme. Ce type d’évaluation, quoique nécessaire, ne permet pas d’expliquer les écarts qui sont fréquemment observés entre le programme planifié et celui réellement implanté. Dans le contexte de deux évaluations de stratégies d’envergure, le Projet jeunesse montréalais et la Stratégie d’intervention Agir autrement du ministère de l’Éducation, du Loisir et du Sport du Québec (MELS), un cadre conceptuel, s’appuyant notamment sur la documentation dans le champ de l’analyse organisationnelle et de la sociologie de la traduction, a été utilisé afin de documenter la mise en oeuvre de ces deux programmes. Le présent article a pour objectif d’illustrer, à partir de résultats de ces deux projets d’évaluation, l’utilité d’un tel cadre conceptuel.

Mots-clés :

• Sociologie des innovations,
• utilisation de la théorie,
• évaluation de mise en oeuvre

Abstract

In the context of the implementation of program evaluation, the evaluators frequently make a conformity evaluation. This type of evaluation consists in the measurement of level of respect to the initial model proposed in this program. It is not sufficient to explain the differences observed between the initial planning and the program actually implemented. In the context of two evaluations of large-scale strategies, the Youth Montreal Project and the New approach, New strategy (NANS), a conceptual framework inspired by the literature in the field of the organizational analysis and the sociology of the innovation was used to analyse the application of these programs. The utility of such framework is illustrated from the results of these two evaluation projects.

Keywords:

• Sociology of the innovation,
• utilization of theory,
• implementation evaluation

Resumo

No âmbito da avaliação da implementação de um programa, é frequente que os avaliadores se fixem numa avaliação da conformidade, isto é, numa avaliação do nível de respeito pelo modelo inicial proposto neste programa Este tipo de avaliação, ainda que necessária, não permite explicar os desvios que frequentemente são observados entre o programa planificado e o que realmente foi implementado. No contexto de duas avaliaçãoes de estratégias de envergadura, o Projet jeunesse montréalais e a Stratégie d’intervention Agir, do ministère de l’Éducation, du Loisir et du Sport Québec (MELS), foi utilizado um quadro conceptual, apoiando-se sobretudo na documentação do campo de análise organizacional e da sociologia da tradução, para documentar a implementação destes dois programas. Este artigo tem por objectivo ilustrar, a partir de resultados destes dois projectos de avaliação, a utilidade do referido quadro conceptual.

Palavras chaves:

• Sociologia das inovações,
• utilização da teoria,
• avaliação de implementação