La propension des gestionnaires envers les évaluations participatives

Abstract

Davantage d’évaluations de projets internationaux dans les pays en développement se réalisent pour informer les décisions sur la base de données probantes. L’utilisation des résultats d’évaluation est remise en cause et pour y remédier des évaluations participatives qui incluent à certaines étapes du processus évaluatif des acteurs non évaluateurs sont proposées. Parmi celles-ci, les évaluations participatives pratiques visent principalement à améliorer l’utilisation du processus et des résultats des évaluations. Ces évaluations participatives pratiques seraient obstruées par des attitudes individuelles négatives, ou résistance individuelle au changement, et favorisées par des attitudes individuelles positives, ou propension. Cette thèse propose d’étudier la propension individuelle des gestionnaires envers les évaluations participatives pratiques d’intervention (EPP), les éléments influençant cette propension, et de caractériser des niveaux de propension des individus envers les EPP. Tout d’abord une revue de littérature a proposé une définition multidimensionnelle de la propension envers les EPP comme étant une attitude favorable envers la pratique des EPP qui se décline à chaque étape d’une évaluation sous les volets affectif et cognitif. Les dimensions identifiées théoriquement étaient : apprentissage, travail en groupe, emploi de méthodes systématiques, usage de l’esprit critique. Ces dimensions ont servi de cadre pour la partie empirique de la thèse. Une étude de cas multiples avec les gestionnaires d’une institution de santé en Haïti a été menée pour contextualiser la propension et identifier les éléments d’influence. Les données ont été recueillies à l’aide d’entrevues semi-structurées et de sources documentaires. L’analyse des données concernant l’apprentissage a révélé une prédominance des formes d’apprentissage par l’action et par l’observation. Le travail en groupe se retrouve ancré dans la pratique des gestionnaires administratifs et des gestionnaires cliniques. Les méthodes systématiques se reflètent principalement dans la consultation de plusieurs acteurs ayant de l’intérêt pour la problématique immédiate à solutionner plutôt que par l’outillage méthodologique. L’emploi de méthodes systématiques prend généralement la forme de consultation élargie d’avis pour régler une situation ou prend la forme de tentative de validation des informations reçues. L’esprit critique se déclenche sous stimulation lorsque l’image individuelle, professionnelle, corporative ou organisationnelle est touchée ou lors de suggestions jugées constructives. En plus de contextualiser quatre composantes de la propension individuelle envers les EPP, les gestionnaires se sont positionnés par rapport à la propension de leurs collègues sur la base de la réactivité, plus ou moins réactif vis-à-vis des composantes de la propension individuelle. Ainsi, la propension étudiée empiriquement a laissé émerger deux axes : un axe formalisation et un axe réactivité. L’axe formalisation reprend la contextualisation des quatre composantes de la propension individuelle envers les EPP, soit la forme d’expression des composantes. L’axe réactivité reprend le niveau d’activité déployé dans chaque composante de la propension individuelle, de réactif à plus proactif. De plus, des profils d’individus ayant différents niveaux de propension envers les EPP ont été développés. Des influences favorables et défavorables au niveau de propension envers les EPP ont été identifiées. L’originalité de cette thèse tient dans le fait de se positionner dans un courant récent de réflexion autour de la résistance aux changements et aux évaluations avec un regard positif et d’avoir défini théoriquement et appliqué empiriquement le concept pluridimensionnel de propension individuelle aux EPP. Des profils de niveau de propension individuelle aux EPP et les éléments d’influence favorables et défavorables associés peuvent servir d’outil de diagnostic aux types d’évaluation possibles, servir d’ajustement à la mise en place d’évaluations selon les interlocuteurs, permettre le suivi des changements de niveaux de propension pendant une EPP et servir de sources d’informations pour ajuster les plans d’évaluations participatives.

Increasing importance is being given to the evaluation of international projects implemented in developing countries. Some approaches to evaluation seek to include non-evaluators in some steps of the evaluation process. It is believed to result in decision-making that is better supported by the evidence. One such approach is practical participatory evaluation, or PPE. PPE faces a number of challenges, including negative individual attitudes or resistance to change on the part of non-evaluator participants. This thesis studies the positive individual attitudes or propensity of managers toward PPE. It examines the factors that affect individual propensity toward PPE and individual variation in propensity toward PPE. I first defined propensity toward PPE based on a literature review. In general, propensity toward PPE is a favourable attitude, both affectively and cognitively, toward the practice of PPE at all steps of the evaluation process. More specifically, it comprises four dimensions: learning, working in groups, use of systematic methods and use of judgment. I used these dimensions to analyse data I collected in a multiple case study of managers working at a health institution in Haïti. The data came from semi-structured interviews and documentary sources. I found that learning mainly occurred though doing and observing. Working in groups was entrenched in the daily practice of both administrative and clinical health managers. The use of systematic methods took the form of managers consulting multiple actors who had a stake in the immediate problem being addressed, rather than using methodological tools. The use of systematic methods involved either seeking a broader array of opinions in order to solve a situation or attempting to validate information received. Health managers used judgment in situations where their individual, professional, corporative or organizational image was affected, or when others had constructive suggestions to make. In addition to explaining the contexts in which they have exhibited, or would exhibit, each of the four behaviours of propensity toward PPE, the health managers also ranked themselves vis-à-vis their colleagues in terms of frequency of occurrence and degree of integration into daily practice. Hence, this empirical study of propensity yielded data on two aspects of propensity: “formalization” and “reactivity”. The formalization aspect contextualized the four dimensions, showing the forms that learning, working in groups, using systematic methods and using judgment actually take for these particular managers. The reactivity aspect revealed the degree of energy exhibited for each of the four dimensions, from reactive to more proactive. I also developed a schema for classifying individuals based on their level of propensity toward PPE. I identified the factors that favour versus impede levels of propensity toward PPE. The originality of this thesis lies in the insights it brings to current reflection and debate on individual resistance to change and the evaluation process. And in the approach that I have chosen: adopting a positive stance that focuses on propensity rather than resistance toward PPE, and deriving a theory-based, multi-dimensional definition of PPE and applying it empirically. Individual profiles of propensity toward PPE and knowledge of the factors that favour/impede PPE may be helpful in determining the best type of evaluation to use in a given situation. They could be used to develop quantitative tools, and to fine-tune plans and adjust the implementation of evaluations.