L'analyse est dorénavant principalement utilisée pour fournir aux décideurs des outils leur permettant de progresser dans la résolution de problèmes décisionnels faisant intervenir plusieurs points de vue, même s'ils sont contradictoires. Gestion du Cycle de Projet - Guide récapitulatif des Formations, Commission Européenne, EuropeAid, préparé par Itad Ltd, mis à jour par Particip GmbH, version 1.1, février 2001. Dans les évaluations intermédiaires de programme, il peut être demandé à l'évaluateur de reconstituer tel ou tel de ces outils, outre le diagramme d'objectifs lui-même. Les ONG Human Rights Watch et Amnesty International publient pour un grand nombre de pays des rapports sur l'état des droits de l'homme et les principaux problèmes rencontrés. L'analyse du processus d'élaboration du programme (diagramme des décisions) peut également être utilisée pour expliquer les partis pris dans le choix des problèmes prioritaires et du problème principal. Les objectifs hiérarchisés que se donne la stratégie doivent pouvoir en être déduits. Celui-ci n'intervient que pour faciliter l'expression de la personne interrogée ou pour l'amener à approfondir certaines questions. Pour ces entretiens, le guide d'entretien est appliqué avec souplesse et peut être complété par des questions visant à éclairer ou préciser les réponses faites par la personne interrogée. On rappelle que la liste d'outils présentée ci-dessous n'a aucun caractère limitatif. Les effets qualitatifs ont-ils été quantifiés ? Ces diagrammes peuvent être utiles pour définir et justifier les questions d'évaluation. Du fait de ses avantages, l'analyse multicritère est devenue un outil très utilisé dans larésolution de problèmes complexes, dans des contextes conflictuels comme l'aménagement du territoire par exemple. ), des responsables administratifs en lien étroit avec le domaine, des représentants de bailleurs impliqués dans ce même domaine, etc. Le diagramme des objectifs affichés présente deux utilités : Le diagramme raisonné des objectifs définit le champ thématique de l'évaluation. L'usage de le focus group dans une évaluation ex ante, par exemple, aura davantage pour finalité de définir les besoins et les priorités avec les acteurs susceptibles d'être concernés par un programme ou une politique. Leur usage pourrait pourtant se développer, notamment parce qu'elles constituent dans certains cas un outil indispensable pour réaliser des analyses d'impact auprès de divers groupes, en particulier de bénéficiaires. Y a-t-il eu une information précise des membres du panel sur leur rôle et sur les règles de fonctionnement d'un panel? leur pertinence au regard de la situation du pays, du secteur ou du thème objet d'évaluation, ainsi que de la politique des acteurs majeurs (gouvernements en particulier). Ce travail pourrait se faire pour recueillir l'avis des responsables et des bénéficiaires sur leur efficacité. Dans le cadre de l'évaluation ex post, le même exercice que dans une évaluation ex ante peut être conduit à partir des résultats obtenus. Il existe différentes approches et méthodes de constitution de groupe, ainsi que d'animation de réunions. Le guide peut être complété par des questions visant à éclairer ou préciser les réponses faites par la personne interrogée. Permet de collecter auprès d'un échantillon de population des réponses comparables. Cette faiblesse prend toujours pour référence les outils statistiques habituels beaucoup plus difficiles à remettre en cause car basés sur des pratiques mathématiques incontestables. une agrégation des résultats aboutissant à un classement par préférence. ceux dont la nécessité s'impose, sur place, dans le prolongement des panels. Ce système, moins tourné vers les pays en développement que les autres, permet d'obtenir à la fois des indicateurs et les indices de développement calculés par les Nations Unies. Une typologie ou des variables descriptive le détermine. Dès lors, trois concepts de base pour qualifier la préférence ont été développés dans les analyses multicritères plus récentes : Les méthodes ayant recours à ces concepts très subtils, indispensables dans une analyse des préférences, sont toutes basées sur des logiciels qui facilitent grandement l'élaboration des résultats, du test de sensibilité, des démarches itératives, etc. L'enquêteur doit rester le plus près possible de la conversation en acceptant les détours, les incohérences, les pauses, les hésitations, etc. vers certains secteurs importants (éducation, santé, environnement, etc.). Macmillan D. et Morrison R., " Analyse coût-efficacité de la création d'un écosystème de terres boisées ", XIè Congrès forestier mondial, octobre 1997, Turquie. " Les diagrammes des problèmes sont établis au cours de la phase de structuration et sont donc présentés dans les notes et rapports produits au cours de cette phase. le degré de controverse (les problèmes à traiter ont-ils des solutions alternatives qui sont sujettes à controverse ? Rapport mondial sur le développement humain, Système commun des comptes Economiques et Environnementaux, Systèmes d'indicateurs de la banque mondiale, Indicateurs de l'Association Internationale pour le Développement, Indicateurs de contribution aux résultats de développement, Bibliographie sur les indicateurs de développement durable, Sites de chaque institution internationale, Place de l'analyse coût-efficacité dans la " famille " des outils d'évaluation économique, Analyse des changements sociaux et des blocages au développement, Un renouvellement des sciences sociales appliquées au développement, Une méthode qui n'interroge pas les objectifs stratégiques, European Central Bank|European Court of Auditors, SWOT (Stength, Weakness, Opportunities, Threats). La manière de conduire concrètement les études de cas diffère un peu selon les types, mais fait malgré tout référence à des standards applicables à toutes (ou presque) exposés dans la partie " comment réaliser l'étude de cas? Il est suggéré de faire une analyse générale des points de rupture pour ce qui concerne à la fois la stratégie globale et le type d'intervention (projets et programmes) et de ne pas inclure les objectifs propres (ou effets) de ces projets et programmes dans l'analyse. La généralisation en étude de cas (comme dans une expérimentation d'ailleurs) est avant tout analytique et non statistique. En effet, alors que la prise de contact avec des experts se fait par mail ou par téléphone et peut donc se faire depuis la France, celle avec cette catégorie d'acteurs ne peut qu'être directe et implique de "labourer" le terrain. Avant la séance du focus group, l'animateur signale qu'il ne comprend pas la question suivante : Lors de la mission, quatre focus groups ont été organisés. L'analyse multicritère sert surtout à comparer plusieurs variantes (tracés routiers, choix d'aménagement du territoire, offres d'un marché public, etc.) [EN], "Analyse SWOT", Evaluation ex ante du programme Interreg III France-Italie, paragraphe 5, Alcotra, octobre 2000, p.72-87. L'évaluation se doit alors de vérifier : L'évaluation de l'analyse des problèmes et du diagramme les représentant est alors un moyen de juger la validité du système des objectifs et du diagramme qui en est fait. Dans l'enseignement secondaire, le cas des coefficients affectés aux matières lors de l'évaluation des élèves est un exemple simple de pondération des critères. Transparency International propose des données statistiques concernant le niveau de transparence et de corruption au niveau local et global par le biais de plusieurs indicateurs. Enfin, certaines questions de la grille pourront être abordées plus particulièrement ; ce dernier point permettra de juger de la réserve des panélistes lors des panels en comparant les deux discours. Le domaine d'application de l'analyse a-t-il été clairement délimité ? Ce n'est qu'à l'issue de celle-ci que l'évaluateur pourra distinguer les différents types de problèmes. Dans certains contextes, l'organisation du focus group peut être complexe du point de vue logistique : identification de groupes de bénéficiaires, distances à gérer, mobilisation de compétences nationales et locales. Dans le cadre de la mission test de l'outil au Bénin, l'identification du partenaire béninois eut lieu un mois et demi avant le lancement des missions de terrain ; une personne prépara l'arrivée de l'équipe d'évaluation 2 semaines avant, pour finaliser l'échantillon, les questionnaires et effectuer la formation des enquêteurs. Une opinion non exprimée rend sourd ! le document stratégique et le programme peuvent apporter des informations sur les enseignements des réalisations passées, le contexte politique, économique, social, l'intervention des États Membres et des principaux autres donneurs. Tableau C : évaluation proposée de choix d'objectifs. Cette liste est très proche de celle proposée par la Direction Générale du Développement de la Commission Européenne. Une société civile dynamique ? aux formes de restitution, répondant aux attentes du commanditaire, voire aussi des personnes rencontrées qui peuvent souhaiter un retour sur l'utilisation des informations recueillies auprès d'elles. Submitted by kgr, on Thu, 15/01/2015 - 21:50 Etabli depuis 1968, le Programme International de Comparaison (ICP : International Comparison Program) est un système statistique mis en place pour produire des données par pays, internationalement comparables au niveau des prix, de la valeur des dépenses, de la parité de pouvoir d'achat. Elle peut être très technique et doit au minimum répondre à certaines règles. Les délégués peuvent être des élus (territoriaux ou professionnels), des responsables d'ONG (ex : association des personnes affectées, de protection de l'environnement, de défense des consommateurs, de représentation des intérêts des femmes, etc. Trois enquêtes : Les 2 derniers focus group ont été organisés en complément des résultats des 2 focus groups de bénéficiaires et de ceux des questionnaires. Ils permettent de recueillir des informations et des points de vue que l'évaluateur pourra utiliser pour estimer le degré de spécificité ou au contraire de généralisation éventuelle de certaines conclusions de l'étude de cas. Un questionnaire est un ensemble de questions construit dans le but d'obtenir l'information correspondant aux questions de l'évaluation. Dans le cas d'intervention dont l'objectif est clairement identifié, l'identification du critère d'efficacité ne doit pas présenter de difficulté particulière. Il est important de vérifier avec l'animateur et avant la séance que tous les termes et les expressions utilisés dans le guide d'animation sont bien compris. Pour qu'il y ait débat, il faut cependant s'assurer que les participants n'aient pas des positions trop identiques vis-à-vis des questions proposées. La datation des documents a-t-elle été confirmée par les auteurs ou contributeurs? La première réunion du panel a un contenu proche de celui des termes de référence. Il fait partie de la structuration de la méthode d'évaluation et va au delà en englobant des aspects opérationnels proprement dits. Cette étape peut alors révéler, tout comme l'étape du choix des critères, d'importantes divergences d'opinion entre les acteurs. Ces conséquences peuvent être regroupées sous le terme 'effets' et sont liées entre elles par un ensemble de relations de causalité ou de synergie constituant le système des effets. Cette situation a récemment évolué et les Délégations sont intervenues dans l'élaboration des documents les plus récents et devraient voir leurs responsabilités s'accroître. pour animer la réflexion préalable à la décision des décideurs. Si, dans les cas les plus simples un seul " focus group " suffit à déterminer le critère et l'indicateur, dans les cas plus complexes, il peut être souhaitable de laisser un laps de temps pour arrêter le choix du critère et donc d'organiser une seconde séance de travail pour le choix de l'indicateur. Le diagramme se lit alors du bas vers le haut. Submitted by kgr, on Tue, 27/01/2015 - 20:56 valider la méthode de conduite des études en la mettant à l'épreuve du terrain. Il n'y a pas de nombre d'études de cas minimum, toutefois plus il est élevé plus il permet à la fois une analyse détaillée et une généralisation. 1998. C'est au début de l'évaluation qu'il est généralement fait usage des indicateurs de contexte. Permet de répondre aux questions "Comment" et "Pourquoi" à partir de l'étude détaillée de cas concrets. Title: Microsoft Word - PDF Review Tool - FR.doc Created Date: 2/24/2009 10:22:47 PM ), le long terme (économie et écologie, entreprises et activités, etc.) L'évaluation n'a pas pour objet de procéder à une analyse des problèmes et d'établir le diagramme qui la traduit, mais de reconstituer l'analyse qui a été faite et de la traduire en diagramme. Les techniques d'administration du questionnaire utilisé étaient-elles adaptées au type de public enquêté (face à face, téléphone, etc.) Une fois la décision prise de réaliser des études de cas et une fois les grandes lignes de leur contenu définies, ce travail doit être affiné avant la phase opérationnelle par différents points. Le diagramme des décisions constitue un complément utile aux diagrammes des objectifs et des effets. Quels sont les critères de sélection des panels ? Dans une certaine mesure, toutefois, et à un certain degré de détail, les objectifs deviennent communs. La confidentialité des travaux a-t-elle été assurée tout au long de l'exercice (ex : grâce à l' information systématique sur cette confidentialité, ou la destruction systématique des documents intermédiaires) ? C'est souvent de lui que dépend l'ambiance de travail du panel. Les problèmes présentent en outre des degrés variables de gravité. Chacun des moments de choix peut justifier plusieurs questions de ce type. Différents types d'entretien peuvent être conduits selon les phases d'exécution de l'évaluation pays. L'analyse des problèmes est un moyen de juger la validité des objectifs d'un projet, d'un programme ou d'une stratégie. Selon le nombre d'experts à retenir au final (en général entre 5 et 10), il sera bon de présélectionner le double voire le triple d'experts dans la liste, car la disponibilité de tous n'est pas assurée. le rang est explicité ; c'est assez souvent le cas de l'objectif de rang 1, qualifié de global ou à long terme. En formalisant les points positifs et négatifs d'un territoire et en identifiant les facteurs de son environnement pouvant influer favorablement ou défavorablement sur les projets de ce territoire, l'analyse SWOT permet de réduire les incertitudes et ainsi d'affiner ou d'évaluer la stratégie. Pour pouvoir être conduite, l'analyse multicritère nécessite de disposer d'un ensemble d'actions ou variantes en compétition. Le schéma ci-après présente la place logique de l'analyse des problèmes dans le cycle de la stratégie, notamment par rapport à la prise en compte des objectifs. Elle est une condition sine qua non pour : Analyse culturelle et sociale , Panel d'experts. Ils ne doivent pas être redondants entre eux. Une fois le domaine d'application établi par l'équipe d'évaluation, il est important de collecter le diagramme logique de l'intervention ou de le reconstituer lorsqu'il n'existe pas. Si certaines sont évidentes, d'autres le sont moins. C'est-à-dire, négligés (en évaluation ex ante) ou lésés (en évaluation ex post) dans la formulation et dans la mise en œuvre de la stratégie. L'équipe d'évaluation doit veiller à ce que tous les groupes d'acteurs ayant un rapport avec les actions comparées soient bien représentés et de manière équitable. Par exemple, comparer les coûts de différents programmes dont les effets sont identiques, ce qui bien sûr impose d'identifier des situations suffisamment proches pour que la comparaison soit pertinente. L'Association Internationale pour le Développement: IDA (" International Development Association ") a proposé dans un document récent, intitulé " IDA Results Measurements System : Progress and Proposal April 2003 ", une série d'indicateurs pour améliorer le suivi des résultats des pays, en particulier pour ceux devant disposer d'un Cadre Stratégique de Lutte contre la Pauvreté (CSLP ou PRSP). Ceci en fait un outil incontournable en évaluation. Leur formulation ne doit pas influencer la réponse, par exemple en impliquant une réponse de nature positive ou négative. Les objectifs et les effets représentés dans le diagramme sont reliés entre eux par des liens horizontaux ou verticaux. L'analyse culturelle et sociale devrait être l'un des instruments privilégiés dans la conception des stratégies et la définition des programmes. la recherche de complémentarités et de synergies avec les autres donneurs. Il existe des diagrammes d'objectifs affichés qui présentent une forte cohérence interne : à l'exception de l'objectif ou impact attendu global, tout objectif x renvoie à un objectif (immédiatement ou non) supérieur et se trouve développé par un ou plusieurs objectifs subordonnés. L'étude de cas en évaluation pays/région n'échappe pas à ces difficultés, notamment pour déterminer de façon fine les catégories d'acteurs qui auront été effectivement impliqués ou touchés, d'une façon ou d'une autre, par la politique mise en place, et pour analyser les stratégies et les logiques déployées par ces différents groupes d'acteurs. L'avis de certains experts "dominant" le groupe peut devenir prépondérant. La littérature spécialisée situe le diagramme des problèmes avant le diagramme des objectifsdans le processus de la planification ou de gestion des projets (ZOPP, PCM). L'entretien de groupe a été jusqu'alors assez peu pratiqué en évaluation pays/région. Les théoriciens ne sont pas tous d'accord pour rattacher le focus group à la "famille" des entretiens de groupe. Maîtrise convenable des outils informatiques. la mise en place de critères pour assurer une bonne validité des données (choix des sources d'information, complémentarité entre elles, etc.). Concernant la présentation, le rapport doit contenir : Idéalement, pour éviter les biais d'empathie, on peut distinguer le verbatim du cas de la monographie elle-même, et avoir un rédacteur de la monographie distinct du chargé d'étude qui a préparé les minutes. En revanche pour le secteur de l'aide au développement, cette analyse préalable est nécessaire, si l'on veut que les participants à l'analyse comprennent bien les questions qui leur seront posées. d'une procédure de discussion - validation avec le client incluant si possible une consultation du niveau local (délégation, pays hôte, etc.) Cette forme est utilisée pour obtenir certains renseignements factuels, pour juger d'un accord ou non avec une proposition, pour connaître la position du répondant concernant une gamme de jugements, etc. Une question ouverte laisse la réponse libre dans sa forme et dans sa longueur. Celui-ci a pour missions principales de : Le choix du facilitateur doit se baser sur son expérience dans ce type d'intervention. (0 comments). POUR!! Quelques entretiens individuels très ciblés sont réalisés pour appréhender les enjeux. des acteurs qui ont une vision plus large sur les effets. Critère d’évaluation : Capacités en communication orale (de manière claire, concise et persuasive) et d’animation de réunions. Il est souhaitable que l'un deux ait déjà participé à une telle analyse. Le recours peut se limiter à un avis. L'analyse culturelle et sociale ouvre un champ de renouvellement des sciences sociales appliquées, dans la mesure où sa mise en oeuvre est encore balbutiante et ne dispose que de peu de références : " par l'exploration de nouvelles pistes, au cours de leur travail sur les variables culturelles des programmes de développement, les chercheurs en sciences sociales appliquées se voient offrir l'une des rares occasions d'accomplir des " inventions sociales ", pour reprendre l'heureuse expression de Whyte " (Cernea, 1998). Get Animate as part of Adobe Creative Cloud for just US$20.99/mo. Il peut néanmoins servir pour classer en plusieurs catégories les points de vue et informations sur les effets d'une mesure ou d'un programme. La situation est différente lorsque l'évaluation porte sur un ensemble d'interventions (projets et programmes) qui ne trouvent pas de justification explicite dans un cadre logique, ce qui est un cas très fréquent pour les politiques ou stratégies complexes. Les enquêtes par questionnaire apportent une dimension quantitative complémentaire à la dimension qualitative d'autres outils de collecte d'information et d'observation, comme : Ces outils peuvent intervenir dans la phase exploratoire d'une enquête par questionnaire (pour repérer ou préciser les hypothèses de travail) et ainsi permettre l'élaboration du questionnaire : Une série d'entretiens ou de focus group peut aussi venir en aval de l'enquête par questionnaire fermé pour contextualiser les résultats, enrichir la compréhension des données et leur interprétation (par ex : détailler une pratique, expliquer une représentation). Les critères correspondent aux matières, leur pondération aux coefficients et les performances aux notes attribuées par matière. L'objet de cette méthode concerne toutefois l'utilisation de l'outil à des fins d'évaluation (dans la phase de structuration). en tirer des conclusions hâtives par manque d'approfondissement. Dans le cadre d'intervention de l'aide publique au développement, il s'agit le plus souvent de coûts financiers : subventions, transferts financiers, diminutions de taxes, financements de projets ou d'activités, etc. En dehors de cas très simples, l'analyse multicritère implique la contribution de plusieurs catégories d'acteurs. La disposition des diagrammes peut être verticale ou horizontale. l'organisation du panel et rôle de chacun dans le panel. Quand faut-il utiliser le diagramme des problèmes en évaluation pays? Dans les stratégies et les programmes complexes d'aide bilatérale, le donneur est la Commission Européenne, tandis que ses partenaires sont en général des États ou institutions publiques nationales. structurer les avis de responsables de projet ou de programme sur des actions en cours. Un tableau de performance a-t-il été établi ? Par ailleurs, le veto peut être exprimé ici par une valeur égale à zéro d'une note sur un critère. des entretiens de groupe auprès des bénéficiaires ou de personnes travaillant dans une même filière ou secteur. La caricature possible d'une situation au travers d'une explication trop simpliste. Il est souvent utile de mobiliser des personnes ressources pour aider l'évaluateur à sélectionner les participants et identifier les leaders du futur groupe. A l'origine, cette méthode a été développée dans le cadre des sciences économiques et du génie industriel. Outil indispensable pour développer les analyses et cerner les logiques d'action et les différentes représentations. Tous les effets ont-ils été bien pris en compte ? Moment du choix : identifié sa place dans l'enchaînement des choix (code identique à celui du tableau A (étape 4), colonne 1). L'évaluation s'organise en quatre fonctions principales, non strictement séquentielles : structuration de l'évaluation (axée sur la formulation de questions d'évaluation en vue de conduire au jugement d'ensemble, ou overall assessment), collecte de données quantitatives et qualitatives, analyse de l'information recueillie, jugement sur les questions, conduisant à la formulation des conclusions et recommandations. Si l'analyse de la situation ne change pas radicalement au cours de la période et si l'intervention se concentre sur un impact attendu global unique, un seul diagramme suffit. C'est à partir de ces objectifs que seul ou en partenariat le donneur définit le(s) champ(s) prioritaire(s) de l'assistance. Par exemple, la première ligne du tableau suggère que les diagrammes des objectifs et des effets impliquent ou peuvent impliquer la réalisation d'entretiens individuels et de focus groups. [EN]. Dans ce mode de calcul, seuls les coûts directs investis dans l'intervention sont pris en compte. aider le " groupe " dans la notation des actions par critère. La justification des autres objectifs sera vue au regard d'une part de l'objectif global ou de ceux qui en découlent, d'autre part des intrants de la chaîne de décisions. lancer ou relancer les débats lors des panels ou des entretiens sur un des articles. La longueur du questionnaire était-elle adaptée ? Au-delà de la vérification du bon fonctionnement du système établi, ces tests qui doivent, de préférence, être pratiqués avec les membres du " groupe ", ont un effet très didactique et participent à la démonstration de la fiabilité du système. Dans le cas d'une sélection par étape, il convient d'abord de construire les profils des experts recherchés en fonction des thèmes à aborder par l'évaluation. Les chaînes de preuves conduisant aux conclusions argumentées. " 47. Quelle que soit la méthode choisie, la préparation des réunions repose, au minimum, sur l'analyse documentaire et la rencontre avec quelques personnes ressources clés. Malgré la maîtrise de ces risques, les conclusions des panels d'experts restent toujours contestables aux yeux de certains. À cette fin, il est utile d'estimer les risques d'insuccès liés à la mise en œuvre de chaque outil et le cas échéant de prévoir des solutions alternatives, afin d'en limiter les conséquences sur l'ensemble de l'évaluation. Une lecture inverse peut aussi en être faite, l'impact global attendu étant atteint dans l'enchaînement des impacts intermédiaires, résultats, réalisations et activités. faire référence à un objectif (ex : niveau à atteindre). Un protocole de conduite de l'étude ou des études de cas est toujours nécessaire. La succession des choix se ramène alors à deux moments : Le diagramme d'ensemble en arête de poisson doit complété de diagrammes détaillés correspondant à chacun des moments de choix. Les réponses de chacune des questions évaluatives reposent-elles sur la mise en œuvre d'une bonne combinaison d'outils ? Quelques questions peuvent aider l'évaluateur à cerner l'intérêt et la représentativité des personnes à rencontrer : Quelques éléments pratiques à prendre en considération : Le contexte des évaluations pays/région demande de prendre des précautions particulières, en plus des précautions générales (dans " étape de préparation ; planifier les entretiens) lorsqu'on prend des rendez-vous. La mesure de l'efficacité des résultats attendus de l'intervention est donc simplifiée. C'est aussi un des points faibles des études de cas quand elles sont mal conduites. Dans ce cas, il s'agit de mieux cerner les dysfonctionnements ou de souligner les points forts, dans la perspective des recommandations à faire réorientant la politique en cours. Certains indicateurs sont maintenant fournis aux pays et permettent également certaines comparaisons au niveau : Ces comparaisons peuvent aider à identifier les meilleures pratiques à inclure dans l'identification des "forces". Comment identifier les questions qui visent à justifier les choix des objectifs ? Dans des contextes qui le permettent et qui le nécessitent, le ou les cas étudiés peuvent être sélectionnés pour que les conclusions soient généralisables à l'ensemble de l'évaluation. Le schéma ci-dessous symbolise la relation entre les facteurs de l'analyse SWOT. Dans l'enseignement secondaire, le cas des coefficients affectés aux matières lors de l'évaluation des élèves est un exemple simple de pondération des critères. En fonction de l'outil d'observation retenu en priorité et en fonction de l'étape de l'évaluation dans laquelle on se trouve, l'entretien individuel peut: L'entretien se déroule généralement en face à face. Elle peut également ne concerner que certains points de l'étude et pas tous (ex : les conclusions sur les problèmes de mise en œuvre sont généralisables mais pas celles sur les impacts du programme). Il faut d'abord vérifier que toutes les données fonctionnent dans le même sens par rapport à la préférence des acteurs du groupe (ex : la surface d'un ouvrage est préférée lorsqu'elle est plus réduite). Il doivent contenir : La présentation générale de la lettre doit être particulièrement soignée. Un panel d'experts sera organisé pour chacune des trois thématiques de l'outil : Les panels seront d'une durée de quatre heures, entrecoupées d'une pause d'un quart d'heure. Il ne faut pas les confondre avec des réunions de restitution ou de validation des conclusions finales avec les commanditaires. Les études de cas souffrant, dans certains milieux, d'à priori défavorable liés à l'excès de données qualitatives, non corroborées par des quantitatives ; l'ajout d'une enquête dans l'étude de cas, limite considérablement cette critique et apporte dans tous les cas aux évaluateurs une meilleure perception des phénomènes observés.