Quels critères pour évaluer les bienfaits d’une recherche ?
Atelier de réflexion, groupe SEnS du centre Inria / IRISA de l’université de Rennes
Présentation générale
Cet atelier propose une réflexion sur l’évaluation de la recherche à travers une mise en situation autour de différents projets de recherches (fictifs) passés au crible de différentes grilles d’évaluation.
Matériel : 3 grilles de critères initiales + 1 grille vide (chacune en N/3 exemplaires), 6 (3+3) projets de recherche fictif en N exemplaires. 1 table par sous-groupe, papier, crayon, tableau pour mise en commun.
Déroulé
La temporalité proposée est optimiste et correspond à 2h10, ce qui laisse 20’ de marge
Introduction [10’]
Accueil des participant.e.s, répartis d’entrée de jeu en sous-groupes (1 par table), présentation de l’atelier.
1) Temps d’interconnaissance et prise de connaissance des grilles [10’]
2) Présentation des projets [10’]
Présentation des 3 projets de recherche évalués en phase 1. On désigne un “observateur” par table, chargé de prendre note des réflexions qui émergent, qui semblent pertinentes mais “hors-cadre”.
3) évaluation avec grilles imposées [15’]
Le groupe de participant.e.s est divisé en groupes de 3 à 5 personnes (autour d’une table). Chaque groupe reçoit une grille d’évaluation (autant d’exemplaires que de membres) et les 3 projets de recherche présentés au préalable.
- Les participant évaluent d’abord individuellement ces projets en ce basant sur leur grille d’évaluation [5’] en attribuant une note de A à C à chaque critère.
- chaque groupe établit un classement après concertation, en ayant un regard critique sur les grilles utilisées (e.g. robustesse des critères) [10’].
A l’issue de cette première phase, re-constitue les sous-groupes pour avoir des tables qui panachent les grilles d’évaluation
3) comparaison et réflexion sur de nouvelles grilles [40’]
- Chacun.e explique sa grille aux autres, avec le classement auquel son groupe initial avait abouti. [15’]
- Chaque groupe construit une nouvelle grille qui leur semblerait pertinente. Ils sont invités à partir du squelette initial (grille vide distribué), peuvent réutiliser ou non les critères déjà proposés, et peuvent aussi proposer quelque chose de complètement différent. [25’]
4) validation des nouvelles grilles [30’]
- 3 nouveaux projets sont présentés [pleinière, 10’]
- Evaluation individuelle au sein des groupes en utilisant la nouvelle grille [10’]
- Mise en commun et classement (délibération) des nouveaux projets, à reporter au tableau [10’]
5) Restitution globale [15’]
- Discussion basée sur tout ce qui a été mis au tableau (critères, réflexions annexes, etc.).
- Prise de retours
Informations complémentaires
Animation / organisation / mise en place
L’atelier se déroule en 2 phases en sous-groupes (de 3 à 5 personnes), précédées d’une intro et suivies d’une discussion, toutes 2 en plénière. L’idéal est d’avoir 3 animateurices par sous-groupe initial. La première phase en sous groupe (2 ci-dessous) peut se faire avec des groupes de 3 à 5 personnes, la seconde (3 et 4) avec des groupes de 3 personnes (1 par grille), 4 pour compléter. Il est conseillé d’anticiper cette répartition en sous-groupe avant l’atelier, en se basant sur les inscrits, et de prévoir des papiers numérotés à distribuer en phase 1 au sein des tables pour indiquer le numéro de table de chacun.e en phase 2.
Remarques sur les projets
- spécifier que les reviews sont là pour apporter des informations factuelles, il ne faut pas les laisser de côté
- Chaque projet est présenté par un.e animateurice.
- On invite les tables à prendre note des réflexions qu’ils leurs semblent pertinentes mais qui n’entre pas directement dans le cadre de la mise en situation proposée par l’atelier. Les animateurices sont chargé.e.s de récolter ces réflexions afin de les centraliser (au tableau), afin d’alimenter la réflexion collective. Ils pourront être discutés à la fin de l’atelier.