Article de Recherche / Research Article

Des barèmes génériques pour évaluer les impacts de la recherche sur la société : l'exemple des impacts politiques

Grading scales to assess the impacts of research on society: the example of political impacts

¹ INRA Collège de Direction, 75007 Paris, France
² INRA, Délégation à l'Évaluation, 75007 Paris, France
³ Université Paris-Est, LISIS, CNRS, ESIEE Paris, INRA, UPEM, 77454 Marne-La-Vallée, France
⁴ INRA, GAEL, 38000 Grenoble, France
⁵ Univ.Grenoble Alpes, GAEL, 38000 Grenoble, France

^* Auteur de correspondance : ariane.gaunand@inra.fr

Résumé

La recherche agricole doit contribuer à la résolution des multiples défis auxquels est confrontée l'agriculture du XXI^e siècle. Il est donc nécessaire d'évaluer son impact sociétal à cette aune. L'approche ASIRPA (Analyse socio-économique des impacts de la recherche publique agronomique) a été développée à l'Institut national de la recherche agronomique (Inra) dans cet objectif, et permet, par la réalisation d'études de cas standardisées, de mieux comprendre les mécanismes générateurs d'impact, et de rendre compte des impacts sociétaux de la recherche. Cet article présente la méthode développée par ASIRPA pour construire des barèmes de notation d'impact. Ces barèmes sont un des outils qui composent l'approche globale d'évaluation développée dans ASIRPA. Appliqués à une collection croissante d'études de cas, ces barèmes permettent de produire une image robuste de l'impact d'un organisme de recherche. La conception de ces barèmes s'appuie sur la construction d'un cadre analytique, sur son application à des études de cas pilotes, et sur une discussion de la notation de ces cas avec un panel d'experts. Le barème consiste en une échelle de notation de 1 à 5 de l'intensité de l'impact, accompagnée de critères génériques pour chacun des niveaux. Il permet une auto-notation des cas. La démarche est illustrée par le travail effectué pour l'établissement du barème de notation de l'impact politique. L'article conclut en évoquant quelques utilisations possibles de tels barèmes. Il évoque également certaines limites de l'approche et de futures pistes de développement.

Abstract

Agricultural research must contribute to addressing the diversity of challenges faced by agriculture today and in the future, which includes assessing its societal impact. The ASIRPA approach (Socio-economic analysis of public agricultural research impacts) was developed at the French National Institute for Agricultural Research (INRA) to this aim. Based on a series of standardized case studies, the method offers an understanding of impact-generating mechanisms and reports on the societal impacts of research. This paper presents the method developed by ASIRPA to build rating scales. These rating scales are one of the tools developed in the whole ASIRPA approach. They are applied to a growing number of cases to build a robust picture of the impact of a research organization. The design of these scales relied on i) building an analytical framework, ii) applying the framework to pilot cases, and iii) further discussing it with a panel of experts. The resulting metric is a 1 to 5 grading scale measuring the intensity of impact, with generic criteria associated to each level of the scale. We found that the metric could be used for the self-assessment of case studies. We illustrate the approach with the work carried out to develop the metric for political impact. We conclude by highlighting possible uses of the metric we developed and drawing attention to some limitations of this approach as well as to areas for future research.