L’évaluation de la recherche par les agences de financement, les établissements scientifiques et les instances concernées se base essentiellement sur des mesures quantitatives de produits de la recherche tels que les  publications. Les métriques, comme le facteur d’impact d’une revue, sont toujours prépondérantes pour apprécier la qualité d’un article, évaluer la contribution de scientifiques ou décider un recrutement, une promotion ou un financement.
Pourtant, des initiatives ont émergé depuis les années 2010 pour alerter sur les dérives de certains indicateurs et pour améliorer les pratiques. En 2021 et 2022, des rapports nationaux et internationaux (Unesco, Union européenne) mettent en avant la nécessaire évolution de l’évaluation de la recherche, notamment dans le contexte de la science ouverte. 
De par sa mission de coopération internationale, le Cirad s’efforce de rendre compte de la diversité de sa production scientifique, de ses partenariats avec les pays du Sud et de l’impact de ses résultats de recherche.

Agritrop est l’instrument de mesure des publications du Cirad

Les restitutions et évaluations de la production scientifique écrite du Cirad sont réalisées à partir d’Agritrop, l’archive ouverte institutionnelle : rapport d’activités des scientifiques, tableau de bord de pilotage des unités de recherche et des départements scientifiques, contrat d’objectifs Etat-Cirad, rapport d’activités du Cirad, Cour des comptes, rapport parlementaire. Le site public de datavisualisation des indicateurs de publications du Cirad propose un choix de graphes illustrant la diversité des mesures de publications. 

Le Cirad promeut la diversité de sa production scientifique écrite

Le Cirad a institué le dépôt de sa production scientifique écrite dans Agritrop dès 2008. Aujourd’hui, 26 types de documents la caractérisent. Certains types sont détaillés pour des indicateurs spécifiques.

Le Cirad valorise les publications issues de ses recherches en partenariat

Le Cirad développe des collaborations scientifiques avec des institutions de tous les continents dans des domaines d’intérêt commun. La part des copublications du Cirad avec le Nord et avec le Sud, et plus particulièrement avec des institutions des pays les moins avancés, à faible revenu ou à revenu intermédiaire, illustre l’intensité des partenariats et contribue à valoriser leurs résultats.

Le Cirad indexe ses publications par thèmes, filières et lieux étudiés

Les articles et les ouvrages du Cirad référencés dans Agritrop sont indexés selon différents vocabulaires contrôlés, internationaux ou institutionnels. Les restitutions fournies permettent de mesurer la part relative des sujets traités par le Cirad au regard de ses objectifs scientifiques ou d’enjeux mondiaux.

Le Cirad rend compte des contributions des femmes

Le Cirad mesure dans ses publications la participation et le rang des scientifiques selon leur genre. Le nombre moyen de contributions par cadre scientifique du Cirad selon le genre et son évolution sont restitués annuellement et accessibles sur internet.

Le Cirad caractérise les financements liés aux publications

Agritrop enregistre les informations spécifiques relatives aux agences, programmes et projets de financement de l’Union européenne ainsi qu’aux autres agences. Ces données permettent d’évaluer la part de publications du Cirad issues de projets sur conventions.

Le Cirad signale les jeux de données associés à ses publications 

Depuis 2015, Agritrop caractérise les données scientifiques associées aux articles (jeux de données dans le Dataverse du Cirad ou dans d’autres entrepôts ; bases de données). Les articles de type datapaper sont également caractérisés.

Le Cirad mesure la part de ses publications en libre accès

Depuis 2008, un indicateur de publication en libre accès est produit pour les documents déposés dans Agritrop dont l’une des versions est accessible gratuitement. Cet indicateur figure dans le contrat d’objectifs Etat-Cirad 2019-2023.
En 2021, le Cirad a adopté le baromètre de la science ouverte (BSO), qui mesure la proportion de publications en libre accès dotées d’un identifiant numérique DOI de l’agence Crossref.

Le Cirad suit l’impact scientifique de ses publications

Le Cirad enregistre dans Agritrop deux indicateurs de notoriété des revues (facteur d’impact, SCImago Journal Rank) ainsi que l’impact scientifique de ses publications par les citations reçues indexées dans les bases de données académiques Web of Sciences, Scopus et Dimensions. Des métriques alternatives (Altmetrics) sont aussi enregistrées dans Agritrop : nombre de téléchargements à partir d’Agritrop, nombre de billets de blogs, tweets, pages Wikipédia, etc.

Ressources externes

DORA, Déclaration de San Francisco sur l’évaluation de la recherche (2012 - Cirad signataire en 2018)
https://sfdora.org/read/read-the-declaration-french/ 

Manifeste de Leiden (2015)
http://www.leidenmanifesto.org/translations.html 

Towards a reform of the research assessment system (2021). Commission européenne 
https://data.europa.eu/doi/10.2777/707440 

Recommandation de l’Unesco sur une science ouverte (2021) 
https://unesdoc.unesco.org/ark:/48223/pf0000379949_fre

Appel de Paris sur l’évaluation de la recherche (février 2022). Comité pour la science ouverte 
https://osec2022.eu/fr/appel-de-paris/ 

Conclusion du Conseil européen Compétitivité recherche et innovation (juin 2022). Présidence française de l’Union européenne 
https://presidence-francaise.consilium.europa.eu/fr/actualites/conclusions-du-conseil-competitivite-recherche-et-innovation-10-06/ 

Agreement on reforming research assessment . Coalition for Advancing Research Assessment (CoARA), Commission européenne. (2022 - Cirad signataire en 2022)
https://coara.eu/agreement/the-agreement-full-text/

Ressources Cirad

Publications du Cirad - Les indicateurs 
https://indicateurs-publication.cirad.lodex.fr/ 

Le rapport d’activité du Cirad en 2021 
https://www.cirad.fr/Media/espace-docutheque/docutheque/fichiers/le-rapport-d-activite-du-cirad-en-2021 

Contrat d’objectifs et de performances Etat-Cirad 2019-2023 [indicateurs et livrables] 
https://www.cirad.fr/Media/espace-docutheque/docutheque/fichiers/contrat-d-objectifs-2019-2023 

Baromètre de la science ouverte (BSO) du Cirad 
https://barometredelascienceouverte.esr.gouv.fr/publications/general?id=general.langues-ouverture&bsoLocalAffiliation=331596270 

Information scientifique et technique au Cirad : les chiffres clés 2021 
https://issuu.com/cirad-dist/docs/2021-chiffres-cirad-dist 

CoopIST (Cirad), rubrique Evaluer les publications 
https://coop-ist.cirad.fr/evaluer

Contact : dist-com@cirad.fr 
Cirad - Septembre 2022

Document au format PDF 

Le Cirad rend compte de la diversité de sa production scientifique