Aller au contenu principal
AFROCite

Cadre méthodologique

Méthodologie

Comment AFROCite évalue-t-il la préparation aux citations ouvertes ?

AFROCite repose sur une méthodologie en plusieurs étapes qui distingue la possibilité de réaliser une mesure fiable, l’évaluation de la préparation elle-même et les observations issues des infrastructures scientifiques ouvertes. Cette séparation permet de ne pas confondre les limites d’accès aux données avec un manque réel de préparation.

Comment fonctionne AFROCite ?

01

Étape 1 · Mesurabilité

Cette étape vérifie si l’identité de la revue, sa présence publique, les données au niveau des articles et les éléments probants nécessaires à une évaluation fiable sont disponibles.

Chaque revue est évaluée selon cinq critères, notés de 0 à 2 :

  • G1 · Identité de la publication en série
  • G2 · Présence numérique stable et publique de la revue
  • G3 · Possibilité d’accéder à chaque article individuellement
  • G4 · Métadonnées minimales au niveau de l’article
  • G5 · Traçabilité des éléments probants publics

Les exigences de mesurabilité sont satisfaites avec au moins 7 points sur 10, à condition que G3 et G4 ne soient pas nuls.

Le score de mesurabilité n’entre pas dans le calcul du score de préparation.

02

Étape 2 · Préparation

Les revues satisfaisant aux exigences de mesurabilité sont évaluées à partir de 12 indicateurs répartis en quatre dimensions.

D1 · Identité scientifique et intégrité des identifiants pérennes

20 %
  • Concordance de l’identité de la revue — 5
  • Couverture DOI — 10
  • Concordance DOI–publication — 5

D2 · Interopérabilité des métadonnées

25 %
  • Complétude bibliographique — 12
  • Dépôt des résumés — 8
  • Licences lisibles par machine — 5

D3 · Dépôt des références et possibilité de liaison automatisée

35 %
  • Dépôt structuré des références — 15
  • Complétude du dépôt des références — 10
  • Liaison automatisée des références — 10

D4 · Attribution aux contributeurs et aux établissements

20 %
  • Couverture ORCID — 6
  • Affiliation institutionnelle — 8
  • Liaison ROR — 6

Cette étape produit un score de préparation sur 100, fondé sur les contributions pondérées des quatre dimensions.

03

Infrastructures ouvertes

L’évaluation est complétée par des observations sur la visibilité, la possibilité de récupération des données et leur vérifiabilité dans les infrastructures scientifiques ouvertes.

Selon l’indicateur concerné, cette couche mobilise notamment OpenAlex, OpenCitations, DOAJ et AJOL, ainsi que des voies de moissonnage automatisé des métadonnées et la vérification des identifiants de référence.

Ces observations fournissent un contexte complémentaire pour interpréter les résultats. Elles n’entrent pas dans le calcul du score de préparation et n’en modifient pas les pondérations.

Comment le score est-il calculé ?

AFROCite utilise les pondérations prédéfinies suivantes : 20 % · 25 % · 35 % · 20 %. Les indicateurs disposent également de poids prédéfinis à l’intérieur de leur dimension.

Lorsqu’un indicateur fait l’objet d’une non-applicabilité structurelle, il est exclu uniquement dans sa propre dimension et les poids des indicateurs applicables sont renormalisés localement. Aucun poids n’est transféré d’une dimension à une autre.

Aucune valeur n’est imputée lorsque l’information ne peut être vérifiée.

Comment interpréter les états des données ?

0 — Zéro
Absence ou échec vérifié après une inspection réussie.
Non-applicabilité structurelle
Un prérequis nécessaire à l’application de l’indicateur est absent.
U — Non vérifiable
L’indicateur est applicable en principe, mais un obstacle technique ou d’accès empêche de conclure de manière fiable.

Ces états ne sont pas équivalents, et une information non vérifiable n’est pas automatiquement notée zéro.

Échantillon et déroulement de l’étude

Le cadre pilote a suivi le parcours suivant :

  1. 137Candidates
  2. 100Admissibles
  3. 93Mesurables
  4. 85Échantillon constitué
  5. 25Pilote

Les 25 revues ont été sélectionnées selon un échantillonnage raisonné à variation maximale, avec cinq revues pour chacune des cinq régions de l’Union africaine.

Pour chaque revue, l’échantillon a été fixé à l’avance : 10 articles principaux et 5 articles de réserve. Le même échantillon principal a été utilisé pour les indicateurs de préparation afin de préserver la comparabilité.

Sources des données

AFROCite repose sur des éléments accessibles au public et vérifiables, notamment les sites officiels des revues, les métadonnées publiées, Crossref et les infrastructures scientifiques ouvertes utilisées pour la vérification contextuelle.

La méthodologie distingue clairement l’absence vérifiée d’une situation dans laquelle une information ne peut être établie par une source ou une voie d’accès donnée.

Comment interpréter l’application actuelle ?

L’application actuelle constitue un pilote méthodologique destiné à tester le fonctionnement opérationnel d’AFROCite et à montrer comment le cadre peut être appliqué.

L’échantillon n’est pas statistiquement représentatif de l’ensemble des revues ou universités africaines, et les résultats ne visent pas à établir un classement. AFROCite décrit une préparation observable selon des dimensions définies, à partir des éléments publics disponibles au moment de l’évaluation.