Connaissez-vous le Problematic Paper Screener (PPS) ? Le PPS est un outil pensé pour identifier et filtrer les articles scientifiques potentiellement problématiques, tels que ceux présentant des erreurs méthodologiques, des plagiats, des manipulations de données ou des conflits d’intérêts.
Développé par G. Cabanac, C. Labbé et A. Magazinov , il met à disposition une base de plus d’un million de références identifiées comme contenant des éléments problématiques, catégorisés selon une typologie qui distingue des anomalies plus ou moins importantes – de l’article entièrement rédigé par l’IA à l’article qui lui-même est valable mais contient des références avec anomalies (“Feet of clay”).
Cette base est désormais mise à disposition dans les outils d’Episciences. Elle est utilisée pour analyser les références extraites des articles, détecter puis visualiser les références à problèmes, pour correction ou pour information.
Vérifier les références : un enjeu éthique
Vers une solution de vérification plus complète et automatisée
La gestion des références bibliographiques était déjà possible grâce à l’outil Episciences Citations. Ce module, récemment mis à jour et modernisé, est proposé aux auteurs/autrices et aux équipes des revues pour traiter les références des articles déjà publiés. Il permet la gestion semi-automatisée de ces références bibliographiques. Il est ainsi possible de les extraire automatiquement grâce à Grobid, de les importer grâce à un fichier BibTeX, une liste de DOI Crossref ou encore via l’API de Semantic Scholar. Elles peuvent ensuite être manuellement validées et corrigées avant d’être mises à disposition pour les personnes qui consultent les articles.
La plateforme franchit une étape supplémentaire en intégrant la vérification automatique des références dès la réception de la soumission pour contribuer à l’évaluation de sa qualité, et par la suite de mettre à jour automatiquement les références qui seraient rétractées ou changeraient de statut après la publication. Ce contrôle est opéré grâce à l’utilisation de la base de données de PPS. Il permet aux équipes éditoriales, auteurs/autrices, relecteurs/relectrices, de visualiser les références problématiques dans la page de gestion de l’article et dans l’application Episciences Citations.
Ainsi, ce nouveau développement, sans modifier les habitudes de travail des revues, permet de renforcer l’efficacité d’Episciences Citations, en l’adossant à une base de données étendue et fiable pour vérifier la qualité des références.
Un travail en cours pour couvrir l’ensemble des publications de la plateforme
Le module est déjà mis en place pour l’analyse des nouvelles soumissions de l’ensemble des revues. Pour les plus de 8000 manuscrits déjà publiés ou en cours de publication, une première étape a consisté à analyser près de 170 000 références issues d’une première extraction. Le résultat de cette analyse fait ressortir 226 références indexées dans le PPS, dont la majorité relève de la catégorie “Feet of clay”. Le reste des citations sera extrait et analysé dans les prochains mois.
Vérifier la fiabilité des citations n’est plus une option, mais une nécessité pour garantir l’intégrité scientifique. Avec Problematic Paper Screener, Episciences offre une solution efficace : gain de temps, détection proactive des articles problématiques et renforcement de la confiance dans la recherche.