Enquêter sur le `` spin '' dans les revues scientifiques
Une étude récente a étudié le «spin» des articles de recherche en psychiatrie et en psychologie. Les auteurs de l'étude ont trouvé du spin dans plus de la moitié des résumés qu'ils ont analysés.Quel impact cela pourrait-il avoir sur les décisions des médecins?
Alors que les médias et les médias se disputent les vues, ils peuvent parfois exagérer les titres et le contenu pour attirer le lecteur.
Bien que beaucoup pensent que les revues scientifiques sont parmi les sources d'information les plus fiables, elles ne sont pas à l'abri du désir d'être lues et partagées.
Une étude récente a tenté d'évaluer le degré de «spin» utilisé par les auteurs dans les résumés d'articles de recherche publiés dans des revues de psychologie et de psychiatrie.
Ils ont choisi de consulter les résumés parce qu'ils résument l'intégralité du document, et les médecins les utilisent souvent pour éclairer les décisions médicales.
Qu'est-ce que le spin?
Dans cette étude, les auteurs décrivent leur définition du spin comme suit:
«[L] a utilisation de stratégies de reporting spécifiques, quel que soit le motif, pour souligner que le traitement expérimental est bénéfique, malgré une différence statistiquement non significative pour le résultat principal, ou pour distraire le lecteur de résultats statistiquement non significatifs.»
Les auteurs ont publié leurs résultats dans la revue Médecine factuelle BMJ. Ils ont examiné les articles des six principales revues de psychiatrie et de psychologie de 2012 à 2017.
Les journaux inclus Psychiatrie JAMA, le Journal américain de psychiatrie, et le Journal britannique de psychiatrie.
Plus précisément, les chercheurs se sont concentrés sur des essais contrôlés randomisés avec des «critères d'évaluation principaux non significatifs». Le critère d'évaluation principal d'une étude est le principal résultat de l'étude, et «non significatif» dans ce contexte signifie que, statistiquement, l'équipe n'a pas trouvé suffisamment de preuves pour étayer sa théorie.
Le spin se présente sous de nombreuses formes, notamment:
- rendre compte de manière sélective des résultats, les auteurs ne mentionnant que certains résultats
- P-hacking, dans lequel les chercheurs exécutent une série de tests statistiques mais ne publient que les chiffres des tests qui produisent des résultats significatifs
- utilisation inappropriée ou trompeuse de mesures statistiques
Quelle est la fréquence du spin?
Au total, ils ont analysé les résumés de 116 articles. Parmi ceux-ci, 56% ont montré des signes de vrille. Cela comprenait la rotation dans 2% des titres, 21% des sections de résultats du résumé et 49% dans les sections de conclusion du résumé. Dans 15% des articles, le spin était présent à la fois dans les sections de résultats et de conclusion des résumés.
Les chercheurs ont également cherché à savoir si le financement de l'industrie était associé au spin. Étonnamment peut-être, ils n'ont trouvé aucune preuve que le soutien financier de l'industrie augmentait la probabilité de spin.
Les résultats sont préoccupants. Bien que les retombées dans les médias d'information en général soient préoccupantes en soi, les médecins utilisent des documents de recherche pour aider à orienter les décisions cliniques. Comme l'écrivent les auteurs:
«Les chercheurs ont une obligation éthique de rendre compte honnêtement et clairement des résultats de leurs recherches.» Cependant, dans la section des résumés, les auteurs peuvent choisir les détails qu'ils incluent. Les auteurs de la présente étude s'inquiètent de ce que cela pourrait signifier pour les médecins:
«Ajouter du spin au résumé d'un article peut induire en erreur les médecins qui tentent de tirer des conclusions sur un traitement pour des patients. La plupart des médecins ne lisent que le résumé de l'article la plupart du temps. »
Les implications
Bien que les chercheurs n'aient pas étudié les effets du spin en profondeur, les auteurs pointent une étude qui martèle leur point de vue.
Dans ce document, les scientifiques ont recueilli des résumés du domaine de la recherche sur le cancer. Tous étaient des essais contrôlés randomisés avec un critère de jugement principal statistiquement non significatif. Tous les résumés inclus spin.
Les chercheurs ont créé des secondes versions de ces résumés dans lesquelles ils ont supprimé le spin. Ils ont recruté 300 oncologues comme participants. Les chercheurs ont donné à la moitié d'entre eux un résumé original avec rotation, et ils ont donné à l'autre moitié l'abstrait sans rotation.
De façon inquiétante, les médecins qui ont lu les résumés avec spin ont évalué l'intervention couverte dans l'article comme étant plus bénéfique.
Comme l'écrivent les auteurs du récent article d'étude: «Ceux qui rédigent des manuscrits d'essais cliniques savent qu'ils disposent d'un temps et d'un espace limités pour capter l'attention du lecteur. Les résultats positifs sont plus susceptibles d'être publiés, et de nombreux auteurs de manuscrits se sont tournés vers des pratiques de rapport douteuses afin d'embellir leurs résultats. »
Une autre étude, publiée en 2016, élargit la portée de ce numéro. Ils ont étudié comment les pairs évaluateurs - des scientifiques expérimentés qui examinent les articles avant leur publication - influencent le spin. Ils ont constaté que dans 15% des cas, le pair examinateur a demandé aux auteurs d'ajouter du spin.
L'étude actuelle présente certaines limites. Par exemple, ces résultats peuvent ne pas s'appliquer à d'autres revues ou domaines de recherche. Ils notent également que l'identification du spin est une entreprise subjective, et bien qu'ils aient utilisé deux extracteurs de données indépendants, il y a place à l'erreur.
L'ampleur exacte du problème de spin dans la recherche médicale reste à voir, mais les auteurs concluent que «[les] auteurs, les éditeurs de revues et les pairs examinateurs devraient continuer à être vigilants pour le spin afin de réduire le risque de rapport biaisé des résultats des essais. "
