Résumé
L’évaluation par les pairs est conçue pour améliorer la qualité scientifique, mais le système a également un côté plus sombre. L’évaluation en simple aveugle, dans laquelle les évaluateurs savent qui sont les auteurs tout en restant eux-mêmes anonymes, peut créer des occasions de biais conscients ou inconscients. Un évaluateur peut être influencé par la réputation de l’auteur, son établissement, sa nationalité, son stade de carrière, sa position théorique ou son histoire personnelle, plutôt que de juger le manuscrit uniquement sur la qualité de ses recherches et de sa présentation.
Cet article examine les forces et les faiblesses de l’évaluation par les pairs en simple aveugle, en double aveugle et ouverte. Il étudie comment l’anonymat peut protéger les critiques honnêtes tout en réduisant la responsabilité, comment l’identification des auteurs peut introduire des effets liés au prestige et à la rivalité, et pourquoi l’évaluation en double aveugle peut réduire certaines formes de biais sans les éliminer entièrement. Même lorsque les noms sont supprimés, les évaluateurs spécialisés peuvent déduire l’identité des auteurs à partir des autocitations, des méthodes, des jeux de données ou de sujets de recherche distinctifs.
L’article examine également les avantages et les inconvénients potentiels de l’évaluation ouverte, dans laquelle l’identité des évaluateurs ou leurs rapports peuvent être divulgués. Une plus grande transparence peut encourager un comportement professionnel et renforcer la responsabilité, mais elle peut aussi dissuader les évaluateurs débutants de critiquer ouvertement des chercheurs influents. Aucun système n’est donc totalement exempt de biais ou de comportements stratégiques.
Pour les auteurs, l’approche la plus pratique consiste à comprendre le modèle d’évaluation utilisé par la revue ciblée, à anonymiser soigneusement les manuscrits lorsque cela est requis, à répondre professionnellement aux critiques et à faire intervenir les rédacteurs lorsque les évaluations semblent personnelles, entachées de conflits d’intérêts ou scientifiquement infondées. Une culture plus solide de l’évaluation par les pairs dépend non seulement du modèle choisi, mais aussi de la supervision éditoriale, de l’éthique des évaluateurs et d’un engagement commun à évaluer les recherches sur leurs mérites.
📖 Article intégral (cliquer pour réduire)
Le côté sombre de l’évaluation par les pairs, ou faudrait-il parler de ses côtés sombres ?
Introduction : l’évaluation par les pairs est essentielle, mais elle n’est pas parfaite
L’évaluation par les pairs reste l’un des mécanismes centraux par lesquels les revues universitaires et scientifiques évaluent les nouvelles recherches. Avant la publication d’un manuscrit, des experts du même domaine ou d’un domaine connexe sont généralement invités à évaluer son originalité, sa méthodologie, son interprétation, sa clarté et son importance. En principe, ce système aide les revues à repérer les travaux de qualité, à détecter les erreurs et à améliorer les manuscrits avant leur intégration dans les archives scientifiques.
Pourtant, l’évaluation par les pairs est réalisée par des personnes, qui apportent à leurs décisions leurs présupposés, leurs préférences, leurs rivalités professionnelles et leurs expériences personnelles. Les évaluateurs peuvent être indulgents ou sévères, prudents ou audacieux, méthodologiquement conservateurs ou enthousiastes face à l’innovation. Plus important encore, la quantité d’informations dont ils disposent sur les auteurs peut influencer la manière dont ils interprètent un même manuscrit.
C’est pourquoi la distinction entre l’évaluation par les pairs en aveugle simple, en double aveugle et ouverte est importante. Chaque modèle cherche à établir un équilibre différent entre l’indépendance, la responsabilité et la faisabilité pratique. Chacun présente également des faiblesses.
Le côté plus sombre de l’évaluation par les pairs ne découle pas uniquement d’une faute délibérée. Les biais peuvent être subtils et inconscients. Un auteur célèbre peut bénéficier d’une interprétation plus indulgente, tandis qu’un chercheur inconnu peut faire face à un scepticisme accru. Les travaux issus d’une institution prestigieuse peuvent être considérés comme plus fiables que des travaux équivalents provenant d’une université moins connue. Un évaluateur peut réagir négativement à un argument théorique qui remet en question ses propres publications sans reconnaître consciemment l’influence d’une rivalité professionnelle.
Comprendre ces possibilités permet aux auteurs et aux rédacteurs de réfléchir de manière plus critique au fonctionnement des systèmes d’évaluation et à la manière dont ils pourraient être améliorés.
1. Qu’est-ce que l’évaluation par les pairs en aveugle simple ?
Dans un système d’évaluation par les pairs en aveugle simple, l’évaluateur connaît normalement l’identité de l’auteur, mais l’auteur ignore qui est l’évaluateur.
Cela a été historiquement courant dans de nombreuses disciplines universitaires. La logique est simple : les évaluateurs peuvent avoir besoin d’informations sur les auteurs pour évaluer leurs travaux antérieurs, les chevauchements potentiels, leur parcours méthodologique ou les conflits d’intérêts, tandis que l’anonymat des évaluateurs permet aux experts de formuler des critiques franches sans craindre de représailles.
Cette organisation présente de véritables avantages. Un jeune chercheur, par exemple, peut se sentir plus à l’aise pour critiquer un universitaire chevronné très influent si l’évaluation reste anonyme. Les évaluateurs peuvent relever directement les faiblesses méthodologiques sans craindre que des commentaires sévères nuisent à de futures collaborations ou possibilités d’emploi.
Cependant, l’évaluation en aveugle simple crée une asymétrie importante en matière d’information et de pouvoir. Les évaluateurs savent qui ils évaluent, tandis que les auteurs ignorent qui les évalue.
2. Comment l’identité de l’auteur peut influencer l’évaluation
Une fois que les évaluateurs savent qui a rédigé un manuscrit, des informations sans rapport avec son contenu scientifique peuvent influencer leur jugement.
Les influences potentielles comprennent :
- réputation académique de l’auteur ;
- prestige de l’institution ;
- pays ou région ;
- étape de la carrière ;
- relations professionnelles ;
- désaccords antérieurs ;
- la concurrence pour obtenir des financements ou la reconnaissance ;
- positions théoriques ou méthodologiques connues.
Cela ne signifie pas que les évaluateurs pratiquent délibérément la discrimination chaque fois que les identités sont visibles. Les biais peuvent agir inconsciemment. Un évaluateur peut simplement aborder l’article d’un chercheur célèbre en s’attendant à ce qu’il soit probablement solide, tout en examinant le manuscrit d’un auteur inconnu avec davantage de méfiance.
Le même phénomène peut avoir un effet négatif. Une rivalité ou un désaccord ancien peut rendre un évaluateur plus critique que ne le justifie le manuscrit lui-même.
3. Le problème de la concurrence universitaire
La science est collaborative, mais elle est aussi compétitive. Les chercheurs se disputent les subventions, les postes, les citations, les invitations, le prestige et la priorité dans les découvertes. L’évaluation par les pairs place un chercheur en position d’influencer la publication des travaux d’un autre chercheur.
La plupart des évaluateurs assument cette responsabilité de manière éthique. Néanmoins, cette structure crée des possibilités d’abus.
Un évaluateur pourrait :
- retarder inutilement l’article d’un concurrent ;
- exiger des expériences supplémentaires excessives ;
- recommander le rejet sur la base d’objections faibles ;
- faire pression sur les auteurs pour qu’ils citent les travaux de l’évaluateur ;
- critiquer un manuscrit parce qu’il remet en cause la théorie de l’évaluateur ;
- utiliser des informations confidentielles du manuscrit pour faire progresser leurs propres recherches.
Un tel comportement viole les principes d’une évaluation par les pairs responsable, mais l’anonymat peut empêcher les auteurs de savoir si la concurrence professionnelle a joué un rôle.
4. Le biais lié à la réputation peut fonctionner dans les deux sens
L’identité de l’auteur peut entraîner des biais favorables comme défavorables.
Un scientifique très estimé peut bénéficier d’un « effet de halo ». Les évaluateurs reconnaissent son nom, supposent qu’il est compétent et interprètent généreusement les détails peu clairs. Ils peuvent être davantage enclins à croire qu’un résultat inhabituel est important plutôt qu’erroné.
Un chercheur inconnu peut ne bénéficier d’aucun de ces avantages.
À l’inverse, un chercheur renommé dont les travaux antérieurs ont suscité la controverse peut être évalué par des personnes qui ont déjà des opinions bien arrêtées à son sujet. Un nouveau manuscrit peut alors se retrouver mêlé à d’anciennes querelles universitaires.
Dans les deux situations, l’idéal d’évaluer la recherche de manière indépendante est affaibli.
5. Le prestige institutionnel peut influencer la perception
L’institution associée au nom d’un auteur peut également façonner les attentes. Les évaluateurs peuvent, consciemment ou inconsciemment, accorder davantage de crédibilité aux travaux issus d’universités, de laboratoires ou d’instituts de recherche reconnus à l’international.
Les chercheurs travaillant dans des établissements plus petits, plus récents ou moins connus peuvent donc craindre que leur travail soit jugé plus sévèrement.
C’est l’une des raisons pour lesquelles l’évaluation en double aveugle séduit de nombreux auteurs. La suppression des noms et des affiliations des auteurs réduit théoriquement la possibilité que le prestige de l’établissement influence la première évaluation du travail.
6. Qu’est-ce que l’évaluation par les pairs en double aveugle ?
Dans l’évaluation en double aveugle, ni les auteurs ni les évaluateurs ne sont officiellement informés de l’identité des uns et des autres.
Les auteurs préparent généralement un manuscrit anonymisé en supprimant :
- les noms ;
- les affiliations ;
- les coordonnées ;
- les remerciements qui révèlent l’identité ;
- les informations sur le financement, si nécessaire ;
- les références évidentes à l’établissement des auteurs ou à leurs travaux antérieurs.
Une page de titre distincte contenant les informations sur les auteurs est ensuite fournie au bureau éditorial.
L’objectif n’est pas de rendre les auteurs anonymes de façon permanente. Il s’agit de réduire l’influence de l’identité au cours de l’étape d’évaluation.
7. Pourquoi l’évaluation en double aveugle peut être intéressante
L’argument central en faveur de l’évaluation en double aveugle est simple : si les évaluateurs ne savent pas qui a rédigé l’article, ils ont moins de possibilités de l’évaluer en fonction de la réputation, de l’établissement ou du parcours personnel des auteurs.
Les avantages potentiels comprennent :
- une réduction du biais lié au prestige ;
- moins de possibilités pour les rivalités personnelles d’influencer le jugement ;
- une plus grande confiance chez les chercheurs en début de carrière ;
- une réduction des stéréotypes institutionnels ou géographiques ;
- une plus grande attention portée au manuscrit lui-même.
En théorie, un manuscrit rédigé par un doctorant d’une petite université devrait être évalué sur un pied d’égalité avec celui d’un professeur renommé d’un établissement prestigieux.
8. L’évaluation en double aveugle ne signifie pas un anonymat véritable
La principale limite est que l’anonymat est souvent imparfait.
Dans les domaines spécialisés, les évaluateurs peuvent être en mesure de déduire l’identité des auteurs à partir des éléments suivants :
- le sujet de la recherche ;
- un jeu de données unique ;
- équipements spécialisés ;
- méthodes distinctives ;
- présentations antérieures lors de conférences ;
- prépublications ;
- autocitations ;
- style rédactionnel.
Si seuls quelques laboratoires dans le monde utilisent une technique particulière, supprimer les noms des auteurs peut ne guère contribuer à dissimuler leur identité.
L’évaluation en double aveugle réduit donc certaines informations permettant l’identification, mais elle ne peut garantir un véritable anonymat.
9. L’autocitation pose un problème particulier
Les auteurs doivent souvent citer leurs travaux antérieurs. Supprimer entièrement ces références peut nuire à la revue de la littérature et rendre le manuscrit scientifiquement incomplet.
Certaines revues demandent aux auteurs de remplacer des formulations permettant de les identifier, telles que « dans notre étude précédente », par une formulation neutre, tout en conservant la citation elle-même. D’autres demandent des mentions provisoires pour certaines références.
Les auteurs doivent suivre exactement les instructions de la revue en matière d’anonymisation. Les tentatives excessives de dissimulation de l’identité peuvent rendre l’article maladroit, voire scientifiquement trompeur.
10. Les prépublications compliquent l’anonymisation
La multiplication des publications de prépublications ajoute une autre difficulté. Si un manuscrit a déjà été téléversé sur un serveur public de prépublications, un évaluateur peut potentiellement identifier ses auteurs en recherchant le titre, le sujet ou des formulations distinctives.
Cela ne rend pas l’évaluation en double aveugle dénuée de sens, mais montre pourquoi ce système doit être compris comme une réduction des indices liés à l’identité, plutôt que comme leur élimination complète.
11. L’évaluation en double aveugle peut-elle réduire les évaluations injustes ?
Il peut plausiblement réduire les injustices qui dépendent directement de la connaissance de l’identité de l’auteur.
Un évaluateur ne peut pas délibérément pénaliser un rival universitaire particulier s’il ignore réellement que ce rival a rédigé le manuscrit. Il ne peut pas non plus favoriser un chercheur célèbre simplement en raison du nom figurant sur la page de titre.
Cependant, l’anonymat ne peut pas éliminer la concurrence intellectuelle. Un évaluateur peut reconnaître que l’article remet en question sa propre théorie ou concurrence son programme de recherche, même sans identifier les auteurs.
L’évaluateur peut tout de même réagir de manière défensive au contenu lui-même.
L’évaluation en double aveugle s’attaque donc à une source de biais, mais pas à toutes.
12. Les biais scientifiques peuvent exister sans biais personnel
Certains des désaccords les plus difficiles lors de l’évaluation par les pairs ne découlent pas de personnalités, mais d’engagements intellectuels sincères.
Un évaluateur peut favoriser fortement :
- un cadre statistique plutôt qu’un autre ;
- les méthodes quantitatives plutôt que qualitatives ;
- une école théorique particulière ;
- une interprétation particulière d’un ensemble de données contesté.
De telles préférences peuvent influencer l’évaluation, même si le manuscrit est parfaitement anonymisé.
La solution ne peut donc pas reposer uniquement sur la dissimulation des identités. Les éditeurs doivent choisir soigneusement les évaluateurs, solliciter plusieurs points de vue lorsque cela est nécessaire et évaluer de manière critique leurs recommandations.
13. L’éditeur reste essentiel
Les évaluateurs conseillent ; les éditeurs décident. Cette distinction est essentielle lorsqu’on réfléchit aux aspects les plus sombres de l’évaluation par les pairs.
Un éditeur responsable ne doit pas se contenter de compter les votes des évaluateurs. Si un évaluateur recommande l’acceptation et un autre le rejet, l’éditeur doit examiner le raisonnement qui sous-tend chacune de ces recommandations.
Les éditeurs doivent être attentifs aux éléments suivants :
- un langage personnel ou insultant ;
- des critiques non étayées ;
- des exigences déraisonnables ;
- des demandes d’autocitation excessive ;
- de possibles conflits d’intérêts ;
- des commentaires qui semblent sans rapport avec le manuscrit lui-même.
Une supervision éditoriale rigoureuse peut donc réduire les problèmes, quel que soit le modèle d’évaluation.
14. Qu’est-ce que l’évaluation ouverte par les pairs ?
L’évaluation ouverte par les pairs désigne généralement les systèmes dans lesquels certains éléments de l’identité, des rapports ou des interactions liés à l’évaluation sont rendus visibles. Il n’existe pas de modèle universel unique.
Une revue peut :
- révéler l’identité des évaluateurs aux auteurs ;
- publier les rapports des évaluateurs avec l’article ;
- publier les réponses des auteurs ;
- permettre une discussion directe entre les auteurs et les évaluateurs ;
- ne révéler le nom des évaluateurs qu’après l’acceptation ;
- combiner plusieurs de ces pratiques.
L’argument sous-jacent est qu’une plus grande transparence renforce la responsabilité.
15. Pourquoi l’ouverture peut améliorer le comportement des évaluateurs
Un évaluateur anonyme peut rédiger des commentaires en sachant que l’auteur ne découvrira peut-être jamais qui les a écrits. L’évaluation ouverte modifie ce calcul.
Lorsque les évaluateurs savent que leur nom pourrait être associé à leurs rapports, ils sont plus susceptibles de :
- employer un langage professionnel ;
- étayer les critiques par des preuves ;
- éviter les commentaires personnels ;
- déterminer si les demandes sont raisonnables ;
- rédiger des rapports qu’ils seraient à l’aise de défendre publiquement.
Les rapports d’évaluation publiés peuvent également montrer le travail intellectuel impliqué dans l’évaluation par les pairs et permettre aux lecteurs de voir comment un manuscrit a évolué au cours de l’évaluation.
16. Le problème de l’ouverture totale
La transparence a également des coûts. L’anonymat des évaluateurs peut protéger les chercheurs qui doivent critiquer des auteurs influents.
Imaginez un jeune chercheur postdoctoral évaluant un manuscrit rédigé par un professeur éminent qui pourrait siéger ultérieurement dans des jurys de subventions, des comités de recrutement ou des conseils de conférence. Un système totalement ouvert pourrait rendre le jeune évaluateur réticent à signaler de graves faiblesses.
La même préoccupation peut se poser dans les petits domaines universitaires où les relations professionnelles sont inévitables.
L’évaluation ouverte peut donc réduire les critiques excessivement sévères tout en augmentant simultanément les critiques excessivement prudentes.
17. L’anonymat des évaluateurs est-il nécessaire à une critique honnête ?
C’est l’une des questions centrales de la réforme de l’évaluation par les pairs.
Les partisans de l’évaluation anonyme soutiennent que la recherche bénéficie de la liberté de parole des évaluateurs. Un évaluateur qui identifie une grave faille méthodologique ne devrait pas avoir à craindre des représailles professionnelles.
Les détracteurs soutiennent que l’anonymat peut encourager des comportements irresponsables, car les évaluateurs sont à l’abri de toute obligation de rendre des comptes.
Ces deux préoccupations sont légitimes. Le défi consiste à concevoir des systèmes qui favorisent une évaluation franche tout en maintenant des normes professionnelles.
18. Les conflits d’intérêts des évaluateurs comptent dans tous les systèmes
Aucun modèle d’évaluation ne peut fonctionner correctement si les conflits d’intérêts sont ignorés.
Un évaluateur devrait normalement déclarer ou décliner toute évaluation lorsqu’il existe une relation susceptible de compromettre son impartialité, notamment :
- coécriture récente ;
- affiliation institutionnelle commune ;
- relations personnelles étroites ;
- relations hiérarchiques directes ;
- d’importants différends professionnels ;
- une concurrence directe qui empêche une évaluation objective.
Les éditeurs doivent également se demander si un évaluateur a un intérêt intellectuel particulièrement marqué dans les conclusions du manuscrit.
Un système parfaitement en double aveugle ne peut pas résoudre les conflits que les éditeurs ne détectent pas avant d’attribuer le manuscrit.
19. Les suggestions d’évaluateurs peuvent créer une complexité supplémentaire
De nombreuses revues permettent aux auteurs de suggérer des évaluateurs de leur choix ou d’indiquer les chercheurs qu’ils préféreraient ne pas voir évaluer leur manuscrit.
Utilisée de manière responsable, cette possibilité peut aider les éditeurs à trouver des spécialistes, notamment dans les domaines très pointus. Utilisée de manière stratégique, elle peut susciter des inquiétudes quant à une volonté des auteurs d’influencer l’issue de l’évaluation par les pairs.
Les auteurs doivent suggérer des évaluateurs possédant véritablement une expertise pertinente et n’entretenant aucune relation inappropriée avec l’équipe de recherche. Les évaluateurs à exclure doivent généralement l’être uniquement pour des raisons défendables, telles qu’une concurrence directe ou un conflit d’intérêts.
La décision finale doit rester entre les mains de l’éditeur.
20. Les citations coercitives constituent une autre face sombre de l’évaluation
Les évaluateurs sont en droit de signaler des travaux importants absents d’un manuscrit. Toutefois, des problèmes surviennent lorsqu’ils font pression sur les auteurs pour qu’ils citent inutilement leurs propres travaux.
Une recommandation légitime peut expliquer qu’une étude précise est directement pertinente pour la méthode ou l’interprétation.
Une demande inappropriée peut consister en une longue liste d’articles ayant un lien marginal avec le sujet et rédigés par l’évaluateur, en particulier lorsque l’acceptation semble dépendre de l’ajout de ces citations.
Face à de telles demandes, les auteurs doivent évaluer la pertinence scientifique de chaque référence suggérée. Si une citation n’est pas appropriée, il est acceptable de l’expliquer respectueusement dans la réponse aux évaluateurs et, si nécessaire, d’attirer l’attention de l’éditeur sur ce problème.
21. Des exigences excessives des évaluateurs peuvent dénaturer un article
Un autre problème potentiel survient lorsque les évaluateurs demandent aux auteurs de transformer une étude ciblée en un travail qui dépasse largement son champ d’origine.
Parmi les exemples figurent les demandes suivantes :
- des expériences entièrement nouvelles ;
- le recrutement de participants supplémentaires ;
- de nouveaux jeux de données ;
- des cadres théoriques majeurs sans rapport avec la question initiale ;
- un grand nombre d’analyses secondaires.
Des travaux supplémentaires peuvent réellement être nécessaires. Toutefois, toutes les préférences des évaluateurs ne doivent pas forcément être mises en œuvre.
Les auteurs doivent déterminer si une demande est essentielle à la validité des conclusions ou s’il s’agit simplement de quelque chose qui rendrait l’étude différente.
22. Le langage hostile ne doit pas être normalisé
L’évaluation par les pairs peut être critique sans être insultante. Des affirmations telles que « les auteurs ne comprennent manifestement pas les notions scientifiques de base » contribuent peu à améliorer un manuscrit et peuvent en révéler davantage sur l’évaluateur que sur la recherche.
Une critique constructive identifie un problème et explique pourquoi il est important :
Il s’agit d’une critique ferme, mais elle donne aux auteurs un élément concret à traiter.
Les rédacteurs en chef doivent intervenir lorsque les rapports deviennent personnels, discriminatoires ou injurieux.
23. Les auteurs doivent distinguer la sévérité de la validité
Les auteurs ont également des responsabilités. Un rapport peut sembler injuste parce qu’il est négatif, mais la négativité ne suffit pas à établir l’existence d’un biais.
À la réception d’un rapport difficile, posez-vous les questions suivantes :
- La critique est-elle scientifiquement fondée ?
- L’évaluateur fournit-il des éléments de preuve ?
- Répondre à ce point améliorerait-il l’article ?
- Le problème vient-il du contenu du commentaire ou simplement de son ton ?
Un commentaire mal formulé peut néanmoins mettre en évidence une véritable faiblesse. À l’inverse, un commentaire formulé poliment peut tout de même être scientifiquement déraisonnable.
Séparez le ton du fond avant de décider comment répondre.
24. Quand les auteurs doivent contacter le rédacteur en chef
Une intervention éditoriale peut être appropriée lorsqu’un rapport contient :
- des attaques personnelles ;
- des erreurs factuelles démontrables et centrales dans la décision ;
- des conflits d’intérêts manifestes ;
- des demandes qui semblent coercitives ;
- des demandes incompatibles de la part de différents évaluateurs ;
- des commentaires sans rapport avec la qualité scientifique du manuscrit ;
Le message de l’auteur doit rester concis et fondé sur des éléments probants. Accuser un évaluateur de jalousie ou de faute professionnelle sans preuve a peu de chances d’être utile.
Au lieu de cela, identifiez précisément le problème et expliquez pourquoi il pourrait empêcher une évaluation équitable.
25. Comment les auteurs peuvent préparer une évaluation en double aveugle
Si une revue applique une évaluation en double aveugle, l’anonymisation doit être effectuée avec soin.
Vérifiez dans le manuscrit la présence des éléments suivants :
- les noms des auteurs ;
- les affiliations ;
- les adresses e-mail ;
- les remerciements ;
- les déclarations relatives à la contribution des auteurs ;
- des références institutionnelles révélant le lieu ;
- les propriétés du fichier ou les métadonnées du document ;
- des références à vos propres travaux formulées de manière à vous identifier ;
- des modifications suivies affichant les noms des auteurs ;
- des commentaires contenant des initiales ou des identités ;
Suivez les instructions spécifiques de la revue, car les exigences en matière d’anonymisation varient.
26. Comment les auteurs peuvent répondre à un rapport possiblement biaisé
Même si vous soupçonnez un parti pris, votre réponse doit se concentrer sur des éléments de preuve scientifiques.
Plutôt que d’écrire :
écrire quelque chose comme :
Si des éléments probants attestent réellement l’existence d’un conflit, soulevez la question séparément auprès du rédacteur.
27. Aucun modèle d’évaluation ne peut remplacer une culture éthique
Le débat sur l’évaluation en simple aveugle, en double aveugle et ouverte peut parfois laisser entendre que le choix du modèle technique approprié suffira à résoudre les faiblesses de l’évaluation par les pairs.
Il ne le fera pas.
Un système équitable nécessite également :
- des évaluateurs respectueux de l’éthique ;
- des rédacteurs actifs ;
- des politiques claires en matière de conflits d’intérêts ;
- des lignes directrices raisonnables pour les évaluateurs ;
- des mécanismes permettant aux auteurs de faire part de leurs préoccupations ;
- des conséquences appropriées en cas de faute grave.
La conception de l’évaluation peut réduire les occasions de biais, mais c’est la culture qui détermine la manière dont les utilisateurs recourent au système.
28. Comparaison des principaux modèles d’évaluation par les pairs
Évaluation en simple aveugle
- L’évaluateur connaît l’identité de l’auteur.
- L’auteur ne connaît pas l’identité de l’évaluateur.
- Favorise les critiques franches.
- Peut exposer les auteurs à des biais liés à leur réputation et à leur institution.
Évaluation en double aveugle
- Les identités officielles sont dissimulées aux deux parties.
- Peut réduire certains biais liés à la réputation et à l’affiliation.
- L’anonymat est souvent imparfait dans les domaines spécialisés.
- N’élimine pas les biais méthodologiques ou intellectuels.
Évaluation ouverte
- L’identité des évaluateurs, leurs rapports, ou les deux, peuvent être divulgués.
- Peut renforcer la responsabilité et le professionnalisme.
- Peut décourager la critique d’auteurs influents.
- Nécessite une protection attentive des évaluateurs débutants.
29. Quel système est le meilleur ?
Il n’existe pas de réponse parfaite. Les différentes disciplines et revues sont confrontées à des difficultés différentes.
L’évaluation en double aveugle peut être particulièrement utile lorsque les préoccupations liées au prestige, à la zone géographique ou aux biais institutionnels sont fortes. L’évaluation ouverte peut bien fonctionner dans les communautés qui valorisent un dialogue scientifique transparent. L’évaluation en simple aveugle peut rester pratique dans des domaines spécialisés où les identités seraient évidentes, quelle que soit l’efficacité de l’anonymisation formelle.
Des systèmes hybrides sont également possibles. Une revue peut utiliser une évaluation en double aveugle pendant l’examen, puis publier les rapports anonymes des évaluateurs après l’acceptation, ou permettre aux évaluateurs de révéler volontairement leur identité.
L’enjeu important est de savoir si le processus encourage les évaluateurs à se concentrer sur la qualité du travail et donne aux rédacteurs les outils nécessaires pour corriger les comportements injustes ou non professionnels.
30. Conseils pratiques pour les auteurs qui s’engagent dans le processus d’évaluation par les pairs
Avant la soumission :
- Vérifier quel modèle d’évaluation par les pairs la revue utilise.
- Respecter scrupuleusement les exigences d’anonymisation.
- Déclarer honnêtement les conflits d’intérêts.
- Suggérer des évaluateurs uniquement lorsque cela est approprié et en l’absence de conflit d’intérêts.
- Soumettre un manuscrit clair et soigneusement relu.
Après réception des évaluations :
- Lire attentivement tous les commentaires avant de réagir.
- Distinguer les critiques scientifiques valables du ton employé.
- Répondre point par point.
- Étayer les désaccords par des éléments probants.
- Contactez l’éditeur lorsqu’une évaluation semble gravement entachée de conflits d’intérêts ou inappropriée.
Conclusion : un seul côté sombre ou plusieurs ?
L’évaluation par les pairs n’a pas un seul côté sombre. Ses faiblesses découlent de plusieurs problèmes interdépendants : l’anonymat sans responsabilité, les biais fondés sur l’identité, la concurrence universitaire, la rivalité intellectuelle, les demandes de citations indues, les exigences excessives des évaluateurs et les rapports de pouvoir inégaux. Les différents systèmes d’évaluation s’attaquent à différentes facettes de ce problème.
L’évaluation en simple aveugle protège les évaluateurs, mais permet à l’identité des auteurs d’influencer le jugement. L’évaluation en double aveugle peut réduire certaines formes de biais liés à la réputation, à l’établissement ou à la personne, mais il est souvent difficile de maintenir un véritable anonymat et des conflits intellectuels restent possibles. L’évaluation ouverte accroît la transparence et la responsabilité, mais elle peut dissuader les jeunes chercheurs de critiquer honnêtement des auteurs puissants.
La question n’est donc pas simplement de savoir s’il faut rendre un aspect de l’évaluation par les pairs plus opaque ou plus transparent. Un système d’évaluation équitable repose sur une supervision éditoriale réfléchie, une sélection responsable des évaluateurs, des politiques claires en matière de conflits d’intérêts et une communication professionnelle de la part de toutes les personnes concernées.
Pour les auteurs, comprendre le modèle d’évaluation utilisé par une revue peut contribuer à réduire l’incertitude et à améliorer la préparation. Une anonymisation rigoureuse, une rédaction scientifique claire et des réponses posées aux critiques des évaluateurs ne peuvent pas éliminer les biais, mais elles facilitent l’évaluation des désaccords sur le fond par les éditeurs.
L’évaluation par les pairs demeure imparfaite, car la recherche elle-même est une activité humaine. Ses faiblesses doivent être reconnues plutôt qu’ignorées, mais elles doivent également être traitées de manière constructive. Que les revues choisissent des modèles en simple aveugle, en double aveugle, ouverts ou hybrides, l’objectif fondamental devrait rester le même : veiller à ce que les recherches soient évaluées aussi équitablement que possible en fonction de leurs données probantes, de leurs méthodes, de leur raisonnement et de leur contribution aux connaissances.
Pourquoi choisir nos services de révision et de relecture ?
Sur Proof-Reading-Service.com, nous proposons des services de la plus haute qualité en matière de révision d’articles de revue, de relecture de thèses et de relecture en ligne, grâce à notre équipe nombreuse et extrêmement dévouée de professionnels du milieu universitaire et scientifique. Tous nos relecteurs sont anglophones natifs et ont obtenu leurs propres diplômes de troisième cycle. Leurs domaines de spécialisation couvrent un éventail si vaste de disciplines que nous sommes en mesure d’aider notre clientèle internationale à réviser ses travaux de recherche afin d’améliorer et de perfectionner toutes sortes de manuscrits universitaires en vue d’une publication réussie.
De nombreux membres soigneusement formés de notre équipe de révision et de correction d’épreuves de manuscrits travaillent principalement sur des articles destinés à être publiés dans des revues universitaires, en appliquant des normes rigoureuses de révision d’articles de revue afin de garantir que les références et la mise en forme utilisées dans chaque article sont conformes aux instructions aux auteurs de la revue, et de corriger les erreurs de grammaire, d’orthographe, de ponctuation ou les simples fautes de frappe. Nous permettons ainsi à nos clients de présenter leurs recherches de manière claire et précise, comme l’exigent les éditeurs pour être impressionnés et parvenir à la publication.
Nos services de correction d’épreuves scientifiques destinés aux auteurs d’une grande variété d’articles de revues scientifiques sont particulièrement appréciés, mais nous proposons également des services de correction d’épreuves de manuscrits et possédons l’expérience et l’expertise nécessaires pour corriger et réviser des manuscrits dans toutes les disciplines universitaires, ainsi qu’au-delà de celles-ci.
Nous comptons parmi nos collaborateurs des spécialistes des services de correction d’épreuves médicales, et certains de nos experts consacrent exclusivement leur temps à la correction d’épreuves de thèses et à la correction d’épreuves de manuscrits, offrant aux universitaires la possibilité d’améliorer leur utilisation de la mise en forme et de la langue grâce aux pratiques les plus rigoureuses de révision de thèses de doctorat et de correction d’articles de revue.
Que vous prépariez une première soumission, révisiez un article après une évaluation par les pairs, rédigiez une réponse aux évaluateurs ou vérifiiez qu’un manuscrit a été anonymisé et correctement mis en forme, un membre qualifié de notre équipe professionnelle peut vous apporter une aide inestimable et vous donner davantage confiance dans votre travail écrit.
Si vous préparez actuellement un article pour une revue universitaire ou scientifique, ou prévoyez d’en préparer un prochainement, le Guide de la publication dans les revues, disponible sur notre site Conseils et recommandations pour publier des recherches dans des revues, pourrait également vous intéresser.