Clubby og disturbing citationsadfærd fra forskere i Italien er steget

Mark Airs / Getty Images

Clubby og disturbing citationsadfærd fra forskere i Italien er steget

Af Giorgia GuglielmiSep. 11, 2019, 14:00

Den hastighed, hvormed forskere i Italien citerer sig selv og deres landsmænd stiger hurtigere end i 10 andre udviklede lande, ifølge en ny undersøgelse. Bølgen i Italien s klubbcitationstegn er sandsynligvis resultatet af en lov fra 2010, der kræver produktivitetsstandarder for akademisk rekruttering eller forfremmelse, siger undersøgelsesforfatterne.

Resultaterne er en forsigtighedsfortælling for forskningsadministratorer, der stoler for meget på citeringsmetrik ved tildeling af ressourcer og træffe beslutninger om karrierefremdrift, siger studieforfatter Giuseppe De Nicolao, ingeniør ved University of Pavia i Italien. At knytte faglig fremskridt til citeringsindikatorer kan skabe forskere til utilsigtet adfærd og gøre målingerne upålidelige, siger han.

Resultaterne er forstyrrende, siger Ludo Waltman, en bibliometrisk ekspert ved Leiden Universitet i Holland, som ikke var involveret i undersøgelsen. For at begrænse tvivlsom citeringspraksis, siger Waltman, bør det italienske evalueringssystem udelukke selvcitater og overveje faktorer som en forskerens erfaring og aktiviteter ud over citationstællinger.

Efter at 2010-loven blev vedtaget, begyndte Italien at regulere akademisk rekruttering og forfremmelse ved hjælp af indikatorer som citeringsoptællinger. Det var beregnet til at tackle bekymringer om nepotisme og mangel på meritokrati.

Under politikken kan akademikere ikke søge et job eller en forfremmelse som lektor eller fuld professor, medmindre de opfylder mindst to af tre indikatorer for forskningsproduktivitet. Inden for områder som medicin og naturvidenskab inkluderer disse indikatorer antallet af publikationer, antallet af modtagne citater og h-indeks et kombineret mål for produktivitet og citeringspåvirkning.

Citater drejer indad

Sammenlignet med andre lande oplevede Italien en hurtigere stigning i nvendighed, procentdelen af ​​citater til et land s videnskabelige artikler, der kom fra forfattere i samme land.

2008 2010 2012 2014 2016 20 22 24 26 28 30 32% Japan Storbritannien Italien Frankrig Inwardness
Grafik: J. Brainard / Science; Data: A. Baccine et al .; PLOS ÉN

Tidligere undersøgelser har fundet, at 2010-politikken inducerede en stigning i selvcitater. Disse undersøgelser kiggede dog ikke på andelen af ​​hvert land s publikationer citeret af andre lærde i det samme land, siger Alberto Baccini, en scientometrics-ekspert ved University of Siena i Italien. Disse intranationale citater kunne afsløre citationsklubber, en subtil form af manipulation, hvor grupper af videnskabsfolk citerer hinanden for at øge deres citationstal, siger Baccini.

Så Baccini, De Nicolao og deres team bestræbte sig på at udvikle en indikator for indre, som måler både selvreferentielle og intranational citater. Forskerne skurede Elsevier s Scopus-database, en af ​​verdenens største for forskningslitteratur, til citationstællinger mellem 2000 og 2016 for forskere i G-10, en gruppe af 11 udviklede lande. For at beregne en nation s indre, tællede holdet citater af et land s forfattere til papirer, der er forfatter i dette land, og delte dette tal med det samlede antal citater, der er påløbet af landet.

Alle nationerne viste beskedne stigninger i indre forhold over tid, hvilket paradoksalt nok kan forklares med en vækst i internationale samarbejder. Disse udvider antallet af papirer fra deltagende lande, der kunne citeres. Tag for eksempel et papir, der er co-forfatter af forskningssamarbejdspartnere i Italien og Frankrig: Enhver henvisning til dette papir fra en italiensk eller fransk forfatter publikation vil regne som en intranational citation for både Italien og Frankrig.

Fra og med 2010 begyndte imidlertid Italien in in s indre indre at stige hurtigt og overgå Frankrig, Japan og Storbritannien, fandt forskerne. Oversvømmelsen kunne ikke tilskrives samarbejde, fordi Italien s vækstrate for internationale samarbejder mellem 2000 og 2016 var anemisk sammenlignet med andre nationer. I 2016 kom omkring 31% af de italienske citater fra forfattere inden for dens grænser more end noget andet land undtagen De Forenede Stater, et forskningskraftcenter, hvor mange intranationale citater forventes.

Fordi tendenserne ændrede sig efter indførelsen af ​​2010-politikken, er det sandsynligt, at forfattere i Italien vedtog opportunistisk adfærd, herunder massivt citerer deres eget arbejde og af kolleger, for at nå deres landets politiske mål, forskerne rapporter i dag i PLOS ONE.

Marco Seeber, en videnskabspolitisk forsker ved Universitetet i Gent i Belgien, siger, at væksten i Italien s indre er slående. I marts undersøgte Seeber landet s brug af citeringsmetrikker og fundet betydelige stigninger i selvcitater efter 2010-politikken. Politikken var motiveret af værdige intentioner, siger han. Men bibliometriske indikatorer skal bruges til at informere snarere end at bestemme evalueringer.

Seeber siger, at det er uklart, hvor meget af Italien s indre er fra selvcitation kontra citationsklubber. For at afsløre disse klubber skulle man undersøge individuelle papirer for at diskriminere legitime fra falske citater, siger han.

John Ioannidis, en læge-videnskabsmand ved Stanford University i Palo Alto, Californien, mistænker, at citationsklubber står bag Italiens tendens. Ioannidis, der oprettede en database, der afslørede hundredevis af ekstreme selvciterende forskere, siger, at den nye undersøgelse giver endnu et eksempel på, hvordan målinger kan misbruges. Han bemærker, at selvcitater er nødvendige, hvis en undersøgelse bygger på tidligere arbejde fra forfatterne eller deres kolleger. ”Men hvis nogen har samlet mere end halvdelen af ​​deres citater fra sig selv eller deres medforfattere, er det temmelig underligt, ” siger han. ”Du er nødt til at se nærmere på.”