Voi itku.
Tuli taas reviewattavaksi artikkeli, ja tyypiltä jonka tunnen ja joka tekee hyvää työtä, ja jonka data on hyvin mitattua ja analysoita ja artikkelin kuvat on melko hyvin tehtyjä – mutta se on kirjoitettu aivan tuskaisen huonosti! En ole vielä päässyt metodeista eteenpäin ja on jo kolmatta sivua huomautuksia huolimattomasta kielenkäytöstä – siis sellaisesta, jonka takia ei voi olla ihan varma että mitä ne on tehneet ja miksi. Siis jos ei tuntisi asiaa ja osaisi arvata. Eikä edes kannata lähteä luettelemaan kirjoitus – ja kielivirheitä…
Mähän olen tässä jo jonkun aikaa haaveillut että jospa tulis reviewattavaksi vihdoinkin joku sellanen manuskripti jolla ois edes jotain mahiksia tulla julkaistuksi jossain eikä niitä minkä kanssa lähinnä pohtii että miten sanoa nätisti että tää on niin huono etten jaksa lukea. No, ehkä tää on askel parempaan suuntaan; juttu on hyvä mut sen lukeminen on silti tuskaa, joka ainoan lauseen kanssa saa lukea kolmeen kertaan ennenkuin tajuaa mitä ne sanoo.
Tämän nimenomaisen reviewaus-nakin kanssa tulee hyvin reviewatttua kaikkia näitä suureellisia ja idealistisia ajatuksia, mitä nyt on tullut julistaneeksi avoimesta tieteestä ja sillai. Tulee tarkistettua, että montako asiaa tässä nykyisessä systeemissä on pielessä.
Sattuu olemaan niin, että kyseisen manuskriptin pääauthori on ihminen, jonka tunnen, jonka kanssa olen jutellut pidempään kuin viisi minuuttia, josta pidän sekä ihmisenä että tutkijakolleegana. Toisaalta, tiedän, että sillä on ollut ns. Vaikeaa uransa kanssa, rahoitus (eurooppalaiseen tapaan) on ollut kiven alla, ja kyseinen tutkija on vuosikausia puskenut lähes yksin aiheensa kanssa. Alle minuutin mittainen taustatietojen tarkastelu (ilman nettiä) viittaa siihen, että toinen kyseisen artikkelin tutkijoista on vielä siirtynyt muihin tehtäviin; dataa on esitetty "in preliminary form" postereissa vuosina 2001 ja 2004, eli arvatenkin kyseessä on jonkun ei-niin-menestyksekäs väikkäriprojekti jonka kolleegani (kutsuttakoon häntä vaikka Robiniksi) on nyt sitten itse kasannut pöytälaatikon datoista.
Manuskriptissa itsessään on viitteitä siitä, että juttu on lähetetty aikaisemmin jo jonnekin, saatu sieltä tyrmäävät arvostelut, joihin on sit yritetty post-hoc vastata ja lähettää juttu julkaisuhierarkiassa seuraavaan kohteeseen. Löytyy esimerkiksi päälleliimattu lause, jossa viitataan siihen mun juttuuni, ja tavallaan Robin on ehkä tehnyt jotain kokeita saadakseen juttunsa sopimaan "suureen skeemaan". Edelliset refereet selkeästi oli kitisseet että kun lähetetään tällaiseen korkealaatuiseen julkaisuun niin tulosten pitäisi lisätä merkittävästi ymmärtämystämme aivojen toiminnasta – ja Robin on vastannut lisäämällä diskussioon useita jonninjoutavia kappaleita kyseisen aivoalueen kriittisestä merkittävyydestä eläimen toiminnalle.
Kaiken lisäksi, koska tulokset on tavallaan "outoja" ja efektin näyttämisen jouduttiin käyttämään fysiologista kymmenen kilon hienosäätölekaa, Robin käyttää noin puolet kaikesta energiastaan puolustelemaan tutkimuksensa merkittävyyttä. Tämän seurauksena alun perin ihan positiivisesti suhtautunut lukijakin saattaa ruveta epäilemään notta onko tää ny mitenkään oleellista tai edes oikein tutkittua.
Sattuu myös olemaan niin, että tutkimuskohde liippaa hyvinkin läheltä omiani – ja tämän takia mä näen, että varsinainen tutkimus, kokeet, analyysi ja kuvat on hyvin ja huolellisesti tehtyjä, sekä ymmärrän miksi ne on tehty ja miksi ne on oleellisia. Ja kaikesta sydämestäni toivoisin ja järjellä haluaisin että tutkimukset julkaistaisiin ja muuttuisivat osaksi yleistä tietoa. En siksi, että kyseessä on tuttu, tai koska tulokset jotenkin tukis omiani (ei varsinaisesti edes tee niin), vaan koska asia on tärkeä.
Mutta itku kun juttu on niin huonosti kirjoitettu!
Nythän siis pitäisi tehdä niin, että ottaisin maili-ikkunan kiltisti auki ja kirjoittaisin että "Parahin Robin, hienoa työtä, mut koe X pitäs toistaa myös eri ikäryhmässä, se ehkä unohtui? Ja, muuten, Stetson&Stetson 02, johon viittaat, ei varsinaisesti oikeasti tue tätä asiaa, ne sanoo et entsyymi Y liittyy MYÖS prosessiin Q eikä että se on yksinomaan Q-prosessin osa. Mun kokeissa toi aktiivisuus näyttää vähän erilaiselta, johtuneeko siitä että sä käytät eri leikkuria?" ja niin edelleen. Vaikken ny ihan noin läheisissä väleissä tyypin kanssa oikeasti ole.
Mut olis ylituttavallisuuskin parempaa kuin se, että käytän 2 päivää kirjoittaakseni virallisen vastineen editorille, jossa kerron että ehdottomasti tuen artikkelin julkaisua, mutta tässä on 10-sivuinen luettelo asioita jotka pitäis korjata, enkä ymmärrä miksi koe X puuttuu toisesta ikäryhmästä. Toinen referee mitä luultavammin kirjoittaa että "käsikirjoitus on niin täynnä epäjohdonmukaisuuksia ja virheitä, että tutkimuksen tason arviointi on mahdotonta" ja se siitä. Robin saa vastaukset, masentuu, tai reippaasti ryhtyy tekemään uusiksi koetta X (vaikka ehkä ei enää ole paikalla tyyppiä joka teki kokeet alunperin eli menee puoli vuotta siihen kun opetetaan joku uus tyyppi tekeen ne), ja joskus 2008 alussa lähettää jutun taas hierarkiassa seuraavaan paikkaan. Hyvässä lykyssä se on ulkona puolentoista vuoden päästä. Ellei joku muu onnistu saamaan aikaiseksi vastaavia tuloksia nopeammin ja täsmällisemmin raportoituna.
Ja tästä kaikesta ajan, rahan, hermojen, eläinten ja inspiraation tuhlauksesta maksaa veronmaksaja, ja tutkija kituuttaa apurahanpuolikkaalla ja kirjoittaa muistiinpanonsa tylsällä lyijykynällä kylmässä tutkijankammiossa. Vaikka se varsinainen tieto syntyi jo aikaa sitten kun tekivät ne n=5 koettaan.
Pois se minusta, että täysin ja ehdottomasti haluaisin päästä peer-reviewistä eroon. Onhan se muinainen, jäykkä ja epätäydellinen systeemi, mutta viime vuosisadan loppuun asti se ehkä oli ainoa mahdollinen tapa pyrkiä edes jollain tapaa erottelemaan jyvät akanoista. Virheitä toki sattuu, mutta sellaista epä-triviaalia järjestelmää ei varmaan ole joka olisi täysin aukoton.
En myöskään usko, että jossain määrin nykyisenkaltaisesta artikkelijulkaisumuodostakaan tarvitsee varsineisesti päästä eroon; luulen, että on meillä 50 vuode
nkin päästä "lehtiä", joissa julkaistaan "artikkeleita", joissa on jollain tapaa sovittu rakenne ja joiden otsikkosivulle nimensä saaville kehittyy mainetta ja kunniaa.
Mutta sitä en enää usko, että joka ainut pieni lisähavainto pitää julkaista artikkelissa, ympäröidä se sivukaupalla muualta kopioitua pohdintaa homman merkityksellisyydestä (tiedättehän, varmaan jokainen GABAa-reseptoreita käsittelevä artikkeli alkaa "GABA is the main inhibitory transmitter in the brain" – lauseen jollain permutaatiolla).
Itse tein tässä maanantaina pari pientä pilottikoetta, kokeilin yhden aineen vaikutusta ilmiöön jota tutkin, ei ollut vaikutusta. Tuskin ikinä julkaisen tietoa; N:t on liian pieniä, eikä efektin puute varsinaisesti todista sinänsä mitään (sitäpaitsi kalastushypoteesini oletti reseptorin paikassa jossa sitä ei oppikirjan mukaan ole), eikä tästä ole edes miksikään viralliseksi "negatiiviseksi tulokseksi". Silti maailmassa on varmasti joku jossain joka käyttää aikaa, vaivaa, rahaa ja eläimiä kokeillakseen samaa, tai vähän eri tavalla, koska artikkelihaku asiaankuuluvin hakusanoin ei tuonut yhtään tulosta.
On se harmillista.
Avainsana, jota ehkä kannattaa seurata: Open Notebook Science. Kuuntelin podcastin luennosta, ja fiilis oli lähes kummitusmainen: tuntui kuin joku olis puhunut ihan suoraan mun ajatuksiani.
—
Kuvien pojat mainostaa DoCoMon kännyköitä; ylempi tyttö muistuttaa että passia ei saa hukata (ilmeisesti japanilaiset hukkaavat niitä ulkomaanmatkoillaan jotenkin tosi paljon), ja alempi halaa paikallista verokarhun vastiketta kun ehkä nyt voi tehdä veroilmoituksen netissä.