4  tema: Atsakingas vertinimo priemonių taikymas

Labai svarbu, kad vertinimo rodikliai būtų naudojami atsakingai. Atsakingas vertinimo rodiklių naudojimas turėtų būti grindžiamas principais, kurie atsižvelgia į mokslinių tyrimų savybių ir poveikio įvairovę. Ši tema padės suprasti atsakingą rodiklių naudojimą kaip bendrą principų rinkinį ir kaip šiuos principus pritaikyti konkrečiose situacijose.


Pradžia

2015 m. buvo atlikta nepriklausoma rodiklių vaidmens apžvalga tyrimų vertinime „The metric tide“. Jos metu pasiūlyti penki atsakingo rodiklių naudojimo principai:

Tvirtumas: rodiklių pagrindimas kuo tikslesniais ir didesnės apimties duomenimis.  

Nuolankumas: pripažinimas, kad kiekybinis vertinimas turėtų paremti, bet ne išstumti, kokybinį ekspertų vertinimą.

Skaidrumas: atviri ir skaidrūs duomenų rinkimo ir analitiniai procesai. Tokiu būdų vertinami asmenys gali patikrinti ir patvirtinti rezultatus.

Įvairovė: atsižvelgimas į skirtingas sritis ir įvairių rodiklių naudojimas, siekiant atspindėti ir paremti daugybę tyrimų ir tyrėjų karjeros galimybių visoje sistemoje.

Reflektyvumas: sisteminio ir galimo rodiklių poveikio atpažinimas ir numatymas bei rodiklių atnaujinimas.

Norėdami sužinoti apie šių principų aplinkybes ir raidą, perskaitykite „The metric tide“ įvadą. Puslapio apačioje rasite nuorodas, kur galėsite atsisiųsti santrauką bei rekomendacijas. Jei norite, vietoje straipsnio, galite pažiūrėti „Metric tide“ vaizdo įrašą su James Wilsdon.

Siekiant atsakingai naudoti rodiklius, DORA (San Francisko deklaracija dėl tyrimų vertinimo, angl. San Francisco Declaration on Research) ir Leiden manifestas yra dvi reikšmingos deklaracijos, kalbančios apie atsakingą vertinimo rodiklių naudojimą. Asmenys, institucijos ir organizacijos yra kviečiami jas pasirašyti arba patvirtinti.

Peržiūrėkite vaizdo įrašą „The Leiden Manifesto for research metrics“, kuris paaiškina 10 Leideno manifesto principų, kuriais vadovaujamasi atliekant tyrimų vertinimą.

Perskaitykite Declaration on Research Assessment  (DORA). Norėdami sužinoti pavyzdžių, kaip mokslinių tyrimų įstaigos pritaikė DORA principus, kaip jie vertina tyrimus, apsilankykite puslapyje DORA good practices – research institutes.

Pasvarstykite

Ar Jūsų įstaiga taiko šias deklaracijas arba bent vieną iš jų? Kaip manote, kokios yra jų santykinės stiprybės ir apribojimai?


Sužinokite daugiau

Kai kurie leidėjai taiko atsakingą rodiklių principų naudojimą. Pavyzdžiui, atviros prieigos pelno nesiekianti leidykla PLOS (viešoji mokslo biblioteka, angl. Public Library of Science) yra pasirašiusi DORA deklaraciją ir yra įsipareigojusi laikytis penkių, leidėjams skirtų, DORA gairių. Tuo tarpu Elsevier 2020 m. liepos mėn. oficialiai paskelbė patvirtinantis Leiden manifestą (Elsevier press release).

Norėdami sužinoti tiekėjo požiūrį į atsakingą vertinimo rodiklių naudojimą, peržiūrėkite produkto Elsevier tyrimų rodiklių vadovo Chris James 2017 m. pristatymą  „Doing metrics responsibly“.

Praktinė užduotis

Apibendrinkite Elsevier sukurtas „dvi auksines taisykles“, kaip naudoti tyrimo rodiklius ir „rodiklių krepšelį“ (iš Chris James pristatymo).

Pasvarstykite

Ar manote, kad „dvi auksinės taisyklės“ ir „rodiklių krepšelis“ pakankamai plačiai nagrinėja DORA ir (arba) Leideno principus? Ką dar Elsevier daro, siekdami palaikyti atsakingą tyrimo vertinimo rodiklių naudojimą?

Toliau skaitykite straipsnį „The blind and the elephant: bringing clarity to our conversations about responsible metrics“. Šiame straipsnyje Lizzie Gadd skatina prieš pradedant bet kokį pokalbį apie atsakingus tyrimo vertinimo rodiklius, paaiškinti, ką, kodėl ir kaip mes matuojame.


Įsigilinkite

Kaip atsakingų tyrimo vertinimo rodiklių principai yra taikomi įstaigose?

2017 m. įraše „Responsible metrics: easier said than done?“ Lizzie Gadd aptaria, kaip atsakingas rodiklių naudojimas pritaikomas praktiškai.

Norėdami sužinoti apie principų taikymo procesą įstaigoje, perskaitykite „What difference does a responsible metrics statement make?“, kur išdėstyti Bath universiteto tyrimų vertinimo ir valdymo principai.

Praktinė užduotis

Raskite panašių principų, kuriuos naudoja jūsų šalies įstaigos, pavyzdžių.

Perskaitykite žemiau nurodytus straipsnius, kuriose nagrinėjamas universitetų požiūris į atsakingą vertinimo rodiklių naudojimą ir pabandykite sužinoti apie tyrimų vertinimą Jūsų įstaigoje.

  • Andrews universiteto puslapis: „Responsible metrics“ 
  • Sheffield universiteto bibliotekos apžvalga: „Using metrics responsibly“.
  • Melbourno universiteto „Newsroom“ straipsnis apie jų pasirašytą San Francisko tyrimų vertinimo deklaraciją (DORA).

Pasvarstykite

Kokia informacija yra prieinama Jūsų institucijoje apie požiūrį į mokslinių tyrimų vertinimą? Ar tai deklaruojama įstaigos politikoje ar strateginiuose dokumentuose?



Tinklalapyje medžiaga adaptuota pagal IATUL Research Impact Things svetainę, kuri naudoja Creative Commons Attribution-ShareAlike License licenciją.