Klávesové zkratky na tomto webu - základní
Přeskočit hlavičku portálu

Věda potřebuje nejen peníze, ale i efektivní způsob vyhodnocování

27. 07. 2017 9:54:59
Cílem základního výzkumu je poznat něco nového o přírodě, vyřešit určitou záhadu, a to často bez ohledu na bezprostřední využití takových objevů.

Konkrétním výstupem jsou pak především odborné publikace, v nichž vědci expertní veřejnosti sdělují, co a jakým způsobem objevili. Důležité je jejich další ohodnocení vědeckou komunitou, tj., jak se tyto práce následně citují v pracích jiných autorů, což přináší určitý způsob zobjektizovaného ohodnocování, jak před šedesáti lety nastínil článek E. Garfielda. Tento nový rozměr v dokumentaci pomocí asociace a provázanosti idejí je dnes už běžný na internetu a umožňuje evaluaci časopisů na základě jejich faktoru dopadu či ohlasu (IF – impact factor). Tak vznikly nejrůznější komise a rady hledající optimální způsob ohodnocování, kde mimo zvykového subjektivního hledání kvality sdělení zatím nic objektivnějšího než citační odezvu nenašly.

Finance do základního výzkumu významně obhospodařuje GAČR, která by měla mít co nejpropracovanější a nejprůhlednější způsob ohodnocování obdržených projektů. Zde je nezbytné si uvědomit, že pro zajištění akceptovatelnosti projektu je nutné už předem vynaložit nemalou práci, a to nejen na jeho odborné kvalitě, ale zejména na jeho formální připravenosti a průchodnosti dokumentu v relaci správného vyplnění všech požadovaných náležitostí (kolonek). To vše s vidinou předem nezjistitelné a téměř zanedbatelné úspěšnosti. Tím se vlastní náplň bádání začala oddělovat od jeho formální projektové prezentace se snahou získat pozitivní ohodnocování často bez ohledu na podstatu problému. Zrodila se tak často matoucí hra na vědu, kde převládající procesy prezentace a posuzování se staly především součástí zosobnění nejrůznějších kritérií, jejich přizpůsobování podle vlivu resortů, osobností, oborů, disciplin, atd.

Současný způsob grantového hodnocení projektů a jejich předkladatelů se především zakládá na formální čistotě návrhů a správném vyplnění požadovaných kolonek, a pokud vyhovují, hodnotí se dále přes soustavu parciálních posuzovatelů (recenzentů) Ty současně píší posudek na odbornou způsobilost a vědeckou hodnotu přičemž oceňují, zda předkladatel splňuje určité podmínky zasloužilosti (vědeckého uznání). Tak vzniká nadmíru ošemetný úkol, který nelze jednoduše určit prostým seřazením určitých kritérií, jako počtu publikací, citační odezvy, renomé autora, významnosti práce atd. Existují sice mezinárodně uznávané databáze výsledků a citační odezvy (např. obecně dostupný WOS - Web of Science), který současně poskytuje i koeficient zvaný H-index (badatelé s vysokým H-faktorem pravděpodobně přispívají podstatnější mírou k rozvoji určité disciplíny). Bohužel zatím nic lepšího na trhu evaluace není, i když některé kolektivní obory, kde se publikují odborné články s desítkami spoluautorů, mohou indexově těžit ze své provázanosti.

Procento úspěšnosti podaných grantových přihlášek se během pěti let zvedlo o deset procent z původních cca 17 %, přičemž ze statistiky lze vyvodit, že jestliže procento úspěšnosti výběru určitého statistického souboru nepřesáhne 1/3, je objektivnější tento soubor losovat než oponentně zhodnotit. V takovém případě by se selekce provedla naprosto nepředpojatě, čímž by se odstranila jakákoliv možná osobní zainteresovanost na přednostní přijetí určitých projektů, protože lze vždy najít nezanedbatelnou korelaci mezi týmy hodnotitelů a předkladatelů. Tomu se zhodnocovací kriteria brání právě nalosováním oponentů, což zapříčiňuje jistou chaotičnost v instalaci nedostatečně odborně fundovaných posuzovatelů. Takže losován je někde přípustné a jinde nepřijatelné!

Vedení GAČR je bohorovně klidné a nepřipouští jakoukoliv diskuzi o věrohodnosti svých postupů, kde jsou posudky ze zákona nezpochybnitelné a recenzenti anonymní, což znemožňuje zpětné ověření jejich věrohodnosti. Rád posloužím příkladem nekorektního rozhodování GAČRu, když můj projekt v roce 2015 byl posouzen pozitivně a hned v následujícím 2016 v identické formě zamítnut. Návrh obsahoval podklad dokončení odborných kapitol zásadní knihy „Thermal Physics and Thermal Analysis“, která už v současnosti byla opublikovaná a přes svoji krátkou existenci vysoce oceněna. Kniha se stala součástí trilogie, doplňujíc tak mé předchozí dvě knihy, které světoznámé nakladatelství Springer zařadilo mezi svých dvacet nejlepších knih.

Knihy a zejména jejich recenzované autorské kapitoly byly součástí i mých předchozích zamítnutých projektů, a tak se naskýtá se otázka, jestli takovýto mezinárodně významný výsledek, který zřejmě nemá v české vědecké literatuře obdoby, byl v rámci GAČRu oprávněně hodnocen jako nekvalitní a nepřiměřený k financování. Nádavkem součásti projektu byla i stať o třistaleté ignoranci Newtonova ochlazovacího zákona v termofyzice tepelných procesů, opomíjený v řadě softwarů, což by mohlo poškodit pověst právě masivně prodávaných přístrojů o což prodejci (a možná i recenzenti) nemají zájem. Asi není náhodou, že po řadě mých předchozích projektů, které skončily s oceněním excelentní, najednou žádný grant nedostávám, což se jeví jako diskriminační důsledek mých kritických esejí na vrub GAČRu, které dokonce vedly k rezignaci tehdejšího předsedy. Můj apel k předsedkyni kontrolní komise Prof. Mária Režňáková se setkal s následující odpovědí “...dovoluji zdůraznit, že GAČR se nemůže vyjadřovat k odborné stránce projektu - v tomto směru se spoléhá na řádně jmenované poradní expertní orgány předsednictva GAČRu čímž považuji tuto záležitost za uzavřenou...“. K čemu tedy slouží kontrolní práce GAČRu když jen zjišťuje, jestli je formálnost projektu správně splněna a kolonky řádně vyplněny a nezajímá se o jeho badatelskou podstatu, což by mělo být právě preferenčním zájmem GAČRu. Neměli by se představitelé zajímat i o výsledky těch nedoporučených projektů, které mohou a často přináší závažné výsledky a tak zabudovat žádoucí zpětnovazebné hodnocení.

Vraťme se k Zemanovu výroku z roku 1989: „Nemůžeme přiznat jakékoli skupině řídících pracovníků, tím méně v socialismu, právo na neomylnost a nekontrolovatelnost. Nemůžeme vidět ani budoucnost socialistické vize jako bezrozpornou a bezkonfliktní, má-li to být vize živá a skutečně strhující“. Stačí si odmyslet slůvko socialistický a hned jsem v současnosti – opravdu jsme v hodnocení vědy neomylní!?

Jaroslav Šesták

Emeritus, dr.h.c. a čestný občan Prahy 5

Zdroje:

E. Garfield: Citation indexes for science: a new dimension in documentation through association of ideas. Science, 122, 108, 1955

V. Hořejší: Scientometrie aneb můžeme měřit kvalitu vědecké práce? Vesmír 79, 83, 2000/2

E. Kejnovský: Aby se kamínky nevydrolily – poznámka k dnešnímu stylu vědecké práce. Vesmír, 94, 197, 2015/4

F. Dostál: Někde mezi rychlou a pomalou vědou. Vesmír 96, 52, 2017/1

J. Šesták, J. Fiala, K. Gavrichev: Evaluation of the professional worth of scientific papers, their citation responding and the publication authority. J Thermal Anal Calor 2017, DOI 10.1007/s10973-017-6178-7

J. Fiala, J.J. Mareš, J. Šesták: Reflections on how to evaluate the professional worth of scientific papers and their corresponding citations. Scientometrics 2017, DOI 10.1007/s11192-017-2334-x

M. Zeman: Prognostika a přestavba, Technický magazín, srpen 1989

Autor: | čtvrtek 27.7.2017 9:54 | karma článku: 9.78 | přečteno: 251x

Další články blogera

Má předhánění se o lithium v naší politice reálný základ?

V poslední době se nám tu rozmohl takový nešvar. Ano, mluvím o všech těch fantasmagorických plánech na těžbu lithia, s nimiž přicházejí naši politici (naposledy šestého října Andrej Babiš).

9.10.2017 v 10:04 | Karma článku: 23.43 | Přečteno: 1848 | Diskuse

Jeden dovolenkový deň alebo ako sme trénovali na polmaratón

Skoré letné popoludnie, krásne slnečné počasie, dovolenka. Ideálna kombinácia. Plán žiadny a tak padol návrh - poďme na huby, možno už rastú.

27.8.2017 v 11:43 | Karma článku: 4.11 | Přečteno: 127 | Diskuse

Jak se v Evropě za Čechy nestydět

Jsou evropští politici popírači matematiky, biologie a zeměpisu? ... Blogy na idnes.cz už pár let nečtu. Od doby, kdy se postupně z velké části staly naříkárnou ze všech stran domněle ohrožovaných jedinců.

1.8.2017 v 10:14 | Karma článku: 37.16 | Přečteno: 8756 | Diskuse

Další články z rubriky Věda

Marián Kapolka

Polemiky o evolúcii-8.Bunkový genóm ako báseň. Posunieme „hranice“ života?

Ukázalo sa, že na procesy genetických zmien je možné, ba nutné, aplikovať princípy informatiky a kombinatoriky. Aké sú niektoré závery týchto empirických vied pre biológiu? - Je živá už molekula RNA? Kde vlastne začína život?

16.10.2017 v 17:08 | Karma článku: 0.00 | Přečteno: 76 | Diskuse

Jan Fikáček

Dnešní fyzice trochu chybí.... fyzika, aneb proč je matematika někdy fyzikálně slepá

Matematika je náš nejlepší "smysl", kterým vidíme nejhlouběji do světa elementárních částic, či nejostřeji do minulosti vesmíru. Tento superiorní "smysl" má ale, bohužel, i své "optické klamy" a nedostatky.

16.10.2017 v 9:07 | Karma článku: 18.93 | Přečteno: 476 | Diskuse

Dana Tenzler

Proč jsou stopy v mokrém písku nakrátko suché?

Když se procházíte po mokrém písku, můžete si všimnout zajímavého jevu. Písek, na kterém právě stojíte, se zdá být světlejší a sušší než zbytek pláže. Je to trik nebo optický klam? (délka blogu 5 min.)

16.10.2017 v 8:00 | Karma článku: 22.82 | Přečteno: 477 | Diskuse

Dana Tenzler

Proč vlastně fungují – přesýpací hodiny?

Co mají přesýpací hodiny společného s klenbou kostela – a proč vlastně fungují tak, jak fungují? (blog je dnes kratší, ca. 2 min.)

12.10.2017 v 8:00 | Karma článku: 26.85 | Přečteno: 833 | Diskuse

Marián Kapolka

Polemiky o evolúcii–7. Haeckelov „zločin“ alebo: Škandalózna nevedomosť či „farizejstvo“?

Keď mal Darwin problém a jeho teória sa ocitla v úzkych kvôli objavom v paleontológii a s tým súvisiacou myšlienkou homológií, domnieval sa, že najlepšie podporia jeho teóriu údajné dôkazy z vtedajších poznatkov embryológie.

9.10.2017 v 17:50 | Karma článku: 7.83 | Přečteno: 151 |
Počet článků 767 Celková karma 0.00 Průměrná čtenost 1832
První pokus


Najdete na iDNES.cz

mobilní verze
© 1999–2017 MAFRA, a. s., a dodavatelé Profimedia, Reuters, ČTK, AP. Jakékoliv užití obsahu včetně převzetí, šíření či dalšího zpřístupňování článků a fotografií je bez souhlasu MAFRA, a. s., zakázáno. Provozovatelem serveru iDNES.cz je MAFRA, a. s., se sídlem
Karla Engliše 519/11, 150 00 Praha 5, IČ: 45313351, zapsaná v obchodním rejstříku vedeném Městským soudem v Praze, oddíl B, vložka 1328. Vydavatelství MAFRA, a. s., je členem koncernu AGROFERT.