SlideShare une entreprise Scribd logo
1  sur  18
Télécharger pour lire hors ligne
Využití bibliometrických
ukazatelů v řízení
výzkumné instituce
Daniel Münich
MŠMT
KRE 14: Strategické řízení výzkumu a role bibliometrických údajů:
9. – 10. října 2014
National Technical Library
www.metodika.reformy-msmt.cz
http://www.techlib.cz/cs/82734-kre-14#tab_program
Osnova prezentace
1. Není hodnocení jako hodnocení
2. Bibliometrie je dobrý sluha
špatný pán
3. Příklady
Different evaluations and purposes
• Hodnocení projektů a grantů
• Ex-ante, ex-post
• Hodnocení programů podpory VaV
• Ex-ante, interim, ex-post
• Hodnocení velkých (sdílených) infrastruktur
• Ex-ante, interim, ex-post
• Hodnocení zapojení země do mezinárodních sítí VaV
• Hodnocení v institucích VaV (v.v.i.)
• průběžné / ad-hoc
• VaV nebo i vzdělávání?
• externí / interní (internal governance)
Institucionální hodnocení (rozlišujme!)
• Úroveň hodnocení
• vysoká škola, součást, katedra, tým, jednotlivci
• ústav / pracoviště, tým, oddělení, jednotlivci
• Dimenze hodnocení
• úroveň vstupů (lidé, peníze, zařízení) x
• řízení / fungování (internal governance) x
• vize rozvoje x
• výstupy !
Bibliometrie informuje o
• Počtu a kvalitě publikací (v časopisech a sbornících; WoS/Scopus)
• Rozsahu a kvalitě akademického ohlasu (citace)
• Rozsahu a kvalitě spolupráce a mobility
• Mezioborovosti
Zásady bibliometrického hodnocení
• Vypovídací schopnost a věrohodnost podmiňuje
• kvalita vstupních dat (ověření a ověřitelnost)
• adekvátní zohlednění oborových specifik
• adekvátní benchmarking (srovnávat srovnatelné)
• Ukazovat spíše výkon (tj. počty výstupů)
• než produktivitu (výstupy/vstupy)
• Sledovat spíše profil (distribuci) indikátorů a ne průměry
• RCIO
Bibliometrie vs. peer-review výstupů
• Kvalita a význam výsledků výzkumu je zatížena neurčitostí
• stochastický (chybovost) element nelze vyloučit,
• ale lze ho redukovat počtem pozorování,
• ale pozorování jsou drahá  nutný kompromis
• -> využití zákona velkých čísel a kombinace metod
• impaktní faktor čas ~ renomé & náročnost peer-review ~ odhad kvality/významu
• citovanost ~ ohlas akademické komunity ~ odhad kvality / významu
• dodatečné peer-review ~ zlepšení odhadu (snížení míry chybovosti)
Příklad bibliometrické opory
inst. hodnocení (pracovní verze pro hodnocení AV ČR)
Příklad bibliometrické opory
inst. hodnocení (pracovní verze pro hodnocení AV ČR)
Příklad bibliometrické opory
inst. hodnocení (pracovní verze pro hodnocení AV ČR)
Příklad bibliometrické opory
inst. hodnocení (pracovní verze pro hodnocení AV ČR)
Příklad bibliometrické opory
inst. hodnocení (pracovní verze pro hodnocení AV ČR)
Příklad bibliometrické opory
inst. hodnocení (pracovní verze pro hodnocení AV ČR)
Příklad bibliometrické opory
Different evaluations and purposes
Pozor na !
• Malá čísla
• Sebecitovanost
• samotných autorů a spřízněnců
• časopisů a jejich svazků (zvyšuje IF)
• Publikace ve spřízněných časopisech a sbornících
• Velké megakolaborace = velké autorské týmy
• Vedlejší role spoluautorů
• Malé obory
• Obory nedostatečně pokryté WoS a Scopus
• ….
www.metodika.reformy-msmt.cz
Děkuji za pozornost

Contenu connexe

Similaire à Využití bibliometrických ukazatelů v řízení výzkumné instituce (Daniel Münich, MŠMT)

Externí hodnocení kvality na VŠ s využitím názoru studentů
Externí hodnocení kvality na VŠ s využitím názoru studentůExterní hodnocení kvality na VŠ s využitím názoru studentů
Externí hodnocení kvality na VŠ s využitím názoru studentůMŠMT IPN KVALITA
 
Metodika pro periodické hodnocení akademických pracovníků
Metodika pro periodické hodnocení akademických pracovníkůMetodika pro periodické hodnocení akademických pracovníků
Metodika pro periodické hodnocení akademických pracovníkůMŠMT IPN KVALITA
 
Research Evaluation -Approaches and Methods
Research Evaluation -Approaches and MethodsResearch Evaluation -Approaches and Methods
Research Evaluation -Approaches and MethodsMEYS, MŠMT in Czech
 
Základní informace o projektu / Závěrečná konference
Základní informace o projektu / Závěrečná konferenceZákladní informace o projektu / Závěrečná konference
Základní informace o projektu / Závěrečná konferenceMŠMT IPN KVALITA
 
Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za léta 2010–2014
Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za léta 2010–2014Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za léta 2010–2014
Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za léta 2010–2014MEYS, MŠMT in Czech
 
IPN „Zajišťování a hodnocení kvality vsystému terciárního vzdělávání“
IPN „Zajišťování a hodnocení kvality vsystému terciárního vzdělávání“IPN „Zajišťování a hodnocení kvality vsystému terciárního vzdělávání“
IPN „Zajišťování a hodnocení kvality vsystému terciárního vzdělávání“MŠMT IPN KVALITA
 
Úvod k metodikám IPN KVALITA
Úvod k metodikám IPN KVALITAÚvod k metodikám IPN KVALITA
Úvod k metodikám IPN KVALITAMŠMT IPN KVALITA
 
Hodnocení VaVaI a role IPN Metodika
Hodnocení VaVaI a role IPN MetodikaHodnocení VaVaI a role IPN Metodika
Hodnocení VaVaI a role IPN MetodikaMEYS, MŠMT in Czech
 
Ověřování metodiky komplexního hodnocení kvality na vybraných VŠ v České rep...
Ověřování metodiky komplexního hodnocení kvality na vybraných VŠ v České rep...Ověřování metodiky komplexního hodnocení kvality na vybraných VŠ v České rep...
Ověřování metodiky komplexního hodnocení kvality na vybraných VŠ v České rep...MŠMT IPN KVALITA
 
Hlavní úkol č. 4 – Strategické priority
Hlavní úkol č. 4 – Strategické priorityHlavní úkol č. 4 – Strategické priority
Hlavní úkol č. 4 – Strategické priorityMŠMT IPN KREDO
 
Prezentace IPN Metodika na zasedání České konference rektorů 4. 12. 2014 v Brně
Prezentace IPN Metodika na zasedání České konference rektorů 4. 12. 2014 v BrněPrezentace IPN Metodika na zasedání České konference rektorů 4. 12. 2014 v Brně
Prezentace IPN Metodika na zasedání České konference rektorů 4. 12. 2014 v BrněMEYS, MŠMT in Czech
 
Metodika vnitřního hodnocení kvality ITV/VŠ
Metodika vnitřního hodnocení kvality ITV/VŠMetodika vnitřního hodnocení kvality ITV/VŠ
Metodika vnitřního hodnocení kvality ITV/VŠMŠMT IPN KVALITA
 

Similaire à Využití bibliometrických ukazatelů v řízení výzkumné instituce (Daniel Münich, MŠMT) (20)

Externí hodnocení kvality na VŠ s využitím názoru studentů
Externí hodnocení kvality na VŠ s využitím názoru studentůExterní hodnocení kvality na VŠ s využitím názoru studentů
Externí hodnocení kvality na VŠ s využitím názoru studentů
 
Metodika pro periodické hodnocení akademických pracovníků
Metodika pro periodické hodnocení akademických pracovníkůMetodika pro periodické hodnocení akademických pracovníků
Metodika pro periodické hodnocení akademických pracovníků
 
Research Evaluation -Approaches and Methods
Research Evaluation -Approaches and MethodsResearch Evaluation -Approaches and Methods
Research Evaluation -Approaches and Methods
 
Základní informace o projektu / Závěrečná konference
Základní informace o projektu / Závěrečná konferenceZákladní informace o projektu / Závěrečná konference
Základní informace o projektu / Závěrečná konference
 
Metody hodnocení VaV
Metody hodnocení VaVMetody hodnocení VaV
Metody hodnocení VaV
 
Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za léta 2010–2014
Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za léta 2010–2014Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za léta 2010–2014
Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za léta 2010–2014
 
IPN „Zajišťování a hodnocení kvality vsystému terciárního vzdělávání“
IPN „Zajišťování a hodnocení kvality vsystému terciárního vzdělávání“IPN „Zajišťování a hodnocení kvality vsystému terciárního vzdělávání“
IPN „Zajišťování a hodnocení kvality vsystému terciárního vzdělávání“
 
Úvod k metodikám IPN KVALITA
Úvod k metodikám IPN KVALITAÚvod k metodikám IPN KVALITA
Úvod k metodikám IPN KVALITA
 
Hodnocení VaVaI a role IPN Metodika
Hodnocení VaVaI a role IPN MetodikaHodnocení VaVaI a role IPN Metodika
Hodnocení VaVaI a role IPN Metodika
 
Kafe FA
Kafe FAKafe FA
Kafe FA
 
Ověřování metodiky komplexního hodnocení kvality na vybraných VŠ v České rep...
Ověřování metodiky komplexního hodnocení kvality na vybraných VŠ v České rep...Ověřování metodiky komplexního hodnocení kvality na vybraných VŠ v České rep...
Ověřování metodiky komplexního hodnocení kvality na vybraných VŠ v České rep...
 
Měření spokojenosti v knihovnách
Měření spokojenosti v knihovnáchMěření spokojenosti v knihovnách
Měření spokojenosti v knihovnách
 
Kafe FSI
Kafe FSIKafe FSI
Kafe FSI
 
Kafe FSI
Kafe FSIKafe FSI
Kafe FSI
 
Hlavní úkol č. 4 – Strategické priority
Hlavní úkol č. 4 – Strategické priorityHlavní úkol č. 4 – Strategické priority
Hlavní úkol č. 4 – Strategické priority
 
Prezentace IPN Metodika na zasedání České konference rektorů 4. 12. 2014 v Brně
Prezentace IPN Metodika na zasedání České konference rektorů 4. 12. 2014 v BrněPrezentace IPN Metodika na zasedání České konference rektorů 4. 12. 2014 v Brně
Prezentace IPN Metodika na zasedání České konference rektorů 4. 12. 2014 v Brně
 
Metodika vnitřního hodnocení kvality ITV/VŠ
Metodika vnitřního hodnocení kvality ITV/VŠMetodika vnitřního hodnocení kvality ITV/VŠ
Metodika vnitřního hodnocení kvality ITV/VŠ
 
Kafe fss
Kafe fssKafe fss
Kafe fss
 
Publikační proces a Open Access
Publikační proces a Open AccessPublikační proces a Open Access
Publikační proces a Open Access
 
Vykazování výsledků vědecké práce
Vykazování výsledků vědecké práceVykazování výsledků vědecké práce
Vykazování výsledků vědecké práce
 

Plus de Národní technická knihovna (NTK)

Rešeršní služby v komerčním sektoru (Martin Mlčoch, nezávislý konzultant)
Rešeršní služby v komerčním sektoru (Martin Mlčoch, nezávislý konzultant)Rešeršní služby v komerčním sektoru (Martin Mlčoch, nezávislý konzultant)
Rešeršní služby v komerčním sektoru (Martin Mlčoch, nezávislý konzultant)Národní technická knihovna (NTK)
 
Speciální informační služby pro zdravotníky v Národní lékařské knihovně (Mgr....
Speciální informační služby pro zdravotníky v Národní lékařské knihovně (Mgr....Speciální informační služby pro zdravotníky v Národní lékařské knihovně (Mgr....
Speciální informační služby pro zdravotníky v Národní lékařské knihovně (Mgr....Národní technická knihovna (NTK)
 
Rešeršní služby v NK ČR (Mgr. Karolína Košťálová, NK ČR)
 Rešeršní služby v NK ČR (Mgr. Karolína Košťálová, NK ČR)  Rešeršní služby v NK ČR (Mgr. Karolína Košťálová, NK ČR)
Rešeršní služby v NK ČR (Mgr. Karolína Košťálová, NK ČR) Národní technická knihovna (NTK)
 
Model rešeršních služeb v NTK (Bc. Drahomíra Dvořáková, NTK)
 Model rešeršních služeb v NTK (Bc. Drahomíra Dvořáková, NTK)  Model rešeršních služeb v NTK (Bc. Drahomíra Dvořáková, NTK)
Model rešeršních služeb v NTK (Bc. Drahomíra Dvořáková, NTK) Národní technická knihovna (NTK)
 
Rešeršní služby Bibliografie dějin Českých zemí v Historickém ústavu AV ČR (M...
Rešeršní služby Bibliografie dějin Českých zemí v Historickém ústavu AV ČR (M...Rešeršní služby Bibliografie dějin Českých zemí v Historickém ústavu AV ČR (M...
Rešeršní služby Bibliografie dějin Českých zemí v Historickém ústavu AV ČR (M...Národní technická knihovna (NTK)
 
Co znamená, že Google o nás ví víc než my sami; aneb zaprodáme duši vyhledáva...
Co znamená, že Google o nás ví víc než my sami; aneb zaprodáme duši vyhledáva...Co znamená, že Google o nás ví víc než my sami; aneb zaprodáme duši vyhledáva...
Co znamená, že Google o nás ví víc než my sami; aneb zaprodáme duši vyhledáva...Národní technická knihovna (NTK)
 
Co se skrývá za vyhledáváním v katalogu NTK (Kristýna Busch, Eliška Veselá)
Co se skrývá za vyhledáváním v katalogu NTK (Kristýna Busch, Eliška Veselá)Co se skrývá za vyhledáváním v katalogu NTK (Kristýna Busch, Eliška Veselá)
Co se skrývá za vyhledáváním v katalogu NTK (Kristýna Busch, Eliška Veselá)Národní technická knihovna (NTK)
 
PSH na Univerzitě Pardubice (Lukáš Slánský, Tomáš Bartoníček)
PSH na Univerzitě Pardubice (Lukáš Slánský, Tomáš Bartoníček)PSH na Univerzitě Pardubice (Lukáš Slánský, Tomáš Bartoníček)
PSH na Univerzitě Pardubice (Lukáš Slánský, Tomáš Bartoníček)Národní technická knihovna (NTK)
 
Jak dokumentům automaticky přiřadit hesla PSH (Jindřich Mynarz, Ctibor Škuta)
Jak dokumentům automaticky přiřadit hesla PSH (Jindřich Mynarz, Ctibor Škuta)Jak dokumentům automaticky přiřadit hesla PSH (Jindřich Mynarz, Ctibor Škuta)
Jak dokumentům automaticky přiřadit hesla PSH (Jindřich Mynarz, Ctibor Škuta)Národní technická knihovna (NTK)
 

Plus de Národní technická knihovna (NTK) (20)

Rozhraní VPK
Rozhraní VPKRozhraní VPK
Rozhraní VPK
 
Šmankote, co je to NUŠL? (aktualizovaná verze 2014)
Šmankote, co je to NUŠL? (aktualizovaná verze 2014)Šmankote, co je to NUŠL? (aktualizovaná verze 2014)
Šmankote, co je to NUŠL? (aktualizovaná verze 2014)
 
Rešeršní služby v komerčním sektoru (Martin Mlčoch, nezávislý konzultant)
Rešeršní služby v komerčním sektoru (Martin Mlčoch, nezávislý konzultant)Rešeršní služby v komerčním sektoru (Martin Mlčoch, nezávislý konzultant)
Rešeršní služby v komerčním sektoru (Martin Mlčoch, nezávislý konzultant)
 
Speciální informační služby pro zdravotníky v Národní lékařské knihovně (Mgr....
Speciální informační služby pro zdravotníky v Národní lékařské knihovně (Mgr....Speciální informační služby pro zdravotníky v Národní lékařské knihovně (Mgr....
Speciální informační služby pro zdravotníky v Národní lékařské knihovně (Mgr....
 
Rešeršní služby v NK ČR (Mgr. Karolína Košťálová, NK ČR)
 Rešeršní služby v NK ČR (Mgr. Karolína Košťálová, NK ČR)  Rešeršní služby v NK ČR (Mgr. Karolína Košťálová, NK ČR)
Rešeršní služby v NK ČR (Mgr. Karolína Košťálová, NK ČR)
 
Legislativní rámec rešerší (Mgr. Alena Pavelová, NTK)
Legislativní rámec rešerší (Mgr. Alena Pavelová, NTK) Legislativní rámec rešerší (Mgr. Alena Pavelová, NTK)
Legislativní rámec rešerší (Mgr. Alena Pavelová, NTK)
 
Model rešeršních služeb v NTK (Bc. Drahomíra Dvořáková, NTK)
 Model rešeršních služeb v NTK (Bc. Drahomíra Dvořáková, NTK)  Model rešeršních služeb v NTK (Bc. Drahomíra Dvořáková, NTK)
Model rešeršních služeb v NTK (Bc. Drahomíra Dvořáková, NTK)
 
Rešeršní služby Bibliografie dějin Českých zemí v Historickém ústavu AV ČR (M...
Rešeršní služby Bibliografie dějin Českých zemí v Historickém ústavu AV ČR (M...Rešeršní služby Bibliografie dějin Českých zemí v Historickém ústavu AV ČR (M...
Rešeršní služby Bibliografie dějin Českých zemí v Historickém ústavu AV ČR (M...
 
Novinky ve vyhledávání Seznam .cz (Otakar Smrž)
Novinky ve vyhledávání Seznam .cz (Otakar Smrž)Novinky ve vyhledávání Seznam .cz (Otakar Smrž)
Novinky ve vyhledávání Seznam .cz (Otakar Smrž)
 
Co znamená, že Google o nás ví víc než my sami; aneb zaprodáme duši vyhledáva...
Co znamená, že Google o nás ví víc než my sami; aneb zaprodáme duši vyhledáva...Co znamená, že Google o nás ví víc než my sami; aneb zaprodáme duši vyhledáva...
Co znamená, že Google o nás ví víc než my sami; aneb zaprodáme duši vyhledáva...
 
Vyhledávání hudbou: YouTube trochu jinak (Ondřej Voců)
Vyhledávání hudbou: YouTube trochu jinak (Ondřej Voců)Vyhledávání hudbou: YouTube trochu jinak (Ondřej Voců)
Vyhledávání hudbou: YouTube trochu jinak (Ondřej Voců)
 
Co se skrývá za vyhledáváním v katalogu NTK (Kristýna Busch, Eliška Veselá)
Co se skrývá za vyhledáváním v katalogu NTK (Kristýna Busch, Eliška Veselá)Co se skrývá za vyhledáváním v katalogu NTK (Kristýna Busch, Eliška Veselá)
Co se skrývá za vyhledáváním v katalogu NTK (Kristýna Busch, Eliška Veselá)
 
Postery ntk
Postery ntkPostery ntk
Postery ntk
 
Referenční služby NK ČR (Lenka Válková)
Referenční služby NK ČR (Lenka Válková)Referenční služby NK ČR (Lenka Válková)
Referenční služby NK ČR (Lenka Válková)
 
Referenční služby v kostce (Drahomíra Dvořáková))
Referenční služby v kostce (Drahomíra Dvořáková))Referenční služby v kostce (Drahomíra Dvořáková))
Referenční služby v kostce (Drahomíra Dvořáková))
 
HTML5 (Štěpán Bechynský)
HTML5 (Štěpán Bechynský)HTML5 (Štěpán Bechynský)
HTML5 (Štěpán Bechynský)
 
PSH na Univerzitě Pardubice (Lukáš Slánský, Tomáš Bartoníček)
PSH na Univerzitě Pardubice (Lukáš Slánský, Tomáš Bartoníček)PSH na Univerzitě Pardubice (Lukáš Slánský, Tomáš Bartoníček)
PSH na Univerzitě Pardubice (Lukáš Slánský, Tomáš Bartoníček)
 
Podobnostní hledání v netextových datech (Pavel Zezula)
Podobnostní hledání v netextových datech (Pavel Zezula)Podobnostní hledání v netextových datech (Pavel Zezula)
Podobnostní hledání v netextových datech (Pavel Zezula)
 
Jak dokumentům automaticky přiřadit hesla PSH (Jindřich Mynarz, Ctibor Škuta)
Jak dokumentům automaticky přiřadit hesla PSH (Jindřich Mynarz, Ctibor Škuta)Jak dokumentům automaticky přiřadit hesla PSH (Jindřich Mynarz, Ctibor Škuta)
Jak dokumentům automaticky přiřadit hesla PSH (Jindřich Mynarz, Ctibor Škuta)
 
Staré portály pražské (IV.)
Staré portály pražské (IV.)Staré portály pražské (IV.)
Staré portály pražské (IV.)
 

Využití bibliometrických ukazatelů v řízení výzkumné instituce (Daniel Münich, MŠMT)

  • 1. Využití bibliometrických ukazatelů v řízení výzkumné instituce Daniel Münich MŠMT KRE 14: Strategické řízení výzkumu a role bibliometrických údajů: 9. – 10. října 2014 National Technical Library www.metodika.reformy-msmt.cz http://www.techlib.cz/cs/82734-kre-14#tab_program
  • 2. Osnova prezentace 1. Není hodnocení jako hodnocení 2. Bibliometrie je dobrý sluha špatný pán 3. Příklady
  • 3. Different evaluations and purposes • Hodnocení projektů a grantů • Ex-ante, ex-post • Hodnocení programů podpory VaV • Ex-ante, interim, ex-post • Hodnocení velkých (sdílených) infrastruktur • Ex-ante, interim, ex-post • Hodnocení zapojení země do mezinárodních sítí VaV • Hodnocení v institucích VaV (v.v.i.) • průběžné / ad-hoc • VaV nebo i vzdělávání? • externí / interní (internal governance)
  • 4. Institucionální hodnocení (rozlišujme!) • Úroveň hodnocení • vysoká škola, součást, katedra, tým, jednotlivci • ústav / pracoviště, tým, oddělení, jednotlivci • Dimenze hodnocení • úroveň vstupů (lidé, peníze, zařízení) x • řízení / fungování (internal governance) x • vize rozvoje x • výstupy !
  • 5. Bibliometrie informuje o • Počtu a kvalitě publikací (v časopisech a sbornících; WoS/Scopus) • Rozsahu a kvalitě akademického ohlasu (citace) • Rozsahu a kvalitě spolupráce a mobility • Mezioborovosti
  • 6. Zásady bibliometrického hodnocení • Vypovídací schopnost a věrohodnost podmiňuje • kvalita vstupních dat (ověření a ověřitelnost) • adekvátní zohlednění oborových specifik • adekvátní benchmarking (srovnávat srovnatelné) • Ukazovat spíše výkon (tj. počty výstupů) • než produktivitu (výstupy/vstupy) • Sledovat spíše profil (distribuci) indikátorů a ne průměry • RCIO
  • 7. Bibliometrie vs. peer-review výstupů • Kvalita a význam výsledků výzkumu je zatížena neurčitostí • stochastický (chybovost) element nelze vyloučit, • ale lze ho redukovat počtem pozorování, • ale pozorování jsou drahá  nutný kompromis • -> využití zákona velkých čísel a kombinace metod • impaktní faktor čas ~ renomé & náročnost peer-review ~ odhad kvality/významu • citovanost ~ ohlas akademické komunity ~ odhad kvality / významu • dodatečné peer-review ~ zlepšení odhadu (snížení míry chybovosti)
  • 8. Příklad bibliometrické opory inst. hodnocení (pracovní verze pro hodnocení AV ČR)
  • 9. Příklad bibliometrické opory inst. hodnocení (pracovní verze pro hodnocení AV ČR)
  • 10. Příklad bibliometrické opory inst. hodnocení (pracovní verze pro hodnocení AV ČR)
  • 11. Příklad bibliometrické opory inst. hodnocení (pracovní verze pro hodnocení AV ČR)
  • 12. Příklad bibliometrické opory inst. hodnocení (pracovní verze pro hodnocení AV ČR)
  • 13. Příklad bibliometrické opory inst. hodnocení (pracovní verze pro hodnocení AV ČR)
  • 16.
  • 17. Pozor na ! • Malá čísla • Sebecitovanost • samotných autorů a spřízněnců • časopisů a jejich svazků (zvyšuje IF) • Publikace ve spřízněných časopisech a sbornících • Velké megakolaborace = velké autorské týmy • Vedlejší role spoluautorů • Malé obory • Obory nedostatečně pokryté WoS a Scopus • ….