Bibliometri i studier av forskning

Transkript

1 3,0 2,5 Sweden 2,0 Denmark 1,5 1,0 Finland 0,5 Norway 0,0 Bibliometri i studier av forskning Gunnar Sivertsen

2 Oversikt 1. Hva er bibliometri? 2. Eksempler på undersøkelser av: Forskningsaktivitet Fagprofiler Gjennomslagskraft i senere forskning Forskningssamarbeid 3. Bibliometri for to formål: Forskningsevaluering Forskningsfinansiering (hva skjer med BFI?)

3 Oversikt 1. Hva er bibliometri? 2. Eksempler på undersøkelser av: Forskningsaktivitet Fagprofiler Gjennomslagskraft i senere forskning Forskningssamarbeid 3. Bibliometri for to formål: Forskningsevaluering Forskningsfinansiering (hva skjer med BFI?)

4 Bibliografiske datakilder brukes vanligvis til å søke og gjenfinne forskningslitteratur Bibliografiske datakilder Publikasjoner Publikasjoner Forskere som forfattere Forskere som lesere

5 Kan også brukes til å studere selve forskningen som ligger bak publikasjonen Bibliografiske datakilder Publikasjoner Publikasjoner Forskere som forfattere Forskere som lesere

6 I studier av forskning er bibliometri: Kvantitative studier av forskning som benytter bibliografiske datakilder Bibliografiske datakilder Publikasjoner Publikasjoner Forskere som forfattere Forskere som lesere

7 Forskning skal publiseres. Altså kan forskning studeres der den «kommer til syne» i publikasjonene Bibliografiske datakilder Publikasjoner Publikasjoner Forskere som forfattere Forskere som lesere

8 Forskere skal oppgi relevante referanser. Altså kan vi studere i hvilken grad forskning siteres i senere forskning. Bibliografiske datakilder Publikasjoner Publikasjoner Forskere som forfattere Forskere som lesere

9 Når flere forskere publiserer sammen, kan vi også studere forskningssamarbeid Publikasjoner Publikasjoner Forskere som forfattere Forskere som lesere

10 Oversikt 1. Hva er bibliometri? 2. Eksempler på undersøkelser av: Forskningsaktivitet Fagprofiler Gjennomslagskraft i senere forskning Forskningssamarbeid 3. Bibliometri for to formål: Forskningsevaluering Forskningsfinansiering (hva skjer med BFI?)

11

12

13 J. Søndergaard et.al. (2010): Vi ønsker mere faglig debat om den bibliometriske forskningsindikator, Ugeskrift for Læger, 172, 12, p. 984.

14

15

16 Data i en siteringsindeks: 1. Allminnelige metadata

17 Data i en siteringsindeks: 2. Samtlige forfatteradresser!

18 Data i en siteringsindeks: 3. Klassifisering av fag, språk og dokumenttype

19 Data i en siteringsindeks: 4. Hele referanselisten!

20 Noen referanser kan lenkes til allerede indekserte artikler

21 Andre referanser kan ikke lenkes

22 Gjennomsnittlig antall siteringer varierer mellom fagfelt CELL BIOLOGY NUCLEAR PHYSICS IMMUNOLOGY BEHAVIORAL SCIENCES GEOLOGY PSYCHOLOGY ECONOMICS POLITICAL SCIENCE MATHEMATICS LINGUISTICS PHILOSOPHY HISTORY

23 Data i en siteringsindeks: 5. Siteringer fra senere artikler!

24 Fire ting som ofte måles og undersøkes i bibliometriske studier av forskning Forskningsaktivitet Fagprofil Gjennomslagskraft Forskningssamarbeid Publikasjoner pr. forskningsenhet Publikasjoner pr. fagfelt Siteringer til publikasjonene Adresser i publikasjoner

25 Fire ting som ofte måles og undersøkes i bibliometriske studier av forskning Forskningsaktivitet Fagprofil Gjennomslagskraft Forskningssamarbeid Publikasjoner pr. forskningsenhet Publikasjoner pr. fagfelt Siteringer til publikasjonene Adresser i publikasjoner

26 Data i en siteringsindeks: 2. Samtlige forfatteradresser!

27 Andeler av verdens artikler (ISI Web of Science ) Source: National Science Indicators (NSI), Thomson Reuters 2,5 % 2,0 % Sweden 1,5 % Denmark 1,0 % Finland 0,5 % Norway 0,0 %

28 Artikler pr innbyggere (ISI Web of Science ) Source: National Science Indicators (NSI), Thomson Reuters 3,0 2,5 Sweden 2,0 Denmark 1,5 1,0 Finland 0,5 Norway 0,

29 Fire ting som ofte måles og undersøkes i bibliometriske studier av forskning Forskningsaktivitet Fagprofil Gjennomslagskraft Forskningssamarbeid Publikasjoner pr. forskningsenhet Publikasjoner pr. fagfelt Siteringer til publikasjonene Adresser i publikasjoner

30 Data i en siteringsindeks: 3. Klassifisering av fag, språk og dokumenttype

31 Overview Research profiles Publication activity Citation impact

32 Two Danish universities (excl. university hospitals) Relative Specialization Index (RSI, red) compared to the world (blue) Aarhus University Aalborg University Physics & Math Other0,5 Agriculture, 1 0-0,5-1 Biology Biomedicine Physics & Math Other0,5 Agriculture, 1 0-0,5-1 Biology Biomedicine Health Sciences Chemistry Health Chemistry Geosciences Engineering & Geosciences Engineering

33

34 Fire ting som ofte måles og undersøkes i bibliometriske studier av forskning Forskningsaktivitet Fagprofil Gjennomslagskraft Forskningssamarbeid Publikasjoner pr. forskningsenhet Publikasjoner pr. fagfelt Siteringer til publikasjonene Adresser i publikasjoner

35 Data i en siteringsindeks: 5. Siteringer fra senere artikler!

36 Field normalizedcitationrates Major universities Technical Univ of Denmark Aarhus Univ Stockholm Univ Univ of Copenhagen Karolinska Institutet Univ of Southern Denmark Swedish Univ of Agricultural Sci Univ of Helsinki Univ of Gothenburg Uppsala Univ Lund Univ Univ of Oslo Chalmers Univ of Technology Norwegian Univ of Sci and Tech Aalborg Univ Linköping Univ Umeå Univ Royal Institute of Technology Univ of Bergen Aalto Univ Univ of Iceland Univ of Jyväskylä Univ of Tromsø Univ of Eastern Finland Univ of Turku Univ of Oulu 0,00 0,20 0,40 0,60 0,80 1,00 1,20 1,40 1,60 1,80

37 Sharein 10 per cent most citedarticles. Field normalized. 1,50 1,40 1,30 1,20 «The Danish Wonder» 1,10 1,00 0,90 0,80 0,70 0,60 Denmark Finland Iceland Norway Sweden World

38 Relativ siteringsindeks Source: National Science Indicators (NSI), Thomson Reuters 1,7 1,5 1,3 1,1 0,9 0,7 0,5 0,3 Danmark Finland Norge Sverige Verden

39 Fire ting som ofte måles og undersøkes i bibliometriske studier av forskning Forskningsaktivitet Fagprofil Gjennomslagskraft Forskningssamarbeid Publikasjoner pr. forskningsenhet Publikasjoner pr. fagfelt Siteringer til publikasjonene Adresser i publikasjoner

40 Data i en siteringsindeks: 2. Samtlige forfatteradresser!

41 Norske Web ofscience-artikler med og uten internasjonalt samarbeid Med internasjonalt samarbeid Uten internasjonalt samarbeid

42 Hvor er samarbeidet? EU utenom Norden Nord-Amerika Andre Norden internt

43 Oversikt 1. Hva er bibliometri? 2. Eksempler på undersøkelser av: Forskningsaktivitet Fagprofiler Gjennomslagskraft i senere forskning Forskningssamarbeid 3. Bibliometri for to formål: Forskningsevaluering Forskningsfinansiering (hva skjer med BFI?)

44 Peer review and bibliometric methods Bibliometrics may inform, but not replace peer review

45 Peer review and bibliometric methods But we are not covered!!!

46 Books Indexed journals Journals and series 100% 90% 80% Scopus ISI Web of Science 70% 60% 50% 40% 30% 20% 10% 0% Health Sciences Natural Sciences Engineering Social Sciences Humanities

47 Levels of analysis Countries Institutions or Organizations Departments Research Groups Individuals

48 An example of discussion and disagreement Empirical evidence shows that for the natural and formal sciences, the bibliometric methodology is by far preferable to peer-review. Setting up national databases of publications by individual authors, derived from Web of Science or Scopus databases, would allow much better, cheaper and more frequent national research assessments. Giovanni Abramo & Ciriaco Andrea D Angelo: Evaluating research: from informed peer review to bibliometrics, Scientometrics (2011) 87:

49 An example of discussion and disagreement Empirical evidence shows that for the natural and formal sciences, the bibliometric methodology is by far preferable to peer-review. Setting up national databases of publications by individual authors, derived from Web of Science or Scopus databases, would allow much better, cheaper and more frequent national research assessments. Giovanni Abramo & Ciriaco Andrea D Angelo: Evaluating research: from informed peer review to bibliometrics, Scientometrics (2011) 87: Bibliometrics are not independent of peer review assessment. The correlation between peer assessment and bibliometric indicators is significant but not perfect. Peer review should be integrated with bibliometricindicators in national assessment exercises. Massimo Franceschet and Antonio Costantini. The first Italian research assessment exercise: a bibliometric perspective. Journal of Informetrics (2011) 5(2):

50 Oversikt 1. Hva er bibliometri? 2. Eksempler på undersøkelser av: Forskningsaktivitet Fagprofiler Gjennomslagskraft i senere forskning Forskningssamarbeid 3. Bibliometri for to formål: Forskningsevaluering Forskningsfinansiering (hva skjer med BFI?)

51

52

53

54 ?

55 Peer review and bibliometric methods But we are not covered!!!

56

57

58

59

60

61 ?

62

63