SlideShare a Scribd company logo
1 of 50
AltMetrics / Social Media Impact

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

1
1. Impact?
2. Social Media & Impact
3. AltMetrics
4. Fazit …

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

2
1. Impact?

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

3
Impact

Dimensionen
•Produktivität
•Resonanz
•Qualität
Fröhlich, G. (1999). Das Messen des leicht Meßbaren : Output-Indikatoren, Impact-Maße:
Artefakte der Szientometrie? In J. Becker & W. Göhring (Eds.), Kommunikation statt Markt : Zu
einer alternativen Theorie der Informationsgesellschaft (pp. 27–38). GMD- Forschungszentrum
Informationstechnik GmbH. Retrieved from http://eprints.rclis.org/9115/

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

4
Impact

Interpretativer Kurzschluss:

Impact = Qualität = Resonanz = Zitationshäufigkeiten/-raten

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

5
Impact

„In fact, we do not even have a workable definition of the notion
of ‘scientific impact’ itself, unless we revert to the tautology of
defining it as the number of citations received by a publication.”
Bollen, J., Van De Sompel, H., Hagberg, A., & Chute, R. (2009). A principal component analysis
of 39 scientific impact measures. PloS one, 4(6), e6022. doi:10.1371/journal.pone.0006022

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

6
Impact

„Our results indicate that the notion of scientific impact is a
multi-dimensional construct that can not be adequately
measured by any single indicator, although some measures are
more suitable than others. The commonly used citation Impact
Factor is not positioned at the core of this construct, but at its
periphery, and should thus be used with caution.“
Bollen, J.; Van De Sompel, H.; Hagberg, A.; Chute, R.: A principal component analysis of 39
scientific impact measures. In: PloS one 4 (2009a), Issue 6, e6022.
DOI: 10.1371/journal.pone.0006022.

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

7
Zitationsbasierte Impact-Verfahren, JIF, H-Index Kritikpunkte, ein
Auszug:

•Begrenzter Scope
•Ausschluss kompletter Dokumentarten und nicht-textueller
Produkte (Forschungsdaten, Software, …)
•Sprachbias zugunsten englischsprachiger Journals: Zeitschriften
in anderen Sprachen haben einen niedrigeren JIF.
•Benachteiligung der Journale aus Disziplinen mit
Verwertungszyklen > 2 Jahren (z.B. Mathematik,
Geisteswissenschaften)
•leicht manipulierbar, Gaming
…

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

8
Einschätzung

•JIF und h-Index sind mängelbehaftet, zentrales Manko:
begrenzter Scope
•Elektrifizierung der wissenschaftlichen Information und des
Publizierens ermöglichen neue Techniken
•„Just as scientists would not accept the findings in a scientific
paper without seeing the primary data, so should they not rely
on Thomson Scientific's impact factor, which is based on hidden
data.“
Rossner, M., Van Epps, H., & Hill, E. (2007). Show me the data. The Journal of cell biology,
179(6), 1091–2. doi:10.1083/jcb.200711140

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

9
San Francisco Declaration on Research Assessment
(DORA)
initiiert von der American Society for Cell Biology (ASCB),
fordert Abkehr vom Journal Impact Factor zur Bewertung
wissenschaftlicher Leistung und plädiert für Article Level Metrics:
„Make available a range of article-level metrics to encourage a
shift toward assessment based on the scientific content of an
article rather than publication metrics of the journal in which it
was published.“
Stand 10.12.2013:
10.001 individuelle Unterzeichner
423 institutionelle Unterzeichner
http://am.ascb.org/dora/
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

10
2. Social Media & Impact

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

11
Beispiele: Medien & Wirtschaft

•Blockbuster-Vorhersage aus Twitter- und Wikipedia-Aktivitäten
Mestyán, M., Yasseri, T., & Kertész, J. (2013). Early prediction of movie box office success based on
Wikipedia activity big data. PloS one, 8(8), e71226. doi:10.1371/journal.pone.0071226

•Twitterfeeds sagen Aktienkurse vorher
Bollen, J., Mao, H., & Zeng, X. (2011). Twitter mood predicts the stock market.
Journal of Computational Science, 2(1), 1–8. doi:10.1016/j.jocs.2010.12.007

•Wikipedia-Disput-Index korreliert mit politischer Stabilität eines
Landes, http://www.disputeindex.org
Apic G, Betts MJ, Russell RB (2011) Content Disputes in Wikipedia Reflect Geopolitical Instability.
PLoS ONE 6(6): e20902. doi:10.1371/journal.pone.0020902,
URL: http://www.plosone.org/article/info/doi:10.1371/journal.pone.0020902

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

12
3. AltMetrics

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

13
Prinzip

Verwertung einer Vielzahl an Nutzungsereignissen wissenschaftlicher
Informationen aus heterogenen Datenquellen

http://altmetrics.org/manifesto/
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

14
AltMetrics Services

http://impactstory.org/
http://www.plumanalytics.com/
http://altmetric.com/demos/plos.html
http://almreports.plos.org/

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

15
Dashboards

Sample-Profile Carl Boettiger, http://impactstory.org/CarlBoettiger
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

16
Dashboards

Sample-Profile Carl Boettiger, http://impactstory.org/CarlBoettiger
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

17
Dashboards

Sample-Profile Carl Boettiger, http://impactstory.org/CarlBoettiger
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

18
Dashboards

Altmetric.com Scores zu Tehrani, Jamshid J.: The Phylogeny of Little Red Riding Hood
http://www.plosone.org/article/info%3Adoi%2F10.1371%2Fjournal.pone.0078871
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

19
Dashboards

Altmetric.com Scores zu Tehrani, Jamshid J.: The Phylogeny of Little Red Riding Hood
http://www.plosone.org/article/info%3Adoi%2F10.1371%2Fjournal.pone.0078871
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

20
Befunde

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

21
Altmetrics Services Befunde

Bar-Ilan (2012)
Positive Korrelation zwischen Mendeley User Counts und
Zitaten Web of Science WoS , Scopus und GoogleScholar.
Disziplin: Informationswissenschaft.
Bar-Ilan, J. (2012). JASIST@mendeley. ACM Web Science Conference 2012 Workshop.
Evanston, IL. Retrieved from http://altmetrics.org/altmetrics12/bar-ilan/

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

22
Altmetrics Services Befunde

Li & Thelwall (2012)
Positive Korrelation zwischen zwischen Mendeley User Counts
und Zitationswerten aus dem WoS, Scopus and
GoogleScholar. Disziplinen: Genomik, Genetik.
Li, X., & Thelwall, M. (2012). F1000, Mendeley and Traditional Bibliometric Indicators. 17th
International Conference on Science and Technology Indicators (Vol. 3, pp. 1–11). Retrieved
from http://2012.sticonference.org/Proceedings/vol2/Li_F1000_541.pdf

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

23
Altmetrics Services Befunde

Li, Thelwall & Giustini (2011)
Positive Korrelation zwischen Mendeley User Counts und
Zitation nach dem WoS. Basis: 1.613 in Nature und Science
im Jahr 2007 publizierte Artikel.
Li, X., Thelwall, M., & Giustini, D. (2011). Validating online reference managers for scholarly
impact measurement. Scientometrics, 91(2), 461–471. doi:10.1007/s11192-011-0580-x

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

24
Altmetrics Services Befunde

Shuai, Pepe & Bollen (2012)
Positive Korrelation zwischen Twitter Mentions und Zitationen
nach GoogleScholar
Basis: wissenschaftliche Dokumente, die als Preprints
zwischen Oktober 2010 und Mai 2011 auf dem Open Access
Repository arXiv publiziert wurden.
Shuai, X., Pepe, A., & Bollen, J. (2012). How the Scientific Community Reacts to Newly
Submitted Preprints: Article Downloads, Twitter Mentions, and Citations. (C. A. Ouzounis,
Ed.)PLoS ONE, 7(11), e47523. Digital Libraries; Physics and Society.
doi:10.1371/journal.pone.0047523

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

25
Altmetrics Services Befunde

Eysenbach (2011)
Positive Korrelation Korrelation zwischen Twitter Mentions
und Zitationen nach GoogleScholar sowie Scopus für Artikel
des Journal of Medical Internet Research JMIR .
Eysenbach, G. (2011). Can Tweets Predict Citations? Metrics of Social Impact Based on
Twitter and Correlation with Traditional Metrics of Scientific Impact. Journal of Medical
Internet Research, 13(4). doi:10.2196/jmir.2012

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

26
4. Ein Fazit

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

27
Grenzen

•Manipulierbarkeit/Gaming
•Matthäus-Effekte
•Dokument- und Autorenidentifikation
… vergleichbar den Zitationsmetriken

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

28
Grenzen

•Geben AltMetrics wissenschaftliche Relevanz, Bedeutung, Wirkung
(Impact), Qualität oder die Stärke einer anderen Eigenschaft wieder?
(analog zitations- oder nutzungsdatenbasierter Metriken)
•Selektivität, Eysenbach 2011
•Abdeckung wissenschaftlicher Literatur in Altmetrics-Quellen meist
dürftig und fachlich ungleich verteilt
•AltMetrics-Dienste teils experimentell
•Fehlende Standardisierung

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

29
Messtheoretische Überlegungen

Die meisten Befunde belegen Korrelationen zwischen
Zitationsdaten und AltMetrics-Werten:
Messen AltMetrics die gleiche Eigenschaftsdimension wie
Zitationen?
Falls ja: Was gewinnen wir mit AltMetrics?
•Eine Validierung der Zitationswerte?
•Einen Prädiktor der Zitationswerte?
•Einen offenen Datenpool, der uns kostenlos gleiche
Informationen wie kostenpflichtige Zitationsdatenbanken
liefert?

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

30
Messtheoretische Überlegungen

Das Konstrukt Impact ist weder bei zitationsbasierten
Verfahren noch bei AltMetrics methodisch beschrieben.
•Möglicherweise ist nicht wissenschaftliche Wirkung (oder
Impact) als Ursache (oder unabhängige Variable)
ausschlaggebend für Zitationswerte und AltMetrics Scores.
•Möglicherweise werden Korrelationen durch Interdependenzen
wie Selektionsprozesse produziert und stellen empirische
Artefakte dar.

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

31
Das Messen des leicht Messbaren …

Es „handelt sich bei der Szientometrie um eine eigentümlich
theorielose, offensichtlich von der Illusion des Induktivismus
befallene Disziplin (d.h. es dominiert die
wissenschaftstheoretische Grundüberzeugung, man könne oder
solle auf Theorien verzichten und durch reines Sammeln von
Daten zu wissenschaftlichen Erkenntnissen gelangen).“

Fröhlich, G. (1999). Das Messen des leicht Meßbaren : Output-Indikatoren, Impact-Maße:
Artefakte der Szientometrie? In J. Becker & W. Göhring (Eds.), Kommunikation statt Markt : Zu
einer alternativen Theorie der Informationsgesellschaft (pp. 27–38). GMD- Forschungszentrum
Informationstechnik GmbH. Retrieved from http://eprints.rclis.org/9115/

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

32
5. Ein weiteres Fazit

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

33
Impact ≠ Zitate

Daten zu: Melé, M., Javed, A., Pybus, M., Calafell, F., Parida, L., & Bertranpetit, J. (2010). A new
method to reconstruct recombination events at a genomic scale. PLoS computational biology, 6(11),
e1001010. doi:10.1371/journal.pcbi.1001010
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

34
Impact ≠ Zitate

Daten zu: Melé, M., Javed, A., Pybus, M., Calafell, F., Parida, L., & Bertranpetit, J. (2010). A new
method to reconstruct recombination events at a genomic scale. PLoS computational biology, 6(11),
e1001010. doi:10.1371/journal.pcbi.1001010
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

35
Impact ≠ Zitate

Daten zu: Melé, M., Javed, A., Pybus, M., Calafell, F., Parida, L., & Bertranpetit, J. (2010). A new
method to reconstruct recombination events at a genomic scale. PLoS computational biology, 6(11),
e1001010. doi:10.1371/journal.pcbi.1001010
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

36
Slide: Martin Fenner, PLoS

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

Slide: Martin Fenner, PLoS
Slide: Martin Fenner, PLoS

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

Slide: Martin Fenner, PLoS
Wertvoll?

Altmetrics sind
•offen bezüglich Schnittstellen & Inhalt
•beschreiben nicht nur den Impact kanonisierter wissenschaftlicher
Publikationen wie Zeitschriftenartikel
•beschreiben Impact, der sich nicht als Zitation manifestiert, Bsp. für
Methodenartikel oder bei Nutzung durch Read-Onlys, nichtpublizierende Wissenschaftler
erfassen den Impact
•dynamischer, interaktiver Informationen, etwa in
Wissenschaftsblogs,
•von nicht-textuellen Objekten (Forschungsdaten und -software)
•auf Ebene einzelner Objekte (z.B. als Article Level Metrics)

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

39
6. Das Fazit anderer …

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

40
Self-Assessment vs. Audit Culture?

“In my own case, it often confuses me that my hostility towards audit
culture can co-exist with a strange affection for google scholar. I still
find it exciting to discover that my work has been cited. It confirms people
have read it and that it made a sufficient impact for them to choose to
reference it. Google Scholar automatically indexes these citations for me,
thereby avoiding what would feel like a depressingly narcissistic exercise of
searching for them myself.”

Mark Carrigan: „The academic quantified self“, The Sociological Imagination, 21.11.2013,
http://sociologicalimagination.org/archives/14454

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

41
Self-Assessment vs. Audit Culture?

“Personally, I would prefer the self-assessment over assessment by
committee for both practical and ideological reasons. (…)
Also, I don't like the concept of a "score" on several levels:
(a) the number would be meaningless. You cannot add ranks across
different dimensions (papers vs lab notes). A highly
multidimensional vector space does not deserve to be reduced to a
single scalar quantity. Yes this happens all the time and we should not
encourage it. (…)
(b) I don't like the competitive element. I share my own lab notebook
in order to do better science, not in order to be ‘more open’ than the next
guy.”
Carl Boettiger: „Open Scholar Foundation, Open Science Mailinglist, 06.12.2013,
https://lists.okfn.org/pipermail/open-science/20131206/002950.html
Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

42
Self-Assessment vs. Audit Culture?

„altmetrics are booming and they are starting to be seen as
alternatives to more conventional citation measures. Metrics on the
number of readers, tags used, bookmarks, comments and threads,
blogging, tweets, etc. are starting to be suggested as new tools to
assess the impact and influence that researchers have over their
colleagues and society-at-large. “
Wouters, P., & Costas, R. (2012). Users , narcissism and control - tracking the impact of scholarly
publications in the 21 st century. Retrieved from
http://www.surffoundation.nl/nl/publicaties/Documents/Users narcissism and control.pdf

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

43
Self-Assessment oder Audit Culture?

Ansatz:
Self-Assessment
Kostenlos
Keine Erstellung von Indizies, Rankings, Scores
Fokus auf Personen
Erfasst: Publikationen, Forschungsdaten, Software,
Vortragsfolien, Blogeinträge, …
Download der Rohdaten möglich

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

44
Self-Assessment oder Audit Culture?

Ansatz:
Benchmarking
Fokus auf Autoren, Institutionen, Fachbereiche
Kosten-/lizenzpflichtig
Ermittlung von Scores
Formel und Parameter unbekannt
Kein Download der Rohdaten möglich

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

45
Self-Assessment oder Audit Culture?

Ansatz:
Angebot für Verlage und Datenbankanbieter
Kostenpflichtig
Fokus auf Artikel
Berechnung eines Scores
Formel und Parameter unbekannt
Kein Download der Rohdaten möglich

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

46
Self-Assessment oder Audit Culture?

Ansatz:
Anzeige der Häufigkeitswerte in einzelnen Datenquellen nur
für PLoS-Artikel
Kostenlos
Fokus auf Artikel
Download der Rohdaten möglich

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

47
7. Das abschließende Fazit …

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

48
Self-Assessment oder Audit Culture?

AltMetrics kennen zahlreiche Mängel (fachliche Verzerrungen,
fehlende Standardisierung, Theorielosigkeit, Methodik).
Diese Mängel korrespondieren im Wesentlichen mit den Mängel der
Zitationsverfahren.
AltMetrics haben, verglichen mit Zitationsverfahren, Vorteile (offen
bezüglich Datenquellen und Messobjekten, teils offene Dienste,
erfassen Wirkung, die nicht die Form von Zitationen in Journalen
annimmt).
AltMetrics oszillieren zwischen Self-Assessment und Audit Culture.

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

49
Vielen Dank für Ihre Aufmerksamkeit!

Ulrich Herb
Saarländische Universitäts- und Landesbibliothek
Gebäude B1 1, Zi. 9.08,
D-66123 Saarbrücken
Telefon: 0049 681 302-2798
u.herb@sulb.uni-saarland.de

Ulrich Herb
Saarländische Universitätsund Landesbibliothek

Auf dem Weg zur Exzellenz?
Die evaluierte Wissenschaft
Salzburg, 13.12.2013

50

More Related Content

Viewers also liked

Researcher KnowHow: Open access
Researcher KnowHow: Open accessResearcher KnowHow: Open access
Researcher KnowHow: Open accessLivUniLibrary
 
Open access for academics
Open access for academicsOpen access for academics
Open access for academicsDeborah Lupton
 
Open Access – die Revolution bleibt aus
Open Access – die Revolution bleibt ausOpen Access – die Revolution bleibt aus
Open Access – die Revolution bleibt ausuherb
 
The current state(s) of Open Science
The current state(s) of Open ScienceThe current state(s) of Open Science
The current state(s) of Open Scienceuherb
 
Creative Commons Lizenzen im Directory of Open Access Journals (DOAJ): Eine E...
Creative Commons Lizenzen im Directory of Open Access Journals (DOAJ): Eine E...Creative Commons Lizenzen im Directory of Open Access Journals (DOAJ): Eine E...
Creative Commons Lizenzen im Directory of Open Access Journals (DOAJ): Eine E...uherb
 
Forschungsmetriken und Impact in den Sozialwissenschaften
Forschungsmetriken und Impact  in den SozialwissenschaftenForschungsmetriken und Impact  in den Sozialwissenschaften
Forschungsmetriken und Impact in den Sozialwissenschaftenuherb
 
Crowdfunding & Social Payments in der Wissenschaft
Crowdfunding & Social Payments in der WissenschaftCrowdfunding & Social Payments in der Wissenschaft
Crowdfunding & Social Payments in der Wissenschaftuherb
 
Nutzungsdaten, Statistiken, Altmetrics - und wozu das alles?
Nutzungsdaten, Statistiken, Altmetrics - und wozu das alles?Nutzungsdaten, Statistiken, Altmetrics - und wozu das alles?
Nutzungsdaten, Statistiken, Altmetrics - und wozu das alles?uherb
 
Open Science Meetup "Where does our Science go?"
Open Science Meetup "Where does our Science go?"Open Science Meetup "Where does our Science go?"
Open Science Meetup "Where does our Science go?"Stefan Kasberger
 
Open Science in der Soziologie: Eine interdisziplinäre Bestandsaufnahme zur o...
Open Science in der Soziologie: Eine interdisziplinäre Bestandsaufnahme zur o...Open Science in der Soziologie: Eine interdisziplinäre Bestandsaufnahme zur o...
Open Science in der Soziologie: Eine interdisziplinäre Bestandsaufnahme zur o...uherb
 

Viewers also liked (13)

Researcher KnowHow: Open access
Researcher KnowHow: Open accessResearcher KnowHow: Open access
Researcher KnowHow: Open access
 
Open access for academics
Open access for academicsOpen access for academics
Open access for academics
 
Lost-in-dissertation-open-access-20160704
Lost-in-dissertation-open-access-20160704Lost-in-dissertation-open-access-20160704
Lost-in-dissertation-open-access-20160704
 
Open Access – die Revolution bleibt aus
Open Access – die Revolution bleibt ausOpen Access – die Revolution bleibt aus
Open Access – die Revolution bleibt aus
 
The current state(s) of Open Science
The current state(s) of Open ScienceThe current state(s) of Open Science
The current state(s) of Open Science
 
Strategische Überlegungen zur Publikationsarbeit und zum Forschungsdatenmanag...
Strategische Überlegungen zur Publikationsarbeit und zum Forschungsdatenmanag...Strategische Überlegungen zur Publikationsarbeit und zum Forschungsdatenmanag...
Strategische Überlegungen zur Publikationsarbeit und zum Forschungsdatenmanag...
 
2017 03 open-access_public
2017 03 open-access_public2017 03 open-access_public
2017 03 open-access_public
 
Creative Commons Lizenzen im Directory of Open Access Journals (DOAJ): Eine E...
Creative Commons Lizenzen im Directory of Open Access Journals (DOAJ): Eine E...Creative Commons Lizenzen im Directory of Open Access Journals (DOAJ): Eine E...
Creative Commons Lizenzen im Directory of Open Access Journals (DOAJ): Eine E...
 
Forschungsmetriken und Impact in den Sozialwissenschaften
Forschungsmetriken und Impact  in den SozialwissenschaftenForschungsmetriken und Impact  in den Sozialwissenschaften
Forschungsmetriken und Impact in den Sozialwissenschaften
 
Crowdfunding & Social Payments in der Wissenschaft
Crowdfunding & Social Payments in der WissenschaftCrowdfunding & Social Payments in der Wissenschaft
Crowdfunding & Social Payments in der Wissenschaft
 
Nutzungsdaten, Statistiken, Altmetrics - und wozu das alles?
Nutzungsdaten, Statistiken, Altmetrics - und wozu das alles?Nutzungsdaten, Statistiken, Altmetrics - und wozu das alles?
Nutzungsdaten, Statistiken, Altmetrics - und wozu das alles?
 
Open Science Meetup "Where does our Science go?"
Open Science Meetup "Where does our Science go?"Open Science Meetup "Where does our Science go?"
Open Science Meetup "Where does our Science go?"
 
Open Science in der Soziologie: Eine interdisziplinäre Bestandsaufnahme zur o...
Open Science in der Soziologie: Eine interdisziplinäre Bestandsaufnahme zur o...Open Science in der Soziologie: Eine interdisziplinäre Bestandsaufnahme zur o...
Open Science in der Soziologie: Eine interdisziplinäre Bestandsaufnahme zur o...
 

Similar to AltMetrics: Alternative Metriken & Social Media Impact

Social Media Impact: Resonanz und Wirkung in sozialen Medien. Anwendungsbeisp...
Social Media Impact: Resonanz und Wirkung in sozialen Medien. Anwendungsbeisp...Social Media Impact: Resonanz und Wirkung in sozialen Medien. Anwendungsbeisp...
Social Media Impact: Resonanz und Wirkung in sozialen Medien. Anwendungsbeisp...uherb
 
Mit Daten kompetent umgehen - aus Sicht der Informationswissenschaft
Mit Daten kompetent umgehen - aus Sicht der InformationswissenschaftMit Daten kompetent umgehen - aus Sicht der Informationswissenschaft
Mit Daten kompetent umgehen - aus Sicht der InformationswissenschaftHans-Christoph Hobohm
 
Impact Werte und Standards
Impact Werte und StandardsImpact Werte und Standards
Impact Werte und Standardsuherb
 
JIF, altmetrics, Bibliometrie & Co. Was ist das und wie hilft es mir bei mein...
JIF, altmetrics, Bibliometrie & Co. Was ist das und wie hilft es mir bei mein...JIF, altmetrics, Bibliometrie & Co. Was ist das und wie hilft es mir bei mein...
JIF, altmetrics, Bibliometrie & Co. Was ist das und wie hilft es mir bei mein...Daniel Beucke
 
Crowdfunding, Wissenschaft & Open Science
Crowdfunding, Wissenschaft & Open ScienceCrowdfunding, Wissenschaft & Open Science
Crowdfunding, Wissenschaft & Open Scienceuherb
 
Open Access und die wissenschaftliche Community
Open Access und die wissenschaftliche Community Open Access und die wissenschaftliche Community
Open Access und die wissenschaftliche Community Heinz Pampel
 
»Big data – small problems?« - Ethische Perspektiven auf Forschung unter Zuhi...
»Big data – small problems?« - Ethische Perspektiven auf Forschung unter Zuhi...»Big data – small problems?« - Ethische Perspektiven auf Forschung unter Zuhi...
»Big data – small problems?« - Ethische Perspektiven auf Forschung unter Zuhi...Nele Heise
 
Impulsstatement barcamp wissenschaft 20_forschung neu denken
Impulsstatement barcamp wissenschaft 20_forschung neu denkenImpulsstatement barcamp wissenschaft 20_forschung neu denken
Impulsstatement barcamp wissenschaft 20_forschung neu denkenIsabella Peters
 
Open Science - Handlungsfeld für Informationsinfrastrukturen
Open Science - Handlungsfeld für InformationsinfrastrukturenOpen Science - Handlungsfeld für Informationsinfrastrukturen
Open Science - Handlungsfeld für InformationsinfrastrukturenHeinz Pampel
 
Open Research, Open Sciecen
Open Research, Open SciecenOpen Research, Open Sciecen
Open Research, Open Sciecennellapower
 
Big data - Gewinnung, Auswertung und Darstellung großer Mengen onlinegenerier...
Big data - Gewinnung, Auswertung und Darstellung großer Mengen onlinegenerier...Big data - Gewinnung, Auswertung und Darstellung großer Mengen onlinegenerier...
Big data - Gewinnung, Auswertung und Darstellung großer Mengen onlinegenerier...Katrin Weller
 
Forschungsdaten Repositorien
Forschungsdaten RepositorienForschungsdaten Repositorien
Forschungsdaten RepositorienHeinz Pampel
 
re3data.org – Stand und Perspektive
re3data.org – Stand und Perspektivere3data.org – Stand und Perspektive
re3data.org – Stand und PerspektiveHeinz Pampel
 
Szientometrie 2.0: Zitate, Nutzung, Social Media Impact - Gütekriterien oder ...
Szientometrie 2.0: Zitate, Nutzung, Social Media Impact - Gütekriterien oder ...Szientometrie 2.0: Zitate, Nutzung, Social Media Impact - Gütekriterien oder ...
Szientometrie 2.0: Zitate, Nutzung, Social Media Impact - Gütekriterien oder ...uherb
 
Kommunikationswissenschaftliche Onlineforschung
Kommunikationswissenschaftliche OnlineforschungKommunikationswissenschaftliche Onlineforschung
Kommunikationswissenschaftliche OnlineforschungJan Schmidt
 
Freiheit und Wahrheit in der Wissenschaft
Freiheit und Wahrheit in der WissenschaftFreiheit und Wahrheit in der Wissenschaft
Freiheit und Wahrheit in der Wissenschaftstudiumdigitale
 
„Data Policies“ - Zuckerbrot oder Peitsche?
„Data Policies“ - Zuckerbrot oder Peitsche?    „Data Policies“ - Zuckerbrot oder Peitsche?
„Data Policies“ - Zuckerbrot oder Peitsche? Heinz Pampel
 
Von Subskription zu Open Access
Von Subskription zu Open AccessVon Subskription zu Open Access
Von Subskription zu Open AccessHeinz Pampel
 
Seminar "Open Access - Umsetzungsstrategien und urheberrechtliche Aspekte"
Seminar "Open Access - Umsetzungsstrategien und urheberrechtliche Aspekte"Seminar "Open Access - Umsetzungsstrategien und urheberrechtliche Aspekte"
Seminar "Open Access - Umsetzungsstrategien und urheberrechtliche Aspekte"Heinz Pampel
 
Was lernen wir von Learning Analytics?
Was lernen wir von Learning Analytics?Was lernen wir von Learning Analytics?
Was lernen wir von Learning Analytics?Martin Ebner
 

Similar to AltMetrics: Alternative Metriken & Social Media Impact (20)

Social Media Impact: Resonanz und Wirkung in sozialen Medien. Anwendungsbeisp...
Social Media Impact: Resonanz und Wirkung in sozialen Medien. Anwendungsbeisp...Social Media Impact: Resonanz und Wirkung in sozialen Medien. Anwendungsbeisp...
Social Media Impact: Resonanz und Wirkung in sozialen Medien. Anwendungsbeisp...
 
Mit Daten kompetent umgehen - aus Sicht der Informationswissenschaft
Mit Daten kompetent umgehen - aus Sicht der InformationswissenschaftMit Daten kompetent umgehen - aus Sicht der Informationswissenschaft
Mit Daten kompetent umgehen - aus Sicht der Informationswissenschaft
 
Impact Werte und Standards
Impact Werte und StandardsImpact Werte und Standards
Impact Werte und Standards
 
JIF, altmetrics, Bibliometrie & Co. Was ist das und wie hilft es mir bei mein...
JIF, altmetrics, Bibliometrie & Co. Was ist das und wie hilft es mir bei mein...JIF, altmetrics, Bibliometrie & Co. Was ist das und wie hilft es mir bei mein...
JIF, altmetrics, Bibliometrie & Co. Was ist das und wie hilft es mir bei mein...
 
Crowdfunding, Wissenschaft & Open Science
Crowdfunding, Wissenschaft & Open ScienceCrowdfunding, Wissenschaft & Open Science
Crowdfunding, Wissenschaft & Open Science
 
Open Access und die wissenschaftliche Community
Open Access und die wissenschaftliche Community Open Access und die wissenschaftliche Community
Open Access und die wissenschaftliche Community
 
»Big data – small problems?« - Ethische Perspektiven auf Forschung unter Zuhi...
»Big data – small problems?« - Ethische Perspektiven auf Forschung unter Zuhi...»Big data – small problems?« - Ethische Perspektiven auf Forschung unter Zuhi...
»Big data – small problems?« - Ethische Perspektiven auf Forschung unter Zuhi...
 
Impulsstatement barcamp wissenschaft 20_forschung neu denken
Impulsstatement barcamp wissenschaft 20_forschung neu denkenImpulsstatement barcamp wissenschaft 20_forschung neu denken
Impulsstatement barcamp wissenschaft 20_forschung neu denken
 
Open Science - Handlungsfeld für Informationsinfrastrukturen
Open Science - Handlungsfeld für InformationsinfrastrukturenOpen Science - Handlungsfeld für Informationsinfrastrukturen
Open Science - Handlungsfeld für Informationsinfrastrukturen
 
Open Research, Open Sciecen
Open Research, Open SciecenOpen Research, Open Sciecen
Open Research, Open Sciecen
 
Big data - Gewinnung, Auswertung und Darstellung großer Mengen onlinegenerier...
Big data - Gewinnung, Auswertung und Darstellung großer Mengen onlinegenerier...Big data - Gewinnung, Auswertung und Darstellung großer Mengen onlinegenerier...
Big data - Gewinnung, Auswertung und Darstellung großer Mengen onlinegenerier...
 
Forschungsdaten Repositorien
Forschungsdaten RepositorienForschungsdaten Repositorien
Forschungsdaten Repositorien
 
re3data.org – Stand und Perspektive
re3data.org – Stand und Perspektivere3data.org – Stand und Perspektive
re3data.org – Stand und Perspektive
 
Szientometrie 2.0: Zitate, Nutzung, Social Media Impact - Gütekriterien oder ...
Szientometrie 2.0: Zitate, Nutzung, Social Media Impact - Gütekriterien oder ...Szientometrie 2.0: Zitate, Nutzung, Social Media Impact - Gütekriterien oder ...
Szientometrie 2.0: Zitate, Nutzung, Social Media Impact - Gütekriterien oder ...
 
Kommunikationswissenschaftliche Onlineforschung
Kommunikationswissenschaftliche OnlineforschungKommunikationswissenschaftliche Onlineforschung
Kommunikationswissenschaftliche Onlineforschung
 
Freiheit und Wahrheit in der Wissenschaft
Freiheit und Wahrheit in der WissenschaftFreiheit und Wahrheit in der Wissenschaft
Freiheit und Wahrheit in der Wissenschaft
 
„Data Policies“ - Zuckerbrot oder Peitsche?
„Data Policies“ - Zuckerbrot oder Peitsche?    „Data Policies“ - Zuckerbrot oder Peitsche?
„Data Policies“ - Zuckerbrot oder Peitsche?
 
Von Subskription zu Open Access
Von Subskription zu Open AccessVon Subskription zu Open Access
Von Subskription zu Open Access
 
Seminar "Open Access - Umsetzungsstrategien und urheberrechtliche Aspekte"
Seminar "Open Access - Umsetzungsstrategien und urheberrechtliche Aspekte"Seminar "Open Access - Umsetzungsstrategien und urheberrechtliche Aspekte"
Seminar "Open Access - Umsetzungsstrategien und urheberrechtliche Aspekte"
 
Was lernen wir von Learning Analytics?
Was lernen wir von Learning Analytics?Was lernen wir von Learning Analytics?
Was lernen wir von Learning Analytics?
 

More from uherb

Publication Strategies in the Social and Cultural Sciences
Publication Strategies in the Social and Cultural SciencesPublication Strategies in the Social and Cultural Sciences
Publication Strategies in the Social and Cultural Sciencesuherb
 
Steering science through output indicators & data capitalism
Steering science through output indicators & data capitalismSteering science through output indicators & data capitalism
Steering science through output indicators & data capitalismuherb
 
Publizieren wissenschaftlicher Arbeiten
Publizieren wissenschaftlicher ArbeitenPublizieren wissenschaftlicher Arbeiten
Publizieren wissenschaftlicher Arbeitenuherb
 
Wissenschaftliche Veröffentlichungen & Veröffentlichungsstrategien > Schwerpu...
Wissenschaftliche Veröffentlichungen & Veröffentlichungsstrategien > Schwerpu...Wissenschaftliche Veröffentlichungen & Veröffentlichungsstrategien > Schwerpu...
Wissenschaftliche Veröffentlichungen & Veröffentlichungsstrategien > Schwerpu...uherb
 
Gib dem Affen Zucker – (wie) soll ich nach dem Takt der Wissenschaftssteuerun...
Gib dem Affen Zucker – (wie) soll ich nach dem Takt der Wissenschaftssteuerun...Gib dem Affen Zucker – (wie) soll ich nach dem Takt der Wissenschaftssteuerun...
Gib dem Affen Zucker – (wie) soll ich nach dem Takt der Wissenschaftssteuerun...uherb
 
Altmetrics: Befreiung der Wissenschaft oder Fortsetzung ihrer Vermessung mit ...
Altmetrics: Befreiung der Wissenschaft oder Fortsetzung ihrer Vermessung mit ...Altmetrics: Befreiung der Wissenschaft oder Fortsetzung ihrer Vermessung mit ...
Altmetrics: Befreiung der Wissenschaft oder Fortsetzung ihrer Vermessung mit ...uherb
 
Open Access: Von Inklusion zu Exklusivität?
Open Access: Von Inklusion zu Exklusivität?Open Access: Von Inklusion zu Exklusivität?
Open Access: Von Inklusion zu Exklusivität?uherb
 
How to improve the acceptance of AltMetrics
How to improve the acceptance of AltMetricsHow to improve the acceptance of AltMetrics
How to improve the acceptance of AltMetricsuherb
 
Michael Weller: Open Data Lizenzierungsfragen - Funktioniert eine Lizenzierun...
Michael Weller: Open Data Lizenzierungsfragen - Funktioniert eine Lizenzierun...Michael Weller: Open Data Lizenzierungsfragen - Funktioniert eine Lizenzierun...
Michael Weller: Open Data Lizenzierungsfragen - Funktioniert eine Lizenzierun...uherb
 
Open Knowledge, Open Data & Open Government Data
Open Knowledge, Open Data & Open Government DataOpen Knowledge, Open Data & Open Government Data
Open Knowledge, Open Data & Open Government Datauherb
 
Usage Statistics and Beyond
Usage Statistics and BeyondUsage Statistics and Beyond
Usage Statistics and Beyonduherb
 
Akademische Frühlinge
Akademische FrühlingeAkademische Frühlinge
Akademische Frühlingeuherb
 
Erfolgskriterien für Fachzeitschriften im Open Access … oder „das Messen des ...
Erfolgskriterien für Fachzeitschriften im Open Access … oder „das Messen des ...Erfolgskriterien für Fachzeitschriften im Open Access … oder „das Messen des ...
Erfolgskriterien für Fachzeitschriften im Open Access … oder „das Messen des ...uherb
 
Publizieren wissenschaftlicher Arbeiten
Publizieren wissenschaftlicher ArbeitenPublizieren wissenschaftlicher Arbeiten
Publizieren wissenschaftlicher Arbeitenuherb
 
Open Access Repositories & Interoperable Usage Statistics: Current Developmen...
Open Access Repositories & Interoperable Usage Statistics: Current Developmen...Open Access Repositories & Interoperable Usage Statistics: Current Developmen...
Open Access Repositories & Interoperable Usage Statistics: Current Developmen...uherb
 
Alternative impact measures for open access documents?
Alternative impact measures for open access documents? Alternative impact measures for open access documents?
Alternative impact measures for open access documents? uherb
 

More from uherb (16)

Publication Strategies in the Social and Cultural Sciences
Publication Strategies in the Social and Cultural SciencesPublication Strategies in the Social and Cultural Sciences
Publication Strategies in the Social and Cultural Sciences
 
Steering science through output indicators & data capitalism
Steering science through output indicators & data capitalismSteering science through output indicators & data capitalism
Steering science through output indicators & data capitalism
 
Publizieren wissenschaftlicher Arbeiten
Publizieren wissenschaftlicher ArbeitenPublizieren wissenschaftlicher Arbeiten
Publizieren wissenschaftlicher Arbeiten
 
Wissenschaftliche Veröffentlichungen & Veröffentlichungsstrategien > Schwerpu...
Wissenschaftliche Veröffentlichungen & Veröffentlichungsstrategien > Schwerpu...Wissenschaftliche Veröffentlichungen & Veröffentlichungsstrategien > Schwerpu...
Wissenschaftliche Veröffentlichungen & Veröffentlichungsstrategien > Schwerpu...
 
Gib dem Affen Zucker – (wie) soll ich nach dem Takt der Wissenschaftssteuerun...
Gib dem Affen Zucker – (wie) soll ich nach dem Takt der Wissenschaftssteuerun...Gib dem Affen Zucker – (wie) soll ich nach dem Takt der Wissenschaftssteuerun...
Gib dem Affen Zucker – (wie) soll ich nach dem Takt der Wissenschaftssteuerun...
 
Altmetrics: Befreiung der Wissenschaft oder Fortsetzung ihrer Vermessung mit ...
Altmetrics: Befreiung der Wissenschaft oder Fortsetzung ihrer Vermessung mit ...Altmetrics: Befreiung der Wissenschaft oder Fortsetzung ihrer Vermessung mit ...
Altmetrics: Befreiung der Wissenschaft oder Fortsetzung ihrer Vermessung mit ...
 
Open Access: Von Inklusion zu Exklusivität?
Open Access: Von Inklusion zu Exklusivität?Open Access: Von Inklusion zu Exklusivität?
Open Access: Von Inklusion zu Exklusivität?
 
How to improve the acceptance of AltMetrics
How to improve the acceptance of AltMetricsHow to improve the acceptance of AltMetrics
How to improve the acceptance of AltMetrics
 
Michael Weller: Open Data Lizenzierungsfragen - Funktioniert eine Lizenzierun...
Michael Weller: Open Data Lizenzierungsfragen - Funktioniert eine Lizenzierun...Michael Weller: Open Data Lizenzierungsfragen - Funktioniert eine Lizenzierun...
Michael Weller: Open Data Lizenzierungsfragen - Funktioniert eine Lizenzierun...
 
Open Knowledge, Open Data & Open Government Data
Open Knowledge, Open Data & Open Government DataOpen Knowledge, Open Data & Open Government Data
Open Knowledge, Open Data & Open Government Data
 
Usage Statistics and Beyond
Usage Statistics and BeyondUsage Statistics and Beyond
Usage Statistics and Beyond
 
Akademische Frühlinge
Akademische FrühlingeAkademische Frühlinge
Akademische Frühlinge
 
Erfolgskriterien für Fachzeitschriften im Open Access … oder „das Messen des ...
Erfolgskriterien für Fachzeitschriften im Open Access … oder „das Messen des ...Erfolgskriterien für Fachzeitschriften im Open Access … oder „das Messen des ...
Erfolgskriterien für Fachzeitschriften im Open Access … oder „das Messen des ...
 
Publizieren wissenschaftlicher Arbeiten
Publizieren wissenschaftlicher ArbeitenPublizieren wissenschaftlicher Arbeiten
Publizieren wissenschaftlicher Arbeiten
 
Open Access Repositories & Interoperable Usage Statistics: Current Developmen...
Open Access Repositories & Interoperable Usage Statistics: Current Developmen...Open Access Repositories & Interoperable Usage Statistics: Current Developmen...
Open Access Repositories & Interoperable Usage Statistics: Current Developmen...
 
Alternative impact measures for open access documents?
Alternative impact measures for open access documents? Alternative impact measures for open access documents?
Alternative impact measures for open access documents?
 

AltMetrics: Alternative Metriken & Social Media Impact

  • 1. AltMetrics / Social Media Impact Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 1
  • 2. 1. Impact? 2. Social Media & Impact 3. AltMetrics 4. Fazit … Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 2
  • 3. 1. Impact? Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 3
  • 4. Impact Dimensionen •Produktivität •Resonanz •Qualität Fröhlich, G. (1999). Das Messen des leicht Meßbaren : Output-Indikatoren, Impact-Maße: Artefakte der Szientometrie? In J. Becker & W. Göhring (Eds.), Kommunikation statt Markt : Zu einer alternativen Theorie der Informationsgesellschaft (pp. 27–38). GMD- Forschungszentrum Informationstechnik GmbH. Retrieved from http://eprints.rclis.org/9115/ Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 4
  • 5. Impact Interpretativer Kurzschluss: Impact = Qualität = Resonanz = Zitationshäufigkeiten/-raten Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 5
  • 6. Impact „In fact, we do not even have a workable definition of the notion of ‘scientific impact’ itself, unless we revert to the tautology of defining it as the number of citations received by a publication.” Bollen, J., Van De Sompel, H., Hagberg, A., & Chute, R. (2009). A principal component analysis of 39 scientific impact measures. PloS one, 4(6), e6022. doi:10.1371/journal.pone.0006022 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 6
  • 7. Impact „Our results indicate that the notion of scientific impact is a multi-dimensional construct that can not be adequately measured by any single indicator, although some measures are more suitable than others. The commonly used citation Impact Factor is not positioned at the core of this construct, but at its periphery, and should thus be used with caution.“ Bollen, J.; Van De Sompel, H.; Hagberg, A.; Chute, R.: A principal component analysis of 39 scientific impact measures. In: PloS one 4 (2009a), Issue 6, e6022. DOI: 10.1371/journal.pone.0006022. Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 7
  • 8. Zitationsbasierte Impact-Verfahren, JIF, H-Index Kritikpunkte, ein Auszug: •Begrenzter Scope •Ausschluss kompletter Dokumentarten und nicht-textueller Produkte (Forschungsdaten, Software, …) •Sprachbias zugunsten englischsprachiger Journals: Zeitschriften in anderen Sprachen haben einen niedrigeren JIF. •Benachteiligung der Journale aus Disziplinen mit Verwertungszyklen > 2 Jahren (z.B. Mathematik, Geisteswissenschaften) •leicht manipulierbar, Gaming … Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 8
  • 9. Einschätzung •JIF und h-Index sind mängelbehaftet, zentrales Manko: begrenzter Scope •Elektrifizierung der wissenschaftlichen Information und des Publizierens ermöglichen neue Techniken •„Just as scientists would not accept the findings in a scientific paper without seeing the primary data, so should they not rely on Thomson Scientific's impact factor, which is based on hidden data.“ Rossner, M., Van Epps, H., & Hill, E. (2007). Show me the data. The Journal of cell biology, 179(6), 1091–2. doi:10.1083/jcb.200711140 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 9
  • 10. San Francisco Declaration on Research Assessment (DORA) initiiert von der American Society for Cell Biology (ASCB), fordert Abkehr vom Journal Impact Factor zur Bewertung wissenschaftlicher Leistung und plädiert für Article Level Metrics: „Make available a range of article-level metrics to encourage a shift toward assessment based on the scientific content of an article rather than publication metrics of the journal in which it was published.“ Stand 10.12.2013: 10.001 individuelle Unterzeichner 423 institutionelle Unterzeichner http://am.ascb.org/dora/ Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 10
  • 11. 2. Social Media & Impact Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 11
  • 12. Beispiele: Medien & Wirtschaft •Blockbuster-Vorhersage aus Twitter- und Wikipedia-Aktivitäten Mestyán, M., Yasseri, T., & Kertész, J. (2013). Early prediction of movie box office success based on Wikipedia activity big data. PloS one, 8(8), e71226. doi:10.1371/journal.pone.0071226 •Twitterfeeds sagen Aktienkurse vorher Bollen, J., Mao, H., & Zeng, X. (2011). Twitter mood predicts the stock market. Journal of Computational Science, 2(1), 1–8. doi:10.1016/j.jocs.2010.12.007 •Wikipedia-Disput-Index korreliert mit politischer Stabilität eines Landes, http://www.disputeindex.org Apic G, Betts MJ, Russell RB (2011) Content Disputes in Wikipedia Reflect Geopolitical Instability. PLoS ONE 6(6): e20902. doi:10.1371/journal.pone.0020902, URL: http://www.plosone.org/article/info/doi:10.1371/journal.pone.0020902 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 12
  • 13. 3. AltMetrics Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 13
  • 14. Prinzip Verwertung einer Vielzahl an Nutzungsereignissen wissenschaftlicher Informationen aus heterogenen Datenquellen http://altmetrics.org/manifesto/ Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 14
  • 15. AltMetrics Services http://impactstory.org/ http://www.plumanalytics.com/ http://altmetric.com/demos/plos.html http://almreports.plos.org/ Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 15
  • 16. Dashboards Sample-Profile Carl Boettiger, http://impactstory.org/CarlBoettiger Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 16
  • 17. Dashboards Sample-Profile Carl Boettiger, http://impactstory.org/CarlBoettiger Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 17
  • 18. Dashboards Sample-Profile Carl Boettiger, http://impactstory.org/CarlBoettiger Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 18
  • 19. Dashboards Altmetric.com Scores zu Tehrani, Jamshid J.: The Phylogeny of Little Red Riding Hood http://www.plosone.org/article/info%3Adoi%2F10.1371%2Fjournal.pone.0078871 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 19
  • 20. Dashboards Altmetric.com Scores zu Tehrani, Jamshid J.: The Phylogeny of Little Red Riding Hood http://www.plosone.org/article/info%3Adoi%2F10.1371%2Fjournal.pone.0078871 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 20
  • 21. Befunde Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 21
  • 22. Altmetrics Services Befunde Bar-Ilan (2012) Positive Korrelation zwischen Mendeley User Counts und Zitaten Web of Science WoS , Scopus und GoogleScholar. Disziplin: Informationswissenschaft. Bar-Ilan, J. (2012). JASIST@mendeley. ACM Web Science Conference 2012 Workshop. Evanston, IL. Retrieved from http://altmetrics.org/altmetrics12/bar-ilan/ Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 22
  • 23. Altmetrics Services Befunde Li & Thelwall (2012) Positive Korrelation zwischen zwischen Mendeley User Counts und Zitationswerten aus dem WoS, Scopus and GoogleScholar. Disziplinen: Genomik, Genetik. Li, X., & Thelwall, M. (2012). F1000, Mendeley and Traditional Bibliometric Indicators. 17th International Conference on Science and Technology Indicators (Vol. 3, pp. 1–11). Retrieved from http://2012.sticonference.org/Proceedings/vol2/Li_F1000_541.pdf Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 23
  • 24. Altmetrics Services Befunde Li, Thelwall & Giustini (2011) Positive Korrelation zwischen Mendeley User Counts und Zitation nach dem WoS. Basis: 1.613 in Nature und Science im Jahr 2007 publizierte Artikel. Li, X., Thelwall, M., & Giustini, D. (2011). Validating online reference managers for scholarly impact measurement. Scientometrics, 91(2), 461–471. doi:10.1007/s11192-011-0580-x Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 24
  • 25. Altmetrics Services Befunde Shuai, Pepe & Bollen (2012) Positive Korrelation zwischen Twitter Mentions und Zitationen nach GoogleScholar Basis: wissenschaftliche Dokumente, die als Preprints zwischen Oktober 2010 und Mai 2011 auf dem Open Access Repository arXiv publiziert wurden. Shuai, X., Pepe, A., & Bollen, J. (2012). How the Scientific Community Reacts to Newly Submitted Preprints: Article Downloads, Twitter Mentions, and Citations. (C. A. Ouzounis, Ed.)PLoS ONE, 7(11), e47523. Digital Libraries; Physics and Society. doi:10.1371/journal.pone.0047523 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 25
  • 26. Altmetrics Services Befunde Eysenbach (2011) Positive Korrelation Korrelation zwischen Twitter Mentions und Zitationen nach GoogleScholar sowie Scopus für Artikel des Journal of Medical Internet Research JMIR . Eysenbach, G. (2011). Can Tweets Predict Citations? Metrics of Social Impact Based on Twitter and Correlation with Traditional Metrics of Scientific Impact. Journal of Medical Internet Research, 13(4). doi:10.2196/jmir.2012 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 26
  • 27. 4. Ein Fazit Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 27
  • 28. Grenzen •Manipulierbarkeit/Gaming •Matthäus-Effekte •Dokument- und Autorenidentifikation … vergleichbar den Zitationsmetriken Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 28
  • 29. Grenzen •Geben AltMetrics wissenschaftliche Relevanz, Bedeutung, Wirkung (Impact), Qualität oder die Stärke einer anderen Eigenschaft wieder? (analog zitations- oder nutzungsdatenbasierter Metriken) •Selektivität, Eysenbach 2011 •Abdeckung wissenschaftlicher Literatur in Altmetrics-Quellen meist dürftig und fachlich ungleich verteilt •AltMetrics-Dienste teils experimentell •Fehlende Standardisierung Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 29
  • 30. Messtheoretische Überlegungen Die meisten Befunde belegen Korrelationen zwischen Zitationsdaten und AltMetrics-Werten: Messen AltMetrics die gleiche Eigenschaftsdimension wie Zitationen? Falls ja: Was gewinnen wir mit AltMetrics? •Eine Validierung der Zitationswerte? •Einen Prädiktor der Zitationswerte? •Einen offenen Datenpool, der uns kostenlos gleiche Informationen wie kostenpflichtige Zitationsdatenbanken liefert? Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 30
  • 31. Messtheoretische Überlegungen Das Konstrukt Impact ist weder bei zitationsbasierten Verfahren noch bei AltMetrics methodisch beschrieben. •Möglicherweise ist nicht wissenschaftliche Wirkung (oder Impact) als Ursache (oder unabhängige Variable) ausschlaggebend für Zitationswerte und AltMetrics Scores. •Möglicherweise werden Korrelationen durch Interdependenzen wie Selektionsprozesse produziert und stellen empirische Artefakte dar. Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 31
  • 32. Das Messen des leicht Messbaren … Es „handelt sich bei der Szientometrie um eine eigentümlich theorielose, offensichtlich von der Illusion des Induktivismus befallene Disziplin (d.h. es dominiert die wissenschaftstheoretische Grundüberzeugung, man könne oder solle auf Theorien verzichten und durch reines Sammeln von Daten zu wissenschaftlichen Erkenntnissen gelangen).“ Fröhlich, G. (1999). Das Messen des leicht Meßbaren : Output-Indikatoren, Impact-Maße: Artefakte der Szientometrie? In J. Becker & W. Göhring (Eds.), Kommunikation statt Markt : Zu einer alternativen Theorie der Informationsgesellschaft (pp. 27–38). GMD- Forschungszentrum Informationstechnik GmbH. Retrieved from http://eprints.rclis.org/9115/ Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 32
  • 33. 5. Ein weiteres Fazit Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 33
  • 34. Impact ≠ Zitate Daten zu: Melé, M., Javed, A., Pybus, M., Calafell, F., Parida, L., & Bertranpetit, J. (2010). A new method to reconstruct recombination events at a genomic scale. PLoS computational biology, 6(11), e1001010. doi:10.1371/journal.pcbi.1001010 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 34
  • 35. Impact ≠ Zitate Daten zu: Melé, M., Javed, A., Pybus, M., Calafell, F., Parida, L., & Bertranpetit, J. (2010). A new method to reconstruct recombination events at a genomic scale. PLoS computational biology, 6(11), e1001010. doi:10.1371/journal.pcbi.1001010 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 35
  • 36. Impact ≠ Zitate Daten zu: Melé, M., Javed, A., Pybus, M., Calafell, F., Parida, L., & Bertranpetit, J. (2010). A new method to reconstruct recombination events at a genomic scale. PLoS computational biology, 6(11), e1001010. doi:10.1371/journal.pcbi.1001010 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 36
  • 37. Slide: Martin Fenner, PLoS Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 Slide: Martin Fenner, PLoS
  • 38. Slide: Martin Fenner, PLoS Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 Slide: Martin Fenner, PLoS
  • 39. Wertvoll? Altmetrics sind •offen bezüglich Schnittstellen & Inhalt •beschreiben nicht nur den Impact kanonisierter wissenschaftlicher Publikationen wie Zeitschriftenartikel •beschreiben Impact, der sich nicht als Zitation manifestiert, Bsp. für Methodenartikel oder bei Nutzung durch Read-Onlys, nichtpublizierende Wissenschaftler erfassen den Impact •dynamischer, interaktiver Informationen, etwa in Wissenschaftsblogs, •von nicht-textuellen Objekten (Forschungsdaten und -software) •auf Ebene einzelner Objekte (z.B. als Article Level Metrics) Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 39
  • 40. 6. Das Fazit anderer … Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 40
  • 41. Self-Assessment vs. Audit Culture? “In my own case, it often confuses me that my hostility towards audit culture can co-exist with a strange affection for google scholar. I still find it exciting to discover that my work has been cited. It confirms people have read it and that it made a sufficient impact for them to choose to reference it. Google Scholar automatically indexes these citations for me, thereby avoiding what would feel like a depressingly narcissistic exercise of searching for them myself.” Mark Carrigan: „The academic quantified self“, The Sociological Imagination, 21.11.2013, http://sociologicalimagination.org/archives/14454 Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 41
  • 42. Self-Assessment vs. Audit Culture? “Personally, I would prefer the self-assessment over assessment by committee for both practical and ideological reasons. (…) Also, I don't like the concept of a "score" on several levels: (a) the number would be meaningless. You cannot add ranks across different dimensions (papers vs lab notes). A highly multidimensional vector space does not deserve to be reduced to a single scalar quantity. Yes this happens all the time and we should not encourage it. (…) (b) I don't like the competitive element. I share my own lab notebook in order to do better science, not in order to be ‘more open’ than the next guy.” Carl Boettiger: „Open Scholar Foundation, Open Science Mailinglist, 06.12.2013, https://lists.okfn.org/pipermail/open-science/20131206/002950.html Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 42
  • 43. Self-Assessment vs. Audit Culture? „altmetrics are booming and they are starting to be seen as alternatives to more conventional citation measures. Metrics on the number of readers, tags used, bookmarks, comments and threads, blogging, tweets, etc. are starting to be suggested as new tools to assess the impact and influence that researchers have over their colleagues and society-at-large. “ Wouters, P., & Costas, R. (2012). Users , narcissism and control - tracking the impact of scholarly publications in the 21 st century. Retrieved from http://www.surffoundation.nl/nl/publicaties/Documents/Users narcissism and control.pdf Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 43
  • 44. Self-Assessment oder Audit Culture? Ansatz: Self-Assessment Kostenlos Keine Erstellung von Indizies, Rankings, Scores Fokus auf Personen Erfasst: Publikationen, Forschungsdaten, Software, Vortragsfolien, Blogeinträge, … Download der Rohdaten möglich Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 44
  • 45. Self-Assessment oder Audit Culture? Ansatz: Benchmarking Fokus auf Autoren, Institutionen, Fachbereiche Kosten-/lizenzpflichtig Ermittlung von Scores Formel und Parameter unbekannt Kein Download der Rohdaten möglich Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 45
  • 46. Self-Assessment oder Audit Culture? Ansatz: Angebot für Verlage und Datenbankanbieter Kostenpflichtig Fokus auf Artikel Berechnung eines Scores Formel und Parameter unbekannt Kein Download der Rohdaten möglich Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 46
  • 47. Self-Assessment oder Audit Culture? Ansatz: Anzeige der Häufigkeitswerte in einzelnen Datenquellen nur für PLoS-Artikel Kostenlos Fokus auf Artikel Download der Rohdaten möglich Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 47
  • 48. 7. Das abschließende Fazit … Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 48
  • 49. Self-Assessment oder Audit Culture? AltMetrics kennen zahlreiche Mängel (fachliche Verzerrungen, fehlende Standardisierung, Theorielosigkeit, Methodik). Diese Mängel korrespondieren im Wesentlichen mit den Mängel der Zitationsverfahren. AltMetrics haben, verglichen mit Zitationsverfahren, Vorteile (offen bezüglich Datenquellen und Messobjekten, teils offene Dienste, erfassen Wirkung, die nicht die Form von Zitationen in Journalen annimmt). AltMetrics oszillieren zwischen Self-Assessment und Audit Culture. Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 49
  • 50. Vielen Dank für Ihre Aufmerksamkeit! Ulrich Herb Saarländische Universitäts- und Landesbibliothek Gebäude B1 1, Zi. 9.08, D-66123 Saarbrücken Telefon: 0049 681 302-2798 u.herb@sulb.uni-saarland.de Ulrich Herb Saarländische Universitätsund Landesbibliothek Auf dem Weg zur Exzellenz? Die evaluierte Wissenschaft Salzburg, 13.12.2013 50