Empirical librarianship - workshop KNVI congres 12 november 2015Bianca Kramer
De bibliotheek als onderzoeker - een actieve sessie waarin u aan het denken wordt gezet over het gebruik van onderzoek, hoe simpel of klein ook, bij het innoveren in bibliotheken.
Resultaten van de workshop zoals gehouden tijdens het KNVI congres op 12 november 2015 door Bianca Kramer en Jeroen Bosman.
Al het workshopmateriaal (handleiding en template kaartjes) is te downloaden via Figshare: http://dx.doi.org/10.6084/m9.figshare.1619731
Empirical librarianship - workshop KNVI congres 12 november 2015Bianca Kramer
De bibliotheek als onderzoeker - een actieve sessie waarin u aan het denken wordt gezet over het gebruik van onderzoek, hoe simpel of klein ook, bij het innoveren in bibliotheken.
Resultaten van de workshop zoals gehouden tijdens het KNVI congres op 12 november 2015 door Bianca Kramer en Jeroen Bosman.
Al het workshopmateriaal (handleiding en template kaartjes) is te downloaden via Figshare: http://dx.doi.org/10.6084/m9.figshare.1619731
The Workshop Social Networks is one in a series of workshops for Library staff at the University of Groningen Libraries by Guus van den Brekel (digicmb) & Dorine Kieft-Wondergem
Slimmer werken en wetenschap bedrijven met nieuwe webtools.
Het internet verandert de werk- en leerpatronen van onderzoekers, clinici en studenten. Tijdens deze meeting maakt u kennis met nieuwe web-technologieën in communicatie & samenwerken, informatie zoeken, beheren & delen. U krijgt tips en webtools om uw werk of studie efficiënter te maken door gebruik van deze technologieën. Er is tijdens deze meeting ook ruimte om uw eigen tips te delen met de groep.
Info bijeenkomst Rode Zaal 11 november 2010
http://www.netvibes.com/science20umcg
Zoekt u iets? Gezondheidspromotie online
Zoeken in online literatuurbestanden, zoekinstrumenten leren kennen en gebruiken, een zoekstrategie in Pubmed opzetten en gebruik maken van review databases, het komt allemaal aan bod in deze vorming.
'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...SURF Events
Het STELA-project (Successful Transition from secondary to higher Education using Learning Analytics) is een Europees project, gestart in 2015, en heeft als doel de overgang van secundair naar hoger onderwijs te verbeteren door middel van learning analytics. Hiertoe heeft het project een learning-analyticsbenadering ontwikkeld, getest en geëvalueerd, die zich richt op het bieden van formatieve en summatieve feedback aan studenten in de overgang naar het hoger onderwijs. Naast een studentendashboard heeft het project dashboards ontwikkeld voor studieadviseurs en docenten, die gebruikt kunnen worden om counseling en onderwijspraktijken te verbeteren. In deze sessie presenteren we de resultaten, uitkomsten, en geleerde lessen van het project.
Hoe zoeken mensen door historische kranten? | Netwerkdag Oorlogsbronnen 2018Netwerk Oorlogsbronnen
De presentatie 'Hoe zoeken mensen door historische kranten?' tijdens de Netwerkdag Oorlogsbronnen 2018 'Lost and Found'.
Door Martijn Kleppe (hoofd afdeling Onderzoek Koninklijke Bibliotheek) en Jacco van Ossenbruggen (hoofd Information Access Onderzoeksgroep Centrum voor Wiskunde en Informatica).
Digitale collecties zoals Delpher.nl worden steeds meer gebruikt. Hoe kunnen we het gebruik van dit soort digitale collecties analyseren? Wat voor soort zoekers kun je identificeren als je alle gebruikers analyseert? En wellicht net zo belangrijk: hoe kunnen we het gedrag van klanten op een verantwoorde en transparante manier analyseren?
De slides van Stefaan Van Roey, juridisch stafmedewerker van ICURO, over "ICURO-projecten stakeholderoverleg –
proeve(n) van een ander communicatie-verhaal in de (ziekenhuis)zorg" op het symposium (op 2-4-2015) n.a.v. het nieuwe boek uitgegeven door LannooCampus"Communicatie Troef. Doeltreffend communiceren in en door zorgorganisaties": http://www.communicatietroef.be
The Workshop Social Networks is one in a series of workshops for Library staff at the University of Groningen Libraries by Guus van den Brekel (digicmb) & Dorine Kieft-Wondergem
Slimmer werken en wetenschap bedrijven met nieuwe webtools.
Het internet verandert de werk- en leerpatronen van onderzoekers, clinici en studenten. Tijdens deze meeting maakt u kennis met nieuwe web-technologieën in communicatie & samenwerken, informatie zoeken, beheren & delen. U krijgt tips en webtools om uw werk of studie efficiënter te maken door gebruik van deze technologieën. Er is tijdens deze meeting ook ruimte om uw eigen tips te delen met de groep.
Info bijeenkomst Rode Zaal 11 november 2010
http://www.netvibes.com/science20umcg
Zoekt u iets? Gezondheidspromotie online
Zoeken in online literatuurbestanden, zoekinstrumenten leren kennen en gebruiken, een zoekstrategie in Pubmed opzetten en gebruik maken van review databases, het komt allemaal aan bod in deze vorming.
'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...SURF Events
Het STELA-project (Successful Transition from secondary to higher Education using Learning Analytics) is een Europees project, gestart in 2015, en heeft als doel de overgang van secundair naar hoger onderwijs te verbeteren door middel van learning analytics. Hiertoe heeft het project een learning-analyticsbenadering ontwikkeld, getest en geëvalueerd, die zich richt op het bieden van formatieve en summatieve feedback aan studenten in de overgang naar het hoger onderwijs. Naast een studentendashboard heeft het project dashboards ontwikkeld voor studieadviseurs en docenten, die gebruikt kunnen worden om counseling en onderwijspraktijken te verbeteren. In deze sessie presenteren we de resultaten, uitkomsten, en geleerde lessen van het project.
Hoe zoeken mensen door historische kranten? | Netwerkdag Oorlogsbronnen 2018Netwerk Oorlogsbronnen
De presentatie 'Hoe zoeken mensen door historische kranten?' tijdens de Netwerkdag Oorlogsbronnen 2018 'Lost and Found'.
Door Martijn Kleppe (hoofd afdeling Onderzoek Koninklijke Bibliotheek) en Jacco van Ossenbruggen (hoofd Information Access Onderzoeksgroep Centrum voor Wiskunde en Informatica).
Digitale collecties zoals Delpher.nl worden steeds meer gebruikt. Hoe kunnen we het gebruik van dit soort digitale collecties analyseren? Wat voor soort zoekers kun je identificeren als je alle gebruikers analyseert? En wellicht net zo belangrijk: hoe kunnen we het gedrag van klanten op een verantwoorde en transparante manier analyseren?
De slides van Stefaan Van Roey, juridisch stafmedewerker van ICURO, over "ICURO-projecten stakeholderoverleg –
proeve(n) van een ander communicatie-verhaal in de (ziekenhuis)zorg" op het symposium (op 2-4-2015) n.a.v. het nieuwe boek uitgegeven door LannooCampus"Communicatie Troef. Doeltreffend communiceren in en door zorgorganisaties": http://www.communicatietroef.be
Ana van Meegen Silva werkt bij de Universiteitsbibliotheek van de Vrije universiteit Amsterdam. Wat zijn eigenlijk onderzoeksdata? Wat is datamanagement en hoe stel je een goed datamanagementplan op? Verder aandacht voor de Gedragscode Wetenschappelijke Beoefening van de VSNU en de rol van de onderzoeksinstelling.
Presentatie van de Masterclass ondersteuning onderzoek bij Avans Hogeschool op 20 juni 2013.
First support-lecture on research methods presented to students on the master in special needs education. University of Groningen, 11 October 2010 by Dr. Wendy Post and Dr. Ernst Thoutenhoofd (Dutch language).
AI en IP (Artificieele Intelligentie en Intellectueel Eigendom)voginip
Lezing door Fulco Blokhuis over de juridische aspecten die optreden bij generatieve AI, zoals ChatGPT, Dall-e e.d.
VOGIN-IP-lezing 28 april 2024 Amsterdam
Een startende éénpitter in informatieland: wat goed ging en wat niet
Impact - the game
1. (except logo’s)
Impact – the game
Traditionele en alternatieve mogelijkheden
Ellen Fest & Bianca Kramer
Workshop VoginIP lezing, Amsterdam, 20170309
3.1
Macro-InvertebrateDeclineinSurfaceWater
PollutedwithImidacloprid
PloSOne8.5(2013):e62374.
24citationsin2015
@MsPhelps
@EllenFest
2. programma
• vraag aan deelnemers
• inleiding bibliometrics
• spel ronde 1
• inleiding altmetrics
• spel ronde 2
• zelf aan de slag
• vraag opnieuw
• afsluiting
3. Hoe zouden we we
wetenschappelijk
onderzoek moeten
beoordeelden?
8. Hoe vergelijken we citatie-aantallen?
• Onderzoekster Willemijn Wiskunde heeft een
publicatie uit 2007 met 22 citaties
• Onderzoekster Beatrix Biologie heeft eem
publicatie uit 2011 met 24 citaties
→ Welke onderzoekster heeft met haar publicatie
de meeste impact?
9. 0
10
20
30
40
50
60
70
80
0 2 4 6 8 10 12
cummulatiefaantalcitaties
aantal jaar na publicatie
baseline
TOP10%
TOP1%
Baseline vakgebied wiskunde
11. Journal Impact factor: DEFINITIE
Journal Impact factor in jaar t is gedefinieerd als de ratio tussen:
• het aantal citaties in jaar t naar publicaties in het tijdschrift
in de twee voorgaande jaren, en;
• het aantal publicaties in het tijdschrift in de twee
voorgaande jaren.
Voorbeeld:
• een tijdschrift heeft in 2013 en 2014 in totaal 100
publicaties
• in 2015 hebben deze publicaties samen 200 citaties
gekregen
• de impact factor is 200 / 100 = 2 11
12. 12
Impact factor: Weaknesses
• geen normalisatie naar vakgebied → gebruik de kwartielen
• citaties naar ‘niet-citeerbare documenten’ (bijv. book reviews,
editorials, news articles) in de teller maar niet in de noemer
→ voordeel voor de tijdschriften met veel editorial material
• gevoelig voor "uitbijters"
• review journals zijn sterk in het voordeel
13. h-index
balans tussen productiviteit en
geciteerdheid
om het effect van een of twee
extreem geciteerde publicaties
uit te sluiten
niet alleen toepasbaar op auteurs
effect van vakgebied en leeftijd
niet gecorrigeerd
serieuze twijfel over robuustheid
*Waltman, L. & N. J. van Eck (2011). The inconsistency of the h-
index. Journal of the American Society for Information Science and
Technology 63(2):406-415 http://dx.doi.org/10.1002/asi.21678
15. waar worden deze "metrics" gebruikt?
• beoordeling financieringsaanvragen (NWO,
ERC)
• sollicitatieprocedures (intern beleid, sterk
verschillend)
• tenure track procedures (intern beleid, sterk
verschillend)
• beoordeling onderzoeksgroepen / faculteiten
(SEP) → veel vrijheid voor eigen invulling
• university rankings (m.n. citatie-aantallen)
Meer lezen over NWO en gebruik van de Impact Factor?
https://im2punt0.wordpress.com/2017/01/09/nwo-the-impact-factor-paradox/
16. waar het toe leidt:
Nature newsblog
http://blogs.nature.com/news/2013/06/new-record-66-journals-banned-for-boosting-impact-factor-with-self-citations.html
17. waar het toe leidt:
Retraction Watch d.d. 17-02-2017
http://retractionwatch.com/2017/02/17/editor-resigns-two-journals-considerable-citation-boosting-attempts/
18. waar het toe leidt:
De Volkskrant, 6-3-2017
http://www.volkskrant.nl/wetenschap/prominente-hoogleraar-voedingspsychologie-beschuldigd-van-zelfplagiaat~a4470769
24. 2 trends in beoordeling van
wetenschappelijk onderzoek
Bewustzijn van onjuist gebruik van de IF voor de beoordeling van
individuele onderzoekers
• San Francisco Declaration on Research Assessment (DORA)
• Leiden Manifesto (Hicks et al., 2015)
• Metric Tide report (Wilsdon et al., 2015)
Meer aandacht voor maatschappelijke impact van wetenschappelijk
onderzoek en verschuiving naar meer "Open Science"
• Standaard Evaluatie Protocol 2015 - 2021(SEP) van de VSNU →
"Grotere en systematischere aandacht voor maatschappelijke
relevantie"
• NWO en EU beleid verschuift langzaam richting "Open Science"
• Nationaal Plan Open Science gepresenteerd op 9 februari jl.
25. Altmetrics Manifesto
• geen algemene definitie
• ‘metrics and qualitative data that are
complementary to traditional, citation-based
metrics’ (altmetric.com)
• verzameling van metrics
• gebaseerd op online gebruik / platforms
• alternatief voor bibliometrics
J. Priem, D. Taraborelli, P. Groth, C. Neylon (2010), Altmetrics: A manifesto,
26 October 2010. http://altmetrics.org/manifesto
26. welke bronnen?
type
referentie managers, bookmarking Mendeley, CiteULike, Delicious
video, foto en presentatie platforms YouTube, Pinterest, Podcasts, Vimeo, SlideShare, Flickr,
DailyMotion
social netwerken Facebook, Google+
blogs Nature blogs, Scientific American blogs, PLOS blogs,
Research Blogging, Google blogs, Wordpress
microblogging Twitter, Sina Weibo,
peer review systemen Publons, PubPeer
recommendations / reviews F1000, Reddit, Goodreads, Amazon reviews
online encyclopedie Wikipedia
repositories. PMC, Figshare, RePEc, SSRN
Source code Repositories GitHub, SourgeForge, Bitbucket
others beleidsdocumenten, nieuwsberichten
(Erdt et al., 2016; doi:10.1007/s11192-016-2077-0)
36. verder lezen?
• Kramer, B. 2015. Altmetrics. Handboek
Informatiewetenschap 710.
doi:10.5281/zenodo.31899
• Konkiel et al. 2016. Altmetrics for Librarians: 100+
tips, tricks, and examples.
doi:10.6084/m9.figshare.3749838
• Glauch & Blümel. 2016. OPENing UP new
methods, indicators and tools for peer review,
impact measurement and dissemination of
research results. http://openup-
h2020.eu/2017/03/03/establishment-altmetrics-
term/
44. Altmetrics – tools / applications
- Niet alle onderzoeksoutput kan getraceerd worden
- Niet alle gebruik kan getraceerd worden
- Hoe robuust zijn de data ?
- Niet het getal, maar het verhaal is belangrijk
45. Altmetrics – tools / applications
- Niet alle onderzoeksoutput kan getraceerd worden
- Niet alle gebruik kan getraceerd worden
- Hoe robuust zijn de data ?
- Niet het getal, maar het verhaal is belangrijk
47. Wat is de context waarin onderzoekers kunnen
kiezen voor open & reproduceerbare workflows?
political support at (inter)national level •
pressure from funders •
public stance on Open Science by institution •
user-friendly and powerful tools •
interoperability •
role models •
attention for positive effects •
• assessment criteria
• institutional policies/culture
• PI demands
• learning curves
• agreements with collaborators
• uncertainty over effects & legitimacy
50. Open Science in de gehele onderzoekscyclus
preparation
analysis
writingpublication
outreach
assessment discovery
Rounds of grant writing
and application
Iterations of
search and reading
Drafting, receiving
comments,rewriting
Submit, peer review,
rejection, resubmitting
Rounds of experiments
and measurements