Linked Open Data und die Open Library - Möglichkeiten der Zusammenarbeit und Prägung von Identifiern in Resource URI's

Linked Open Data und die Open Library
Möglichkeiten der Zusammenarbeit und Prägung von Identifiern in Resource URI's
Oliver Flimm <flimm@ub.uni-koeln.de> Arbeitstreffen Linked Open Data, hbz Köln 12.5.2010

Die Open Library
Seit November 2007 Teilprojekt des Internet-Archivs
Ziel: Weltweiter Gesamtnachweis aller Bücher „ One web page for every book “
Veröffentlichung als Open Data über Feeds (editions.json, authors.json)
Umfang (Stand 02/2010):
19.8 Mio. Titel, 5.4 Mio. Personen

Technik
Eigenentwicklung
Open Source
Infobase (DB) + Infogami (Wiki, Plugins)
Versionierung (Resource-History) !!!
Öffentliche ID vs. Interne ID
RESTful API (Content, Query, Modify, Add?)
Bulk-Upload möglich
Einspielung mit Match-Algorithmen durch OL
Einladeformat ist MARC mit Fremd-Id Information

OL liefert Open Data
Große Datenbasis für lokale Anreicherung
lccn, lc_classifications, oclc_numbers, dewey_decimal_class, isbn_10, isbn_13, subjects, subject_place, languages, ocaid
Cover, Inhaltsverzeichnisse, elektr. Volltexte (DAISY)
Zusammenfassung zu „Werken“ mit eigenem URI
Rudimentäre Kategorien, aber erweiterbar

Daten eines Beispieltitel in OL
{" subtitle ": "ein Vorstoss zu den Grenzen von Berechenbarkeit und Erkenntnis : Quantenmechanik, Relativitätstheorie, Gravitation, Kosmologie, Chaostheorie, Prädikatenlogik", " lc_classifications ": ["Q175 .K475 1999"], " id ": 222492, " title ": "Bedeutende Theorien des 20. Jahrhunderts", " languages ": [{"key": "/l/ger"}], " subjects ": ["Science -- Philosophy.", "Science -- Methodology."], " publish_country ": "gw ", " by_statement ": "Werner Kinnebrock.", " oclc_numbers ": ["40364931"], " type ": {"key": "/type/edition"}, " revision ": 1, " other_titles ": ["Bedeutende Theorien des zwanzigsten Jahrhunderts"], " publishers ": ["Oldenbourg"], " last_modified ": {"type": "/type/datetime", "value": "2008-04-01 03:28:50.625462"}, " key ": "/b/OL134029M", " authors ": [{"key": "/a/OL88369A"}], " publish_places " : ["München"], " pagination ": "ix, 201 p. :ill. ;", " dewey_decimal_class ": ["501"], " notes ": {"type": "/type/text", "value": "Includes bibliographical refe rences (p. [203]-205)."}, " number_of_pages ": 201, " lccn ": ["99514096"], " isbn_10 ": ["3486247069"], " publish_date ": "1999"}

Beispiele REST API
Content
curl http://openlibrary.org/books/OL1M.json
Query
curl 'http://openlibrary.org/query.json?type=/type/edition&authors=/authors/OL1A'
History
curl http://openlibrary.org/books/OL1M.json?m=history
Sowie: Save (via PUT), Login, Recent

Prägung von Identifiern
Erzeugung von <ID> durch „guten“ (!!!) Matchkey-Algorithmus
Nachnutzung eines bestehenden externen Identifiers als <ID>
Erzeugung und Vergabe neuer eigener Identifier als <ID>
ala http://globallinkeddata.org/resource/title/ <ID>

Nachnutzung bestehender & Erzeugung neuer Identifier
Anforderungen
Identifier selbst müssen vollständig offen und frei verwendbar sein (Offene Daten mit proprietären Identifiern sind ein Widerspruch in sich!)
Bibliographische Daten zu den Identifiern müssen für die lokale Anreicherung vollständig als Open Data vorliegen
Offenes System zur (ad-hoc) Generierung neuer Identifier

Identifier der OL bereits als URI konzipiert
„ [...]Open Library also gives people a URI for a work, an edition or author or other book-ish resource that can be used as a pointer and connector for information about books; a Uniform Resource Identifier indeed.“
aus: Open Library FAQ: What is Open Library

Nachnutzung von Identifiern der OL
Identifier-Automat
Lookup mit konkreten bibliogr. Daten
Vorhanden?
key als Identifier verwenden
Nicht vorhanden?
Bibliogr. Daten in die OL eintragen
Dafür vergebenen neuen key als Identifier verwenden
Vereinfacht durch freie Datenverfügbarkeit

Vorteile
Anforderungen durch OL erfüllt
Ankopplung an etabliertes globales Projekt und keine „Insellösung“ USB/Köln  hbz/NRW  DNB/Deutschland
Perfekte Symbiose zum Vorteil von Open Data – OL und unsere offenen Daten profitieren gleichermaßen trotz Koexistenz
Stärkung der OL als freie Alternative zum WorldCat, OL als zentraler Aggregator

Noch zu lösende Probleme
RAK vs. AACR2
Kompatibilität der erfassten Daten mit OL bei Lookup oder Upload, z.B. pagination
„Zersplitterung“ durch hierarchische Struktur
Match-Algorithmus für Lookup in OL, ad-hoc Erzeugung neuer Katalogeinträge via REST-API
Dubletten, Datenqualität
(Noch) keine Bestandsnachweise in OL

Überdeckungsgrad der OL
Abschätzung allein anhand der ISBN
Verschiedene Szenarien
KUG allgemein
Katalog mit vielen modernen Titeln: Institut für Informatik
Katalog mit viel Altbestand: USB Köln
Nächster Schritt: Verwendung anderer Identifikatoren bzw. Match-Algorithmus

Zahlen: KUG gesamt
Titelaufnahmen insgesamt: 9.6 Mio., teilweise dublett (!!!)
Versch. ISBN's insgesamt: 1.316.641
Davon in Open Library: 874.373
Überdeckungsquote ISBN's: 66 Prozent

Zahlen: Institut für Informatik
Titelaufnahmen insgesamt: 8.594
Versch. ISBN's insgesamt: 7.074
Überdeckungsquote ISBN's: 61.4 Prozent
Überdeckungsquote gesamt: 50.5 Prozent

Zahlen: USB Köln
Titelaufnahmen insgesamt: 3.084.269
Versch. ISBN's insgesamt: 708.704
Überdeckungsquote ISBN's: 68.1 Prozent
Überdeckungsquote gesamt: 15.7 Prozent

Fazit
Open Library bietet als globaler Kooperationspartner viele Vorteile
Überdeckungsquote via ISBN vielversprechend
Nächste Schritte müssten folgen
Match-Algorithmus für Lookup
Upload einzelner Titel
Alternative: eigener Identifier-Automat und Zusammenarbeit mit OL jenseits Identifier

Fragen?

Vielen Dank für Ihre Aufmerksamkeit
Quellen:
Open Library (OL) - http://openlibrary.org/
OL FAQ - http://openlibrary.org/help/faq
OL Technik - http://openlibrary.org/about/tech
OL REST API - http://openlibrary.org/dev/docs/restful_api
OL Upload - http://openlibrary.org/data
OL Feeds - http://www.archive.org/details/oldumps/

Linked Open Data und die Open Library - Möglichkeiten der Zusammenarbeit und Prägung von Identifiern in Resource URI's

by flimm on May 16, 2011

Accessibility

Categories

Tags

Upload Details

Usage Rights

1 Embed 34

Statistics

Linked Open Data und die Open Library - Möglichkeiten der Zusammenarbeit und Prägung von Identifiern in Resource URI’s — Presentation Transcript