imported>Kuebi: /* Harvesting von Metadaten (OAI-PMH) */ dt. externe Links raus

2023-10-02T15:00:19Z

Harvesting von Metadaten (OAI-PMH): dt. externe Links raus

Neue Seite

{| class="wikitable float-right"
|+ style="background:#C0C0FF; font-size:larger;"| Z39.50
|-
! Familie:
| [[Internetprotokollfamilie]]
|-
! Einsatzgebiet:
| Abfrage Informationssysteme,<br /> Portale<br /> Literaturverzeichnisse u. a.
|-
! Port: || meist 210/TCP
|-
|colspan="2" class="center"|
{{Netzwerk-TCP-IP-Anwendungsprotokoll|Z39.50|class="center"}}
|-
! Standards:
|
ISO 23950<br />
ANSI/NISO Z39.50-2003
|}

'''Z39.50''' ist ein [[Netzwerkprotokoll]], das im [[Bibliothekswesen]] als Standard zur Abfrage von bibliografischen [[Informationssystem]]en verwendet wird. Das Protokoll ist ein verbindungsorientiertes Protokoll auf der Anwendungsschicht 7 des [[OSI-Modell|OSI-Referenzmodells]]. Z39.50 generiert eine oder mehrere [[Sitzung (Informatik)|Sitzungen]] (''simultaneous sessions'') zwischen Z39.50-Clients und -Servern (''bis Z39.50 Version 3 in OSI-Terminologie: Origin und Target''). Eine Transformations-Syntax ermöglicht die einheitliche Abfrage heterogener [[Informationssysteme]]. Das jeweilige Informationssystem kann die [[Daten]] in unterschiedlicher Form übermitteln, sodass es spezifischen Anforderungen genügen kann.

Z39.50 ist für den Einsatz in [[Portal (Informatik)|Portalumgebungen]] prädestiniert, die über einen einheitlichen Zugang eine parallele Suche in mehreren bibliografischen Informationssystemen ermöglichen.

Vielfach angewendet wird Z39.50 aber auch bei Literaturverwaltungsprogrammen wie [[EndNote]], [[LibraryThing]] oder auch [[Learning Management System|Learning-Management-Systemen]] wie zum Beispiel [[Stud.IP]], die die Inhalte bibliografischer Informationssysteme für den Aufbau eigener Literaturlisten nutzen.

Verwaltung und Entwicklung des Protokolls erfolgt über die [[Library of Congress]], die seit 1990 als ''Maintenance Agency Z39.50'' fungiert. Nachfolger von Z39.50 ist das HTTP-basierte Protokoll [[Search/Retrieve via URL]] (SRU/SRW), das im Rahmen des Projekt ''Z39.50 International Next Generation'' (ZING) entwickelt wurde.

== Geschichte ==
=== Entwicklung ===
Die Entwicklung von Z39.50 wurde 1984 in den [[Vereinigte Staaten|USA]] durch die [[National Information Standards Organization]] (NISO) begonnen und wird seit 1990 durch die Library of Congress fortgeführt. Es wurden mehrere Versionen implementiert:
* Z39.50-1988, Z39.50-1992(''Version 2''), Z39.50-1995(''Version 3'')
* Z39.50-2003(''Version 4'') als aktuelle Version, welche die Versionen 2 und 3 beinhaltet und im Wesentlichen eine Konsolidierung des Standards der Version 3 darstellt.

Neben den US-amerikanischen Standards (''ANSI/NISO Z39.50-2003'') ist Z39.50 seit 1998 auch International Standard ISO 23950: "Information Retrieval (Z39.50): Application Service Definition and Protocol Specification".

Die großflächige Einführung von Z39.50 in Europa erfolgte im Rahmen des Projektes ''ONE – Opac Network Europe'' bis Ende der 1990er Jahre, in Deutschland durch das Projekt ''DBV-OSI'' (1993–1997) und ist fast ausschließlich auf bibliographische Informationssysteme beschränkt.

=== DBV-OSI ===
In Deutschland wurde mit dem Ziel der Erweiterung der bibliographischen Informationssysteme um eine Z39.50-Schnittstelle von 1993–1997 das Projekt DBV-OSI (''Deutscher Bibliothekenverbund – Open Systems Interconnection'') durchgeführt, gefördert durch [[Deutsche Forschungsgemeinschaft|DFG]] und [[Bundesregierung (Deutschland)|Bundesregierung]]. Nach einem Vorprojekt erfolgte in Stufe II die Realisierung (DBV-OSI-II).

Projektpartner waren:
* [[Deutsche Nationalbibliothek|Die Deutsche Bibliothek]] (Federführung)
* Danet GmbH, Darmstadt (Techn. Projektmanagement)
* [[FIZ Karlsruhe – Leibniz-Institut für Informationsinfrastruktur|Fachinformationszentrum Karlsruhe GmbH]]
* [[Deutsches Institut für Medizinische Dokumentation und Information]] (DIMDI)
* [[Deutsches Bibliotheksinstitut]] (DBI)
* [[Bibliotheksverbund#Bibliotheksverbund Bayern (BVB)|Bibliotheksverbund Bayern]] (BVB)
* [[Bibliotheksverbund#Südwestdeutscher Bibliotheksverbund (SWB)|Südwestdeutscher Bibliotheksverbund]] (SWB)
* [[Gemeinsamer Bibliotheksverbund]] (GBV)
* [[OCLC PICA|PICA Centrum voor Bibliotheekautomatisering]]

Es wurden folgende Z39.50 Basisdienste realisiert:
''INITIALIZE'', ''SEARCH'', ''PRESENT'', ''DELETE_RESULT_SET'', ''RESOURCE_REPORT'', ''SCAN'', ''CLOSE''.

Das Ergebnis von DBV-OSI ist der flächendeckende Einsatz von Z39.50 zur Abfrage von Daten aus bibliographischen Informationssystemen in Deutschland (Stand 2007).

== Protokollspezifikation ==
Die detaillierte Protokollspezifikation befindet sich auf den Webseiten der Library of Congress:
* [http://www.loc.gov/z3950/agency/markup/markup.html Z39.50-1996]
* [http://www.loc.gov/z3950/agency/Z39-50-2003.pdf Z39.50-2003] (PDF; 631 kB)

Wesentliche Festlegungen des Protokolls Z39.50 sind:
* Protokoll-Dienste
* Transfer-Syntax (''Operatoren, Attribut-Sets'')
* verwendete Formate (''Record-Syntaxes'')

=== Protokolldienste ===
Kurzbeschreibung der Basisdienste des DBV-OSI-Projektes:

'''INITIALIZE''' – Authentifizierung des Clients, Eröffnung einer Z39.50-Session
* Protokollspezifische Festlegungen für die Session: unter anderem Protokollversion, anwendbare Dienste, bevorzugte und maximale Message-Size

'''SEARCH''' – Suchanfragen
* Client: Query, Name von Result-Sets und Format
* Server: Anzahl Treffer, Statusinfo, gegebenenfalls einige Datensätze

'''PRESENT''' – Übertragung von Suchergebnissen
* Client: Name von Result-Set und Format, Nummern der Records
* Server: überträgt gewünschte Records

'''DELETE_RESULT_SET''' – Löschen von Result-Sets beim Targetsystem
* Client: Name des/der Result Sets
* Server: Delete-Operation-Status

'''RESOURCE_REPORT''' – Austausch von Abrechnungsinformationen
* Client: Abfrage der angefallenen Kosten (verbrauchte Ressourcen)
* Server: angefallene Kosten

'''SCAN (BROWSE)''' – Suchen in geordneten Term-Listen (zum Beispiel Titel, Autor, und so weiter)
* Client: Term-Liste, Start-Term, Größe der Scan-Schritte
* Server: Scan-Status, Anzahl der Treffer

'''CLOSE''' – Schließen der Z39.50-Session (ab V3)
* kann von Client oder Server initiiert werden
* Server: Löschen aller während der Sitzung aufgebauten Result-Sets

=== Transfer-Syntax ===
Wegen der verschiedenen Query-Syntaxen bei Client und Server wird auf beiden Seiten eine Transformation der Abfragesprachen in die systemspezifische Syntax vorgenommen. Dafür sind in der Z39.50-Protokollspezifikation verschiedene Query-Typen definiert ([[Umgekehrte polnische Notation|RPN]], [[Common Command Language|CCL]] etc.).

Beispiel:

* Abfrage Client: ''SEARCH per Beckmann, Andreas AND tit Gott Bautzen''
* Abfrage Server: ''FIND AU = Beckmann A AND TIT = Gott Bautzen''

Durch Übertragen der Suchterme in ein Zahlensystem (''Attribute-Set'') werden die Probleme der Groß-/Kleinschreibung (''tit → TIT'') und der verschiedenen Namen bei gleicher Semantik (''per → AU'') gelöst.

Obige Abfrage wird unter Anwendung des Attribute-Sets (Bibliographic Information) in der Abfragesprache [[PQF]] (Prefix Query Format) dann wie folgt formuliert:<ref>{{cite web | url=http://www.loc.gov/z3950/agency/defns/bib1.html | title=Bib-1 Attribute Set | publisher=loc.gov | language=englisch | accessdate=2019-09-14}}</ref>

* ''find @and @attr 1=1 @attr 5=100 "Beckmann, Andreas" @attr 1=4 @attr 5=100 "Gott Bautzen"''

=== Verwendete Formate ===
Die Server bieten den Clients die Daten in mindestens einem, in der Regel aber in mehreren Formaten an. Typische bibliographische Formate (''Record-Syntaxes'') für Z39.50-Server sind:
* [[Machine-Readable Cataloging|MARC 21]] (USMARC)
* [[Maschinelles Austauschformat für Bibliotheken|MAB]]

== Implementierung ==

=== Target Profiles ===
Die Verwendung der Attribute für die Zielsysteme (Z39.50-Server) wird in Target-Profiles beschrieben.
Folgende Angaben sind in der Regel in einem Target-Profile enthalten:

* Art des Zugangs (öffentlich oder zum Beispiel mit IP-Restriktionen, ggf. Nutzer- und Passwortangaben)
* Name der Datenbank
* verwendete [[Zeichensatz|Zeichensätze]]
* verwendete [[Port (Protokoll)|Ports]] (oft mehrere Ports für verschiedene Zeichensätze)
* Name des Hostes für den Zugang (Domain Name)
* Liste der suchbaren Felder mit zugeordnetem Attribut-Set

=== Zugriff über einen Webbrowser ===
Für die Realisierung des Zugriffs auf einen Z39.50-Server über einen Webbrowser gibt es grundsätzlich zwei Möglichkeiten:

'''1) direkter Zugriff über browserintegriertes Plugin'''

Hier sind Ansätze, zum Beispiel für Netscape (add-on) und den MS Internet-Explorer (Active-X) vorhanden. Diese sollten jedoch kaum Verbreitung für eine Anwendung erfahren haben.
[[Datei:Z3950 http gateway.png|mini|Abb.: HTTP-Z39.50 Gateway]]
'''2) Zugriff über HTTP-Z39.50-Gateway'''

Die Standardlösung für den Zugriff auf einen Z39.50-Server erfolgt via HTTP über ein HTTP-Z39.50 Gateway, welches die HTTP-Requests des Clients entgegennimmt, daraus das Z39.50-Protokoll extrahiert und an den gewählten Z39.50-Server zur Bearbeitung weiterleitet. Umgekehrt werden die Z39-50-Antworten des Servers wieder in HTTP-Antworten umgewandelt und an den Client übertragen.

Implementierte und frei zugängliche HTTP-Z39.50-Gateways sind zum Beispiel:

* [http://www.loc.gov/z3950/gateway.html Library of Congress WWW/Z39.50 Gateway]
* [http://z3950.de/zack/z3950.html ZACK – WWW-Gateway zu Z39.50-Servern]

=== Software und Toolkits ===
Die Z39.50-Maintenance Agency der Library of Congress stellt auf ihrer Webseite eine umfangreiche Liste von Software und Toolkits zur Verfügung, die die Einbindung der Z39.50-Funktionalität in eigene Clients oder Serversysteme unterstützen.

== Perspektive ==
Aus Sicht des Jahres 2007, 10 Jahre nach Beendigung des DBV-OSI-Projektes, haben sich verschiedene Entwicklungen ergeben, die die Funktionalität von Z39.50 ganz oder teilweise übernehmen können.

Diese Entwicklungen sind unter anderem durch folgende Eigenschaften gekennzeichnet:
* Funktionalität von Z39.50 wird ins WWW geholt ([[Hypertext Transfer Protocol|HTTP]])
* Verwendung ausreichend leistungsfähiger Abfragesprachen ([[Contextual Query Language|CQL]])
* variabler zu strukturieren und einfacher zu verarbeiten ([[Extensible Markup Language|XML]], [[Extensible Stylesheet Language|XSL]] etc.)
* dazu Formate: Entwicklung entsprechender XML-Pendants ([[MARCXML]], [[MABXML]] etc.)
* einfacher zu implementieren (ohne komplexe Transfersyntax)
* unterstützt durch die Bildung großer Bibliotheksverbünde, weltweite Standards für Regelwerke und Formate, ausreichende Bandbreiten in den [[Wide Area Network|Weitverkehrsnetzen]], sowie die Bereitstellung offener Schnittstellen zur Abfrage der Metadaten (etwa [[OAI-PMH]]) wird das Zusammenführen von Datenbanken ermöglicht – die Bedeutung der Abfrage von verteilten Informationssystemen mit Z39.50 wird damit abnehmen.

Dazu gehören folgende Entwicklungen/Projekte:

=== ZING – Z39.50 International Next Generation ===
* http://www.loc.gov/standards/sru/
* [[Search/Retrieve via URL]] ist die offizielle Weiterentwicklung von Z39.50, verfügt über eine ausreichend mächtige Abfragesprache ([[Contextual Query Language|CQL]]), ist HTTP-basiert und liefert die Daten in XML.
'''Beispiele''':
* [http://sru.gbv.de/gvk?version=1.1&operation=searchRetrieve&query=pica.tit%3Dentwicklung&maximumRecords=10&recordSchema=mods GVK – Verbundkatalog des GBV]
* [http://z3950.loc.gov:7090/voyager?version=1.1&operation=searchRetrieve&query=dinosaur&startRecord=2&maximumRecords=5&recordSchema=mods Library of Congress]
* [http://worldcat.org/webservices/registry/search/Institutions?version=1.1&operation=searchRetrieve&recordSchema=info%3Arfa%2FrfaRegistry%2FschemaInfos%2FadminData&maximumRecords=10&startRecord=1&resultSetTTL=300&recordPacking=xml&query=local.oclcAccountName+all+%22dansk%22+or+local.institutionAlias+all+%22dansk%22+or+local.institutionName+all+%22dansk%22 OCLC Institution Registry]

=== Einsammeln von Metadaten (OAI-PMH) ===
* Durch das Einsammeln (''Harvesten'') der Metadaten (Protokoll: [[OAI-PMH]]) von verschiedenen Informationssystemen (''Data Providern'') ergibt sich die Möglichkeit, diese Daten im eigenen Informationssystem zu speichern, zu verarbeiten und dann in einer normalisierten, angereicherten, auf den Anwendungsfall zugeschnittenen Form bereitzustellen. Das verwendete Protokoll ''Open Archiv Initiative – Protocol for Metadata Harvesting'' ist HTTP-basiert und liefert die Daten in XML. Das Standarddatenformat ist [[Dublin Core]].
* mit dem Zusammenführen der Daten wird die Abfrage der verteilten Informationssysteme überflüssig
* das OAI-PMH wird bereits für den Datenaustausch zwischen Verbundsystemen genutzt
* siehe auch Empfehlungen des [[Wissenschaftsrat (Deutschland)|Wissenschaftsrats]] zur digitalen Informationsversorgung durch Hochschulbibliotheken (Drs. 4935/01) und DINI-Zertifikat für [[Dokumentenserver]]
'''Beispiel''':
* EDOC-Server der Universität München<ref>[http://edoc.ub.uni-muenchen.de/perl/oai2/?verb=GetRecord&metadataPrefix=oai_dc&identifier=oai:edoc.ub.uni-muenchen.de:1]</ref>
* E-LIB-Server der Staats- und Universitätsbibliothek Bremen<ref>[http://elib.suub.uni-bremen.de/cgi-bin/oai2?verb=GetRecord&metadataPrefix=xMetaDiss&identifier=oai%3Aelib.suub.uni-bremen.de%3ADISS%2F00000028]</ref>

=== Linkresolver ===
* Der HTTP-basierte Service [[Linkresolver]] ermöglicht die Zusammenfassung verteilter Ressourcen in einem "intelligenten" Dienstportal. Es werden für die Suche nach Publikationen unter Verwendung von Metadaten der Quelle (Source) sowie von gespeicherten Informationen über lokale Bestände und Lizenzen des Ziels (Target) Links auf "passende" Dienste wie elektronische Volltexte, Nachweis in Katalogen, Dokumentlieferdienst, WEB-Services wie ISI Journal Citation Report, WEB of Science und andere generiert.
'''Beispiel''':
* [http://www.gbv.de/wikis/cls/ExLibris:_SFX SFX-Service] im Gemeinsamen Bibliotheksverbund

=== Zusammenführen von bibliographischen Datenbeständen ===
* Die Konzentration der Bibliotheken in Verbünden und die weltweite Etablierung standardisierter Formate und Regelwerke für den Aufbau bibliographischer Informationssysteme ermöglicht die physische und logische Zusammenführung bislang verteilter heterogener Datenbestände in wenigen zentralen, weitgehend homogenen Informationsbeständen.
* Es kommt zur Bildung von Verbundkatalogen, Nationalen Katalogen und eines Weltkatalogs.
* Mit dem Zusammenführen der Daten wird die Bedeutung der Abfrage von verteilten Informationssystemen mit Z39.50 abnehmen.
'''Beispiel''':
* Kooperationsinitiative hbz – BVB – OBVSG. Untersuchung zur Zusammenführung der drei Zentralen Verbunddatenbanken. [http://www.hbz-nrw.de/dokumentencenter/produkte/verbunddatenbank/aktuell/koop3/Endbericht-Teil_1-fachlich_20070118_2100-oeffentliche_abschnitte.pdf Endbericht] (PDF; 153 kB) – ''im Juni 2007 eingestellt''.
* Projekt „Kooperative Neukatalogisierung“<br /> Barbara Block, Josef Labner, Beate Rusch: {{Webarchiv |url=http://www.zlb.de/aktivitaeten/bd_neu/heftinhalte2007/BD_Erschliessung_01_0207.pdf |text=''Katalogisierung kooperativ gemacht''. |format=PDF; 162 kB |wayback=20120512125742}} In: ''Bibliotheksdienst'', 41. Jg., 2007, Heft 2
* [[WorldCat|OCLC’s Worldcat]] – der zukünftige Weltkatalog? – ist über [[Google Book Search]] recherchierbar,
: z. B. Zubarev, Morozov, Röpke. ''Statistical Mechanics of Nonequilibrium Processes: Basic concepts. Kinetic theory''.

== Weblinks ==
* [http://www.loc.gov/z3950/agency/ International Standard Maintenance Agency.] Z39.50 der [[Library of Congress]]
* [http://www.ilrt.bris.ac.uk/discovery/z3950/resources/ Z39.50 Resources Directory] des ILRT der [[University of Bristol|Universität Bristol]]
* Bernd Hergeth: ''Z39.50 in Bibliotheken und im World-Wide-Web''. 1996, Danet GmbH; [[hdl:2003/2179]]
* [http://z3950.de/zack/z3950.html WWW-Gateway zu Bibliotheksdatenbanken über Z39.50.] z3950.de
* [http://www.allegro-c.de/z3950/index.htm DFG-Projekt: Z39.50 Schnittstelle für das System allegro]
* {{Webarchiv |url=https://www.hbz-nrw.de/dokumentencenter/produkte/verbunddatenbank/aktuell/verbundvereinbarungen/vereinb_fremdd.pdf |text=Verbundvereinbarungen Fremddatenübernahme. |format=PDF; 126 kB |wayback=20151118022625}} [[Hochschulbibliothekszentrum des Landes Nordrhein-Westfalen]] (Stand: 6. Juli 2007)
* Writschan, Staus, Simanowski: [http://web10.ub.uni-rostock.de/uploads/IuK/DBVOSI_2007.pdf ''10 Jahre nach DBV-OSI, Bilanz und Perspektiven von Z39.50''.] (PDF; 827 kB) Februar 2007

== Einzelnachweise ==
<references />

[[Kategorie:Bibliothekstechnik]]
[[Kategorie:Internet-Anwendungsprotokoll]]

Z39.50 - Versionsgeschichte

imported>Kuebi: /* Harvesting von Metadaten (OAI-PMH) */ dt. externe Links raus