Umwege zu besseren LIDO-Daten. Workflows externer Normdatenanreicherung

Umwege zu besseren LIDO-Daten DOI: 10.5281/zenodo.17779761 Alexander Winkler (digiS) ✉ [email protected] 0000-0002-9145-7238 @[email protected] 2. Dezember 2025 Workflows externer Normdatenanreicherung Was haben wir vor? 1. Recap: Was sind Normdaten/Kontrollierte Vokabulare? 2. Unterstützung von Normdaten/Kontrollierten Vokabularen in Erschließungssystemen 3. Externe Anreicherung 4. Reconciliation in OpenRefine 5. In OpenRefine zusätzliche Informationen aus Wikidata laden Normdaten Marie-Lan Nguyen, Fichier reserve Bibliotheque Sainte-Genevieve n2, CC BY 2.5 Normdaten / Kontrolliertes Vokabular Eindeutige ID für eine Entität Normdaten / Kontrolliertes Vokabular Zusammenführung von Synonymen Normdaten / Kontrolliertes Vokabular Einbindung in Begriffshierarchien Normdaten / Kontrolliertes Vokabular Verknüpfung mit anderen Vokabularen Normdaten – Datenqualität ● eindeutige Identifikation einer Entität (Person, Ort, Sache, Idee, Werk …) ● maschinenprozessierbare Metadaten ● Multilingualität ● Kontextinformationen (Überbegriffe, Geokoordinaten, Lebensdaten) ● Synonymzusammenführung ● Homonymunterscheidung Normdaten – Datenqualität ● eindeutige Identifikation einer Entität (Person, Ort, Sache, Idee, Werk …) ● maschinenprozessierbare Metadaten ● Multilingualität ● Kontextinformationen (Überbegriffe, Geokoordinaten, Lebensdaten) ● Synonymzusammenführung ● Homonymunterscheidung Kontrollierte Vokabulare verbessern die Suche und machen Daten FAIRer (besser auffindbar, besser zugänglich, interoperabler und besser nachnutzbar) DAM AMS Export Reconciliation/Anreicher ung mit KV-URIs Reimport © Google, Apache 2.0, https://commons.wikimedia.org/wiki/File:NotoSans_-_Old_Personal_Computer_-_1F5B3.svg DAM AMS Export Reconciliation/Anreicher ung mit KV-URIs Reimport © Google, Apache 2.0, https://commons.wikimedia.org/wiki/File:NotoSans_-_Old_Personal_Computer_-_1F5B3.svg Software muss Export und insbesondere Re-Import unterstützen anonymous, Fish hook MET LC-17 6 133 EGDP024493, CC0 1.0 Export-Import-Workflows der DAMs ● Export als CSV möglich? ● Welche Reimport-Möglichkeiten gibt es? ● Welche Felder können befüllt werden? ●Vorsicht beim Update und/oder Überschreiben bestehender Werte! Workflow vorher immer sorgfältig testen! Möglicher Workflow 1. CSV-Export aus Datenbank mit Datensatz-ID und String der Entität, die angereichert werden soll (Personenname, Ort etc.) 2. Reconciliation (Verknüpfung der Strings mit Normdatensätzen) in OpenRefine 3. IDs in eine eigene Spalte schreiben und entsprechend der kanonischen URI-Form formatieren (vgl. nächste Folien) 4. angereicherte CSV aus OpenRefine exportieren und zurück in die Datenbank laden 3b) Anreicherung der LIDO-Dateien ● Anreicherung vor Weitergabe der LIDO-Dateien ● Verändert die Daten im Quellsystem nicht! → Symptombehandlung ● Anreicherung muss bei jedem Export wiederholt werden Transformatorenwerk Oberschöneweide (TRO), Bild 2: Zwei Männer bei der Montage eines Leistungstransformators. SW-Foto, 1962 © Kurt Schwarz, (CC BY-NC-SA), https://berlin.museum-digital.de/object/103716 3b) Anreicherung der LIDO-Dateien ● Anreicherung vor Weitergabe der LIDO-Dateien ● Verändert die Daten im Quellsystem nicht! → Symptombehandlung ● Workflow: ○ LIDO-Export ○ Upload der LIDO-Datei in LIDORefineWeb ○ Auswahl der gewünschten Elemente ○ Download der CSV, Reconciliation in OpenRefine ○ Upload der LIDOund der modifizierten CSV ○ Download der angereicherten LIDO-XML Reconciliation-Ergebnisse in eigene Spalte schreiben Angereicherte CSV exportieren Ausgangs-XML und angereicherte CSV hochladen Resultierende LIDO-XML enthält URIs Weitere Daten aus verknüpften Datenstätzen laden Foto by Horst Ziegenfusz The copyright of the foto is with the Historical Museum Frankfurt who decided to release these media files under cc-by-sa license during GLAM on Tour Frankfurt 2018., Telefonzentrale mit Klappenschalter Frankfurt vor 1900, CC BY-SA 4.0