4.1 Qualität und Quantität von Erschließung und Kuratierung

4.1 Qualität und Quantität von Erschließung und Kuratierung

Über diesen Abschnitt

Der Abschnitt 4 im Ganzen beleuchtet Smartes Erschließen und Kuratieren zwecks besserer Auffindbarkeit von Inhalten, schlägt dafür Prozesse und Strukturen vor. Um die Qualität dieser Prozesse und Strukturen selbst zu messen und nachfolgend zu verbessern werden in 4.1 Mess- und Prüfkriterien für Qualität und Quantität von Erschließungs- und Kuratierungsprozessen, -akteur*innen und -ergebnissen zusammengestellt.

 

Einleitung

zentrale Begriffe

Bildungsinhalte und Daten: Bildungsinhalte sind alle Dokumente, Daten oder Sofwarewerkzeuge, die für das Lehren und Lernen verwendet werden können. Dies sind Lehr- und Lernmaterialien, Kurse, Lernsoftware, Offene Lernorte und andere "Dinge" die das Lehren und Lernen unterstützten.

Inhaltequalität: Analog zur Fachliteratur zu Datenqualität werden Inhalte als qualitativ hochwertig angesehen, wenn sie für ihren vorgesehenen Gebrauch in operativen Lehr-/Lernsituationen für das Lehren oder Lernen oder das Planen von Lehren und Lernen geeignet sind. Hierfür entwickelte WirLernenOnline eine eigene Qualitätsmetrik für Inhalte auf Basis bestehender Qualitätsmodelle.

Metadaten: Metadaten werden für die Erfassung und Beschreibung eines Bildungsinhalts in strukturierter Form verwendet. Sie enthalten bspw. Informationen über den Inhalt, Titel, Format oder Herausgeber eines Inhalts.

 

Bildunterschrift

 

Metadatenqualität: Qualitativ hochwertige Metadaten erleichtern das Auffinden und die Nutzung von Inhalten. Analog zur Fachliteratur werden folgende Qualitätsmerkmale für Daten und Metadaten [NQDM] verwendet:

  • Aktualität (operationalisiert in regelmäßigen Prüf- und Aktualisierungsintervallen, Zeitstempel, Versionsnummer)

  • Fehlerfreiheit (Metadaten müssen korrekte Werte enthalten)

  • Genauigkeit (um hohe Relevanz von Inhalten zu einer Lehr-/Lernsituation schlussfolgern zu können, sollte Inhaltetyp, Eignung für Zielgruppenbedürfnisse und Einsetzbarkeit sowie andere Eigenschaften so genau wie möglich und wirtschaftlich erfasst werden)

  • Konformität und Verständlichkeit (bspw. müssen Metadatenvokabulare und deren Verwendung beim Vertaggen die Erwartung der Nutzendenzielgruppe treffen)

  • Konsistenz (Metadaten sollten widerspruchsfrei sein. Nicht konsistent wäre z.B. ein Erstellungsdatum nach dem Datum der letzten Änderung)

  • Transparenz und Vertrauenswürdigkeit (Ursprung und Veränderung der Metadaten sollten nachvollziehbar kenntlich gemacht werden)

  • Verlässlichkeit (wie verlässlich die Informationen sind, sollte z.B. mit einem Status bzw. einer Angabe zum Reifegrad kenntlich gemacht werden)

  • Vollständigkeit (Metadaten die zwingend für die Auffindbarkeit und Weiternutzung nötig sind müssen enthalten sein)

  • Zugänglichkeit und Verfügbarkeit (Datensätze sollten auffindbar und langlebig verlinkbar sein)

 

Was kann Qualität und Quantität haben?


 

Akteure / Dinge

Quantität

Qualität

Akteure / Dinge

Quantität

Qualität

1. Inhalte / Metadatenbestand HUB

 

  • Anzahl Metadatensätze

  • Anzahl erschlossener Quellen

  • Anzahl / Umfang Nutzung

  • korrekte, genügende Metadaten für Auffindbarkeit
    (WLO definiert z.B. für folgende Status Mindestmetadaten: 1. ausreichend für WLO 2. redaktionelle Qualität, 3. Qualität als KI-Lerndatensatz)

  • korrekte, ausreichende Metadaten für Sicherheitsbedürfnisse
    (z.B. korrekte Information zu Lizenz, Datenschutz u.a. rechtlichen Eigenschaften)

  • Doublettenfrei
    (keine Doubletten im WLO-HUB und
    Doublettenfilterbarkeit bei Transfer in Zielsysteme, die der HUB beliefert)

  • Standardkonforme Metadaten bzw. Mappbarkeit auf externe verwendete Metadatenformate und -vokabulare

  • ...

 

2. Fachportale

  • Anzahl Fachportale

  • Anzahl der Inhalte in Fachportal X

  • Anzahl der Mitwirkenden an Fachportal X

  • Anzahl Follower / Besucher

  • Anzahl / Umfang Nutzung 

Bewertung durch Nutzende

– Würdet ihr als Lehrende/r das Fachportal (Startseite) regelmäßig besuchen, weil es:

  • einen echten Mehrwert für den Unterricht bietet?

  • Tages-Aktuelles liefert und Recherchearbeit spart?

  • fertige Unterrichtsbausteine bietet, falls eine überraschende Vertretungsstunde ansteht?

  • Unterstützung für zeitgemäße Bildung bietet, also Lehrenden hilft, digital zu unterrichten?

– Würden eure Schüler*innen das Fachportal nutzen, weil es:

  • einen guten Einstieg und Überblick in das Fach gibt?

  • es für alle Lehrplan-Themen der Schulzeit eine Themenseite gibt?

  • und diese gut gefüllt und übersichtlich ist?

– Würden Gutachter*innen das Fachportal empfehlen, weil es:

  • Sachrichtig,

  • Aktuell,

  • Neutral,

  • Sprachlich vorbildlich

  • Didaktisch und Methodisch gut ist

  • und von renommierten Redakteur*innen herausgegeben wird, die alle nötigen Qualitäts- und Erfahrungsaspekte abdecken

– Ist das Fachportal…

  • gut auffindbar (Google- u.a. Suche als Top-Treffer)?

  • hat selbst gute Metadaten (sowohl in Webseiten als auch im HUB)?

  • angemessen besucht und hat Follower?

  • mit angemessenem Aufwand erstellt und gepflegt worden?

 

3. Themenseiten

(redaktionelle Sammlungen)

  • Anzahl Themensammlungen / -seiten

  • Anzahl Inhalte je Sammlung / Thema

  • Anzahl Inhalte aufgeschlüsselt nach Eigenschaften wie Inhaltetyp, Zielgruppe etc.

  • Anzahl Follower / Nutzung

Bewertung durch Nutzende

– Würdet ihr als Lehrende/r die Themenseite bei Bedarf besuchen, weil es

  • einen echten Mehrwert für den Unterricht bietet?

  • Recherchearbeit spart und Tages-Aktuelle Inhalte sofort verfügbar sind?

  • fertige Unterrichtsbausteine bietet, falls eine überraschende Vertretungsstunde ansteht?

  • Unterstützung für zeitgemäße Bildung bietet, also Lehrenden hilft, digital zu unterrichten?

– Würden eure Schüler*innen die Themenseite nutzen, weil sie:

  • einen guten Einstieg und Überblick in das Lehrplanthema gibt?

  • und diese gut gefüllt und übersichtlich ist?

– Würden Gutachter*innen die Themenseite empfehlen, weil die Inhalte:

  • Sachrichtig,

  • Aktuell,

  • Neutral,

  • Sprachlich gut

  • Didaktisch und Methodisch gut sind

  • und die Sammlung von renommierten Redakteur*innen herausgegeben wird, die alle nötigen Qualitäts- und Erfahrungsaspekte abdecken?

– Ist die Themenseite selbst

  • gut auffindbar (Google- u.a. Suche als Top-Treffer)?

  • hat selbst gute Metadaten (sowohl in Webseiten als auch im HUB)?

  • wird angemessen besucht und hat Follower?

  • mit angemessenem Aufwand erstellt und gepflegt worden?

 

4. Themenbaum im Fachportal

  • Anzahl Themen je Fach

  • Bildet der Themenbaum typische Lehrplanthemen im Unterricht ab und ist die Baumstruktur verständlich und praktikabel für Lehrende der Zielgruppe?

  • Sind die Themen so gewählt, dass sie typische Suchmaschinenanfragen von Lehrenden und Lernenden treffen?

  • Ist die SEO-Optimierung so, dass die Suchmaschinen Treffer haben?

to be continued 

 

 

 

 

Inhaltebestand HUB


Beispiel WLO

Das Intranet bietet den Redaktionen und Beteiligten folgendes Dashboard mit dem aktuellen Stand des Open Edu Hub / WirLernenOnline:

 

Wieviele Quellen erschlossen wurden und welche in Erschließung sind, wird in einer Quellenerschließungsübersicht öffentlich gezeigt:

 

Intern existieren via Kibana Auswertungsfunktionen. In Arbeit ist eine öffentlich einsehbare tabellarische Metrik des Füllstands des HUB, die in einer 2. späteren Entwicklungsstufe für Nutzende umschaltbar und filterbar gestaltet werden soll:

 

Quelle A

Quelle B

...

Quelle Z

Umschalter / Filter (2. Stufe)

 

Quelle A

Quelle B

...

Quelle Z

Umschalter / Filter (2. Stufe)

Beschreibendes

 

 

 

 

Spalten:

  • Quelle

  • Fachportal (Fachredaktion)

  • Buffets (Prüfbuffet, Suchbuffet, Redaktionsbuffet, KI-Buffet)

  • unverwendet / verwendet

Filter:

  • nur redaktionell geprüft

  • nur Crawler

  • nur 

Zellanzeige

  • Anzahl Prüfbuffet, Suchbuffet, Redaktionsbuffet

Cover

 

 

 

 

Kurztitel

 

 

 

 

Voller Titel

 

 

 

 

Beschreibung

 

 

 

 

Status

 

 

 

 

URL

 

 

 

 

Sprache

 

 

 

 

Typisierung

 

 

 

 

Typ des Inhalts

 

 

 

 

Dateiformat (Mimetype)

 

 

 

 

Dateiformat (Editorwahl)

 

 

 

 

Bildungsstufe

 

 

 

 

...etc.

 

 

 

 

 

 

Fachportale / Themensammlungen

Fachportale werden vor einer Freischaltung einem Peer-Review mit einer anderen Fachredaktion sowie der Redaktionsleitung des Teams unterzogen. Dabei wird auch der Lehrplanthemenbaum geprüft.

Anschließend wird der Füllstand und die Metadatenqualität des Fachportals gemonitort. Folgende Übersicht hilft Fachredaktionen und der Leitung den Füllstand der Themen zu sehen und zu verbessern. Je Thema wird aufgeschlüsselt je wichtigster Inhaltetypen der Bestand der redaktionellen Sammlung versus des Gesamtbestands des des HUBs gezeigt. Dies ist Grundlage für folgende Qualitätsverbesserung:

  1. Inhalte der Suche können geprüft und in redaktionell geprüfte Sammlungen übernommen werden

  2. Inhalte in der Suche, die durch maschinelle Metadatenerzeugung unberechtigterweise dem Lehrplanthema zugeordnet sind, können überarbeitet und dem richtigen Lehrplanthema zugeordnet werden.

  3. Die Redaktionsressourcen können gezielt gelenkt werden, damit für die wichtigsten Inhaltetypen je Lehrplanthema 5 gute Inhalte verfügbar sind.