Zum Inhalt springen

Wo die Daten wohnen: Datenarchitektur einer KI-Lernplattform

Wo die Daten wohnen: Datenarchitektur einer KI-Lernplattform

Video: Wo die Daten wohnen: Datenarchitektur einer KI-Lernplattform1:33 Min. · ohne Cookies, ohne YouTube

Tarsus legt jede Datenart dort ab, wo sie am besten aufgehoben ist: Vektoren in der Vektordatenbank Qdrant, Dokumente in MongoDB, Originaldateien im Blob-Speicher. Eine Orchestrierungsschicht führt sie bei jeder Anfrage zusammen. Für adaptives Lernen bekommt jede lernende Person eigene Datenstrukturen.


Qdrant: die Vektordatenbank

Für die Suche werden Kursunterlagen in Vektoren übersetzt, also in Zahlenreihen, die die Bedeutung eines Abschnitts abbilden. Diese Vektoren liegen in Qdrant, einer Vektordatenbank aus Berlin. Qdrant sucht nach Nähe statt nach exakten Werten: Eine Suchanfrage findet die Abschnitte, die ihr inhaltlich am nächsten sind. Laut Hersteller ist Qdrant auf Milliarden von Vektoren ausgelegt.


Filter als Sicherheitsregel

Schon während der Suche greifen Filter. Sie wirken als Sicherheitsregel: Zurück kommen nur Treffer, die für die jeweilige Anfrage zulässig sind.


Eine eigene Instanz auf Azure

Qdrant betreibt Tarsus selbst, in einer eigenen Instanz auf Microsoft Azure. Die Inhalte der Kunden speichert Tarsus bei Microsoft Azure in Deutschland.


MongoDB: Daten und Dokumente

Zu jedem Vektor gehört ein Dokument in MongoDB mit derselben ID. Über diese ID kommt das System vom Suchtreffer zu den vollständigen Daten des Abschnitts.


Blob-Speicher: die Originale

Die Originaldateien liegen im Blob-Speicher, ob PDF, DOCX, EPUB, HTML, MP3 oder MP4. Alles bleibt im System.


Die Orchestrierungsschicht

Eine Orchestrierungsschicht führt die Speicher zusammen. Kommt eine Anfrage, holt sie aus Vektordatenbank, Dokumenten und Dateien genau die Daten, die für die Antwort gebraucht werden. Dazu kommen weitere kleine Speicher, etwa ein Dateispeicher.


Datenstrukturen für jede lernende Person

Für adaptives Lernen braucht jede Person eigene Daten. Tarsus legt für jede und jeden Lernenden eigene Dateien im Blob-Speicher an, mit drei Strukturen:

  • Prioritätswarteschlange: was als Nächstes dran ist, nach Dringlichkeit sortiert. Im Beispiel steht „Wiederholen: Fixkosten“ vor „Üben: Break-even“, „Lesen: Deckungsbeitrag“ und „Quiz: Kapitel 2“.

  • Sortierte Liste: Neue Einträge werden an der passenden Stelle eingefügt.

  • Matrix der Stärken und Schwächen: zeigt für jedes Thema, etwa Fixkosten, Break-even oder Deckungsbeitrag, wie sicher es sitzt.

So passt sich das Lernen an jede Person an. Wie der Lernstand dafür berechnet wird, zeigt der Film Die Lernrate: So berechnet adaptives Lernen den Lernstand.


Alles verbunden, alles am richtigen Ort

Qdrant für Vektoren, MongoDB für Daten, der Blob-Speicher für Rohdaten und Lernstrukturen, verbunden über die Orchestrierungsschicht. Jede Datenart liegt dort, wo sie schnell und sicher gefunden wird.


Was das für den Datenschutz bedeutet

Für Bildungseinrichtungen zählt, wo Kursinhalte und Lerndaten liegen. Tarsus arbeitet DSGVO-konform, speichert die Inhalte der Kunden bei Microsoft Azure in Deutschland, und der KI-Lerncoach greift nicht auf das Internet zu. Welche Lerndaten für Nachweise wirklich nötig sind, beschreibt der Beitrag Lernerfolgskontrolle und Schulungsnachweis.


Häufige Fragen

Was ist eine Vektordatenbank?

Eine Vektordatenbank speichert Texte als Zahlenreihen, die ihre Bedeutung abbilden, und findet zu einer Anfrage die ähnlichsten Einträge. Sie ist die Grundlage der semantischen Suche.

Wo speichert Tarsus die Daten?

Die Inhalte der Kunden liegen bei Microsoft Azure in Deutschland. Die Vektordatenbank Qdrant läuft in einer eigenen Instanz auf Azure.

Warum braucht adaptives Lernen eigene Daten pro Person?

Ein adaptives Lernsystem entscheidet für jede Person einzeln, was als Nächstes kommt. Dafür braucht es ihren Lernstand je Thema und eine Liste der anstehenden Schritte. Mehr im Leitfaden Adaptives Lernen: Definition, Beispiele und wie KI es umsetzt.


Weiterlesen

Weitere Blogartikel lesen

Weitere Blogartikel lesen