Ziel dieses Projekts ist es, das Problem der dynamischen Datenverteilung mit Hilfe eines nutzungsbasierten Paradigmas anzugehen. Die intelligente Umverteilung von Daten zwischen Servern hat ein großes Potential, das die Quellenauswahl während des föderierten Abfrageprozesses verbessert, die Generierung von Abfrageplänen optimiert und die Zwischenergebnisse sowie den Umfang der lokalen Verarbeitung (d.h. die zur Berechnung der Joins erforderliche Verarbeitung) stark reduziert. In 3DFed werden generische Algorithmen für die intelligente und automatische Umverteilung von großen Datensätzen zwischen Speicherlösungen entwickelt, welche die Entwicklung von hochleistungsfähigen Programmen zur föderierten Abfrage erleichtern. Zu diesem Zweck streben wir einen dynamischen Datenaustausch zwischen Speicherlösungen an und nutzen die Datenlokalisierung, um den Umfang der Berechnungen in einer einzigen Speicherlösung zu maximieren/auszugleichen. Ein Datensicherheitsmodell stellt sicher, dass die gemeinsame Nutzung von Daten die Einschränkungen bezüglich der gemeinsamen Nutzung von Daten zwischen zwei Speicherlösungen einhält (z.B. dass Speicherlösungen, die keine Daten gemeinsam nutzen sollten, niemals Daten gemeinsam nutzen). Der dynamische Datenaustausch kann eine Löschung, ein Einfügen oder das Einfügen eines replizierten Datenblocks aus einer anderen Speicherlösung sein. Die Entscheidung für den dynamischen Austausch wird hauptsächlich auf der Überwachung der Speicherlösungen basieren, insbesondere auf den föderierten Abfragen, die an die verteilte Speicherlösung gestellt wurden.
Verbundprojekt: Dynamische Datenverteilung und Föderation; Teilprojekt: Dynamische Verteilung und föderiertes Anfragen von Wissensgraphen
Laufzeit:
01.04.2021
- 31.03.2024
Förderkennzeichen: 01QE2114B
Koordinator: Universität Paderborn - Fakultät EIM-Informatik - Lehrstuhl für Data Science
Verbund:
E! 114681 3DFed
Quelle:
Bundesministerium für Bildung und Forschung (BMBF)
Redaktion:
DLR Projektträger
Länder / Organisationen:
Vereinigtes Königreich (Großbritannien)
Themen:
Förderung
Innovation