Verbundprojekt: Dynamische Datenverteilung und Föderation; Teilprojekt: Dynamische Verteilung und föderiertes Anfragen von Wissensgraphen

Ziel dieses Projekts ist es, das Problem der dynamischen Datenverteilung mit Hilfe eines nutzungsbasierten Paradigmas anzugehen. Die intelligente Umverteilung von Daten zwischen Servern hat ein großes Potential, das die Quellenauswahl während des föderierten Abfrageprozesses verbessert, die Generierung von Abfrageplänen optimiert und die Zwischenergebnisse sowie den Umfang der lokalen Verarbeitung (d.h. die zur Berechnung der Joins erforderliche Verarbeitung) stark reduziert. In 3DFed werden generische Algorithmen für die intelligente und automatische Umverteilung von großen Datensätzen zwischen Speicherlösungen entwickelt, welche die Entwicklung von hochleistungsfähigen Programmen zur föderierten Abfrage erleichtern. Zu diesem Zweck streben wir einen dynamischen Datenaustausch zwischen Speicherlösungen an und nutzen die Datenlokalisierung, um den Umfang der Berechnungen in einer einzigen Speicherlösung zu maximieren/auszugleichen. Ein Datensicherheitsmodell stellt sicher, dass die gemeinsame Nutzung von Daten die Einschränkungen bezüglich der gemeinsamen Nutzung von Daten zwischen zwei Speicherlösungen einhält (z.B. dass Speicherlösungen, die keine Daten gemeinsam nutzen sollten, niemals Daten gemeinsam nutzen). Der dynamische Datenaustausch kann eine Löschung, ein Einfügen oder das Einfügen eines replizierten Datenblocks aus einer anderen Speicherlösung sein. Die Entscheidung für den dynamischen Austausch wird hauptsächlich auf der Überwachung der Speicherlösungen basieren, insbesondere auf den föderierten Abfragen, die an die verteilte Speicherlösung gestellt wurden.