Datenwissenschaftliche Interoperabilitätsumgebungen in ScienceMesh

Das Team von Software Mind brachte viel Fachwissen in Bereichen wie Mikroservice-Architektur, Integration, agile Softwareentwicklung und Datenwissenschaft in das Projekt ein. Wir übernahmen die Leitung von Aufgaben auf der Referenzplattform für Cloud-Interoperabilität und in Datenwissenschaftsumgebungen.

ScienceMesh, ein von der EU gefördertes Projekt unter der Koordination von CERN, entwickelte ein wissenschaftliches Mesh-Netzwerk. Dieses Netzwerk ermöglicht die vernetzte Nutzung von Daten über verschiedene Synchronisations- und Freigabedienste hinweg sowie die gemeinsame Nutzung von Anwendungen. Dazu zählen beispielsweise kollaboratives Dokumenten-Editing, Datenarchivierung, Datenpublikation, schnelle Übertragung großer Datensätze und Remote-Datenanalysen in verteilten Datenwissenschaftsumgebungen.

Als Ergebnis lieferte Software Mind eine JupyterLab-Erweiterung namens “cs3api4lab”, die JupyterLab nahtlos mit ScienceMesh integriert. Das ermöglicht die Durchsuchung von Dateien sowie zusätzliche Funktionen zur Freigabe und Kollaboration für Notebooks und Ressourcen in der verbundenen Cloud innerhalb der JupyterLab-Umgebung. JupyterLab gilt als vollwertige IDE für Datenwissenschaftsaufgaben und interaktive Rechenprozesse, in der Datenwissenschaftler ihre Arbeit in einem einzigen Tool erledigen können. Daher sind Funktionen für das Teilen (vollständiger CS3APIs-Client) und die gleichzeitige Bearbeitung in dieser Umgebung verfügbar.

Zusätzlich wurden Datenwissenschaftsumgebungen in ScienceMesh mit einem umfassenden Angebot an Datendiensten integriert, um komplette Forschungs- und Datenwissenschafts-Workflows mit bestehenden Kollaborationstools zu unterstützen. Die kollaborative JupyterLab-Erweiterung wurde Teil des spezialisierten Jupyter Notebook-Dienstes von CERN – SWAN.