Neue Zusammenarbeit in der wissenschaftlichen Datenverarbeitung

Die Archivierung und Bearbeitung von den Daten die bei der Erdbeobachtung anfallen, stellt die ESA vor einige Herausforderungen. Die Verwaltung der bisherigen und den täglich anfallenden Daten (mehrere 100Gb) ist kostenintensiv und benötigt einiges an Ressourcen. Bei der Verarbeitung solcher Daten mit “Grid Computing”* nimmt die ESA eine Pionierstellung ein.

Das ambitiöse Projekt DILIGENT ( DIgital Library Infrastructure on Grid ENabled Technology) wird nun in Zusammenarbeit mit der ESA und diversen weiteren Partnern, das Grid-Konzept und das Konzept der “digital libraries” für die weltweilte wissenschafliche Zusammenarbeit zusammenbringen.
“The objective of DILIGENT is to create an infrastructure for the creation of Digital Libraries on demand, so a new one could be created each time a virtual organisation needs it as a supporting instrument for its activity. Each Digital Library would exist as long as it is useful for the virtual organisation.
DILIGENT will be built by integrating Grid and Digital Library technologies. The merging of these two different technologies will result in an innovative level of functionality providing the foundations of next generation collaboration environments able to serve many different research and industrial applications. ”

Neben der Möglichkeit Daten direkt online zu verarbeiten und diese nicht erst auf ein System mit den entsprechenden Kapazitäten downloaden zu müssen, ist auch die Aktualität der Daten viel stärker gegeben.

Quellen:
ESA joins European effort to create Digital Libraries for science 26 October 2004
DILIGENT Project Page

* “The Grid concept is named after the electricity grid, and works in the same way: a geographically dispersed (or ‘distributed’) network of computers provides users with access to advanced computing services, processing power and memory, enabling the solution of complex tasks beyond the capabilities of a single machine or local network.”