Apache Hadoop

Apache Hadoop  ist eine Open-Source-Suite von Software-Tools und Frameworks. Sie wurde entwickelt, um die Verarbeitung und Analyse großer Datensätze in Clustern von Computerressourcen zu vereinfachen, die jeweils über eine lokale Verarbeitung und Speicherung verfügen. Die Frameworks verwenden ein Dateisystem mit verteilter Speicherung und einfache Programmiermodelle, um die Leistung der verteilten Datenverarbeitung für alle zugänglich zu machen. Die Arbeitslasten können von einem einzelnen Server bis zu Tausenden skaliert werden. Das Framework ist so konzipiert, dass es Ausfälle innerhalb der verfügbaren Server auf der Anwendungsschicht des Netzwerkstapels bewältigt und somit die Notwendigkeit einer Hardware-Ausfallsicherheit beseitigt.