Mit dem Big-Data-Framework Hadoop 3.0.0 kann Apache nach einigen Jahren Entwicklungszeit ein Major-Update veröffentlichen.
Hadoop birgt in der neuen Version umfangreiche Neuerungen. Andrew Wang, der Release-Manager von Apache Hadoop kann deshalb von einem Meilsenstein und der bislang größten Veröffentlichung sprechen. Hadoop 3.0.0 kommt rund fünf Jahre nach der Major-Version 2.0.0 auf den Markt. In dieser Zeit sei die Community bemüht gewesen, Hadoop an neue Hardware-Trends und wechselnde Workloads anzupassen.
Zu den Highlights der 3er-Ausgabe zählt Wang die Verwendung von Erasure-Coding für das Hadoop-Filesystem HDFS. Damit verringere sich der Speicherbedarf um rund die Hälfte, einhergehend sei die verbesserte Datenkonsistenz. Weiterhin nutzt Hadoop nun den YARN Timeline Service v.2, was den Timeline-Service in Sachen Skalierbarkeit und Zuverlässigkeit verbessere. Die Leistungsfähigkeit im Zusammenspiel mit den populären Cloud-Speicher-Services wie Amazon S3 und Microsoft Azure sei ebenfalls gesteigert worden. Den Download und weitere Informationen liefert die Webseite des Hadoop-Projekts.
