Since I am getting less questions about the installation during the lab activities, I suppose the code was again improved and is even more stable. This is a Good Thing (TM). The only issue we had in the last training session was the inability to add nodes to an existing cluster. Apparently, this was not a technical issue (aka bug) but a configuration problem: The time of the nodes that should have been added to the cluster were set six hours into the future, which effectively kept these nodes from joining the existing cluster. This is a wise decision by the programmers, so there will be no inconsistencies within the cluster timing.

The fix was quite easy: log in to the nodes that you want to add to the cluster and issue “ntpdate <IP of any existing cluster node>”. Of course you need to be logged in as a user that has the permission to do that, which means you are HDS staff or HDS Partner personell

Let’s talk a bit about new functionality: With the introduction of tenants and namespaces, HCP was developed into a real multi-functional tool, that goes beyond mere archiving. Versioning, the ability to delete files that are not under retention, the segregation of administration and data, HCP can serve different purposes from backup backend over Source Code Repository to “Write Seldom Read Many” Content Repositories. In terms of modern IT you could also talk about a cloud storage system, because it decouples the storage clients from the storage system and enables dynamic scaling and rebalancing of storage infrastructure components.

You can find more information here: http://www.hds.com/products/storage-systems/content-platform/content-archive-platform.html

Prinzipiell sind es die selben Systeme, die OEM-Partner BlueArc bereits im Juli unter dem Codenamen “Mercury” vorgestellt hat. Die Systeme heißen bei Hitachi “Hitachi NAS” 3080 und 3090 (BlueArc Mercury 50 und 100) und haben den selben Funktionsumfang wie die NAS Systeme aus der Reihe Hitachi High Performance NAS 3100/3200 (BlueArc Titan 3000). Dabei sind die Midrange Systeme nur geringfügig weniger skalierbar und performant wie die  High Performance Variante.

Technisch handelt es sich zwar nicht um eine revolutionäre Neuentwicklung, dafür besannen sich die Entwickler darauf, die bereits vorhandenen Stärken zu nutzen und das Design zu vereinfachen. Durch den Einsatz einer neuen Generation von FPGAs in den 3080 und 3090 Systemen  konnte die Komplexität der internen Hardwarearchitektur und damit der Preis deutlich reduziert werden, somit erschliesst sich ein komplett neuer Kundenkreis. Dabei besitzt diese neue Generation der NAS Systeme den selben Funktionsumfang wie die vorhergehende, man spricht sogar davon, dass die neue Generation zukünftig wohl Funktionen abbilden wird, die mit älteren Systemen der (3100 und 3200) nicht möglich sind.

Vergangene Woche konnte ich mich im Rahmen eines “Differences Training” bei HDS bereits von der Leistungsfähigkeit der Systeme überzeugen. Die Änderungen für den täglichen Betrieb fanden alle “unter der Haube” statt, d.h. das Betriebssystem ist das gleiche geblieben, damit auch die Oberfläche und die Administration. Durch das gleiche Betriebssystem ist auch die Kompatibilität zu den 3100 und 3200 Systemen gewährleistet. Man kann “alt” und “neu” zwar nicht im selben Cluster betreiben, aber in der selben Serverfarm. Damit können Enterprise Virtual Server (EVS = virtuelle NAS Instanzen) von einem 3100/3200 auf ein 3080/2090 verschoben werden (und auch wieder zurück). Migrationen und Lastverteilung steht somit nichts mehr im Weg. Weitere Features werden mit der nächsten Version des Betriebssystems erwartet, dessen GA-Datum allerdings noch nicht bekannt ist. Bis dahin darf ich leider auch nichts über die erwarteten Neuerungen schreiben…

Ab Ende September führt HDS in allen deutschen Standorten Tech Minutes zum Thema NAS durch, für die man sich hier anmelden kann. Mein Kollege Timo Drach zeigt im Rahmen der Veranstaltung eine Live Demo der neuen Systeme. Unser Vertriebskollege Christian Bischof wird zusammen mit unserem Kunden nacamar über die Einführung der Hitachi High Performance NAS Systeme für WebTV und Media Streaming sprechen. Im Rahmen dieser Tech Minutes können Sie auch eine Teststellung in Ihrem RZ vereinbaren, um die Systeme hautnah zu erleben!

Tony Asaro (HDS) hat ebenfalls etwas zum Thema geschrieben.

• Highly Available – 99.99%+ available
• Supports multiple disk-types and sizes within the array
• Supports multiple RAID Levels
• Highly Scalable – Supports 500+ disks and supports many hosts attached
• Highly Performant – Whatever that means
• Non-disruptive upgrades – Internal code and hardware can be replaced/upgraded with no service outage

Zu diesen allgemeinen Merkmalen zählen aber weitere, die kein anderes modulares System derzeit anbieten kann:

• Active/Active Controller
• Dynamic Provisioning
• High Density Storage Tray

Active/Active Controller heißt, dass der I/O zu einer LUN wahlweise über jeden der beiden Controller erfolgen kann, und das bei gleicher Performance (übliche Controller-Architekturen arbeiten mit einem Primary Controller, der alle Schreibvorgänge auf eine bestimmte LUN ausführen muss, was im Regelfall zu einem höheren Overhead und damit zu einer geringeren Performance führt).

Hinter Dynamic Provisioning steckt die gleiche Idee, die bereits DataCore (und andere) nutzen: Speicherbereiche, die lediglich Nullen enthalten, werden nicht physikalisch auf den Festplatten belegt, stattdessen verweist die Speicheradresse auf einen Standard-Nullbereich. Das funktioniert, weil die AMS2000 erkennt, wenn ein Dateisystem auf dem zugreifenden Host formatiert wird und somit werden nur Nullen auf die Festplatten-Bereiche geschrieben. “Space Reclamation”, also das Zurückholen bereits belegter Festplattenbereiche, funktioniert übrigens auch: Da Space Reclamation ein nachgelagerter Prozess ist, “durchforstet” er auch bestehende LUNs und gibt Speicherbereiche, die nur mit Nullen belegt sind, wieder frei.

[Update] Wie in den Kommentaren versprochen und von tdrach gefordert, hier ein Update zum Thema Thin Provisioning in der AMS2000: Wie Hu Yoshida in seinem Blog ausführt, beherrscht die AMS2000 kein “Zero Space Reclaim”, sie erkennt also nicht, wenn Nullen auf die Disks geschrieben werden und damit wird kein Speicherplatz nachträglich freigegeben. Weiter allokiert die AMS2000 keine 42MB Chunks (wie die HDS USP V/USP VM), sondern 1GB Chunks, die in 32MB “Chunklets” aufgeteilt werden. Das heißt aber auch, dass Speicher immer in 1GB-Schritten allokiert wird. Grund dafür ist der einfachere Aufbau der Controller-Architektur im Vergleich mit den HDS Enterprise-Systemen. Bei USP-V/VM gibt es dedizierten Speicher (Shared Memory, unabhängig vom Cache) in dem die Adressierung der Chunks liegt, damit ist der Zugriff sehr schnell und ohne Performanceverlust. Jeder AMS-Controller hat nur einen begrenzten Speicherbereich (max. 8GB), der sowohl den Chunk-Index (neben anderen Verwaltungsinformationen) als auch den Cache beinhaltet.  Im Grunde ist es wie immer: “Enterprise Features require Enterprise Budget”.

Beim High Density Storage Tray handelt es sich um ein Erweiterungsmodul der AMS2000, das die gleiche Größe (4 HE) hat wie die “normalen” Storage Trays mit 15 Festplatten. Der Unterschied besteht darin, dass das High Density Storage Tray bis zu 48 Festplatten aufnehmen kann und somit mehr als die dreifache Kapazität bereitstellt. Da die Festplatten von oben bestückt werden, sollte das Rack wohl besser mit dem Boden verankert sein, damit man nicht unter Terabytes von Daten begraben wird…

HDS hat in den vergangenen Wochen bereits andere Neuerungen angekündigt, die in der Branche ihresgleichen suchen (z.B. High Availability Manager). Auch wenn die Konkurrenz mit Symmetrix V-Max oder XIV das technische Backend der Speichersysteme erneuert (von einer Revolution würde ich nicht sprechen wollen), bleiben dort die direkten, positiven Auswirkungen auf die Prozesse und im Endeffekt auf die Kosten der Kunden hinter den Erwartungen zurück.
Mit den neuen Features von HDS bietet sich für Kunden direktes Einsparpotential durch Verringerung der benötigten Plattenkapazität und Reduzierung der benötigten Stellfläche.
Zudem sind aus meiner Erfahrung die HDS-Speichersystem die zuverlässigsten Geräte am Markt, was für die Aufrechterhaltung einer produktiven Infrastruktur nicht unerheblich ist (straff organisierte Betriebsprozesse lassen bei unerwartet auftretenden Problemen oft keine Fehlersuche im nötigen Umfang zu).

Alles in allem sind die heute auf dem Markt befindlichen modularen Speichersysteme hinsichtlich Verfügbarkeit und Performance sehr nahe an die Enterprise-Klasse herangerückt. Im Vergleich mit Enterprise Speichersystemen der letzten oder vorletzten Generation müssen sich die modularen Systeme nicht verstecken. Für Endkunden besteht hier besonders durch die exakte Definition der Anforderungen, speziell was das I/O-Profil der anzubindenden Server angeht, ein hohes Einsparungspotenzial durch den Einsatz modularer Systeme.

[Update] Da ich gerade darüber gestolpert bin und einige Leute danach gefragt haben: Empfehlung für VMware Multipathing mit HDS AMS2000