Zum Hauptinhalt springen

Hadoop-Lösungen für Big Data

Supermicro und Cloudera Solutions

Die Herausforderung

Die sich ständig weiterentwickelnden Anwendungen generieren enorme Datenmengen – von strukturierten über unstrukturierte bis hin zu semistrukturierten Daten. Herkömmliche IT-Infrastrukturen sind nicht darauf ausgelegt, die Vielfalt, Geschwindigkeit und das Volumen der Daten zu bewältigen, die von sozialen Netzwerken, mobilen Anwendungen, Maschinensensoren und wissenschaftlichen Studien etc. erzeugt werden. Für Unternehmen ist die Nutzung von Big-Data-Analysen daher nicht mehr eine Frage des Wann, sondern des Wie. Hadoop, entwickelt für die kosteneffiziente Speicherung und Verarbeitung großer Datenmengen, ist genau für diesen Zweck geschaffen. Es lässt sich linear auf Tausende von Servern und Petabytes an Speicherplatz skalieren.

Wie man die Hadoop-Technologie optimal nutzt und sich Wettbewerbsvorteile sichert, beschäftigt nahezu jeden CIO in Unternehmen. Für Unternehmen entscheidet die effiziente Implementierung der Hadoop-Infrastruktur über Sieg oder Niederlage im harten Kampf um Marktanteile. Unternehmen, die Hadoop-Lösungen einsetzen, investieren oft erhebliche Ressourcen in die Suche nach der besten Architektur und dem leistungsfähigsten Lösungsanbieter. Hier setzt die Hadoop-Technologie an. Supermicro kommt zur Hilfe.

Die Lösung

Wir stellen vor Supermicro Hadoop-Cluster sind eine Reihe optimierter Big-Data-Lösungen, die hohe Leistung, hohe Zuverlässigkeit und hohe Skalierbarkeit bieten. Supermicro Hadoop-Lösungen sind vollständig integrierte, optimierte und getestete schlüsselfertige Cluster mit flexiblen Supportpaketen, die auf kundenspezifische Anforderungen zugeschnitten sind.

Supermicro Hadoop-Cluster verfügen über branchenerprobte, hochdichte Rechen- und Speicherserver, die mit erstklassigen Komponenten bestückt sind. Diese Komponenten wurden durch umfangreiche Entwicklungs-, Validierungs- und Testprozesse ausgewählt. Zertifizierte Konfigurationen vereinfachen die Planung und Bereitstellung einer skalierbaren Big-Data-Rechen- und Speicherinfrastruktur, die selbst höchsten Ansprüchen in Unternehmens-IT- und Rechenzentrumsumgebungen gerecht wird.

Supermicro Vorteil

  • Von Grund auf mit optimalen Server- und Clusterkonfigurationen entwickelt , die einer Vielzahl von Arbeitslasten gerecht werden.
  • Bewährte Lösungen, basierend auf umfangreichen Labortests und groß angelegten Produktionseinsätzen.
  • Erzielen Sie das beste Preis-Leistungs-Verhältnis und das beste Preis-Kapazitäts-Verhältnis mit branchenführenden Server- und Speicherplattformen.
  • Komplett ausgestattete Hadoop-Cluster mit vollständig integrierter Hardware, Software und globalem Support
  • Fortschrittliche Architektur basierend auf neuesten Technologien wie SkyLake-CPUs, SAS3, NVMe Optane-Antriebe 
  • Verbesserte Netzwerkleistung und Redundanz mit dualen 10GbE-/25GbE-/40GbE-/100GbE-Optionen
  • Automatisierte vollständige Clustertests gewährleisten Build-Qualität und termingerechte Lieferung.

Vollständig integrierter Hadoop-Cluster

Hauptmerkmale und Vorteile:

  • Speziell entwickelte Clusterkonfigurationen, optimiert für Kapazität, Rechenleistung oder E/A-Leistung
  • Hochverfügbares NameNode-Design ohne Single Point of Failure
  • Große Speicheroptionen, die speziell für Spark und andere speicherbasierte Berechnungen mit geringer Latenz entwickelt wurden.
  • Hyper -Skalierbare Serverplattformen, die für extrem große Installationen konzipiert sind
  • Hochdichtes Rechen-, Speicher- und Arbeitsspeicherdesign zur Erzielung höchster Effizienz und niedrigster Kosten TCO
  • Flexible Netzwerk-Switch-Optionen mit 1 oder 2x 10G / 25G / 100G Switches pro Rack.
  • Kostengünstiges 14U-Rack-Design, ideal für Proof-of-Concept-Testumgebungen
  • Standardmäßiges 42U-Rack-Design und flexible PDU-Optionen, die jeder Rechenzentrumsumgebung gerecht werden
  • Bis zu Titan-Niveau (96 %+) Effizienz – Redundante Netzteile mit PMBus
  • Integrierte IPMI- und SMC-OOB-Suite (Out-of-Band-Management) für automatisiertes Clustermanagement
  • Vollständig integriert, vollständig konfiguriert und umfassend mit Hadoop-Distributionen Ihrer Wahl getestet
  • Ein Proof-of-Concept-Testcluster steht für ein risikofreies Kauferlebnis zur Verfügung.
Supermicro vollständig integrierte Hadoop-Cluster-Lösung Rack
  • 1 oder 2x 48-Port 10G SFP+ / 10GBase-T / 25GbE
    1 oder 2 x 32-Port-100GbE-Switch, 1 x 48-Port-Switch, GbE
  • 1x Management-Knoten 1U UP Skylake 41xx / 51xx
  • 3x Name Nodes 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • Optimierte Datenknoten 2U SSG, 2U BigTwin oder 4U FatTwin mit Skylake 41xx / 51xx / 61xx / 81xx Prozessoren, dual 10G / 25G / 40G pro Knoten, 2,5" und 3,5" HDD Optionen
  • Standardmäßiges 42U-Rack mit verbrauchsabhängigen Stromverteilungseinheiten (PDUs), Rack-Anpassungsoptionen verfügbar
  • Der Integrationsservice umfasst einen vollständigen Burn-in und Test des Clusters, BIOS- und Firmware-Updates, Netzwerkkonfiguration, die Vorinstallation der gewünschten Hadoop-Distribution und den vollständigen Cluster.

Technische Spezifikationen für Hadoop-Cluster

 Hohe KapazitätE/A-optimiertHochdichtes RechnenAusgewogene
ModellSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
DatenknotenSSG-6029P-E1CR24LSYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
Datenknoten (Anzahl)18323637
Formfaktor2U SuperStorage2U BigTwin4U FatTwin1U SuperStorage
2x SKL 4114 2P 10C/20T 2,2G 85W2x SKL 5118 4/2P 12C/24T 2,3G 105W2x SKL 6130 4/2P 16C/32T 2,1G 125W2x SKL 5118 4/2P 12C/24T 2,3G 105W
128 GB192 GB256 GB128 GB
24 Bay 3.5"6-Bay 2,5"8-Bay 3,5"12-Bay 3,5"
Total Data Drive432448 ( NVMe )*288444
Gesamtkerne3607681152888
GesamtspeicherWert2,3 TB6,144 TB9,2 TB4,7 TB
Gesamtspeicher3,45 PB (8 TB)1,792 PB (4 TB)1,15 PB (4 TB)2,66 PB (6 TB)
Namensknoten3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
Schalter1x 48PT 25GBase-T2x 32PT 40G1x 48PT GbE1x 48PT10G SFP+
Schrank (B x H x T)42U
23,5 x 82,4 x 48
PDDual2x 50A 208 3-Phasen-Stromverteilungsgerät mit Zähler
*HINZUFÜGEN von 8 x 32 2,5"-Laufwerken JBOF = 256 NVMe

Server-Spezifikationen

  • Unternehmensdatenbanken, Datenbankverarbeitung und -speicherung, Enterprise-Server, HPC, Rechenzentrum, iSCSI-SAN
  • Dual Socket P (LGA 3647) Unterstützung: Intel® Xeon® Skalierbare Prozessoren; 3 UPI bis zu 10,4 GT/s
  • 24 DIMM-Steckplätze; bis zu 3 TB ECC 3DS LRDIMM oder RDIMM DDR4 2400 MHz
  • 24 Hot-Swap-fähige 3,5"-SAS3/SATA3-Laufwerksschächte, 2 Hot-Swap-fähige 2,5"-Laufwerksschächte (Rückseite); SAS3 über Broadcom 3008 AOC
  • 2 PCI-E 3.0 x16- und 1 PCI-E 3.0 x8-Steckplatz
  • 1 Dedizierter IPMI-Anschluss
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Typ A
  • 5 redundante 80-mm-PWM-Lüfter im laufenden Betrieb.
  • 1600-W-Redundanznetzteile der Titan- Klasse (96 %)
  • 4 DP-Knoten in 2 HE; Tiefe 28,5", jeder Knoten:
  • Dual Socket P (LGA 3647) Unterstützung: Intel® Xeon® Skalierbare Prozessoren; Dual-UPI bis zu 10,4 GT/s
  • 24 DIMMs; bis zu 3 TB ECC 3DS LRDIMM oder RDIMM DDR4‑2666MHz
  • 6 Hot-Swap 2,5" NVMe Laufwerksschächte pro Knoten
  • 2 PCI-E 3.0 x16 Low-Profile-Steckplätze, Unterstützung für 1 Netzwerk-SIOM-Karte
  • 1 dedizierter IPMI-Anschluss, 1 VGA-Anschluss, 2 USB 3.0-Anschlüsse, 1 SuperDOM-Anschluss
  • 4 Hochleistungslüfter (80 mm) mit optimaler Lüfterdrehzahlregelung
  • 2200-W-Redundanznetzteile der Titan- Klasse (96 %)
  • FatTwin™ Server; JEDER KNOTEN (x4 Hot-Plug-Systemknoten):
  • Dual Socket P (LGA 3647) Unterstützung: Intel® Xeon® Skalierbare Prozessoren; Dual-UPI bis zu 10,4 GT/s
  • 12 DIMMs; bis zu 1,5 TB ECC 3DS LRDIMM, bis zu DDR4-2666 MHz
  • 8x 3,5" SAS3 oder 6 SAS3 + 2 optional. NVMe U.2; SAS3 mit Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM: flexible network opt.)
  • 1 dedizierter IPMI-Anschluss, 1 VGA-Anschluss, 2 USB 3.0-Anschlüsse, 1 M.2-Steckplatz
  • 2x 8cm 14k U/min Mittellüfter
  • 1200-W-Redundanznetzteile der Titan- Klasse (96 %)
  • Hochdichte Speicherung, Objektspeicher 1U, Ceph/Hadoop, Scale-Out-Speicher, Big-Data-Analyse
  • Dual Socket P (LGA 3647) Unterstützung: Intel®-Prozessoren der 2. Generation Xeon® Skalierbare Prozessoren; Dual-UPI bis zu 10,4 GT/s
  • 12 Hot-Swap-fähige 3,5"-SAS3/SATA3-Laufwerksschächte, 4 Hot-Swap-fähige 2,5"-Laufwerksschächte NVMe / SATA Laufwerksschächte
  • 12 DIMMs; bis zu 3 TB 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Unterstützt Intel® Optane™ DCPMM*
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2x 10GBase-T-Ports über Intel C622, 1 dedizierter IPMI-Port
  • 1 VGA-Anschluss, 4 USB 3.0-Anschlüsse, 1 TPM-Anschluss
  • 6 x 4 cm Lüfter mit 20,5K U/min
  • 600-W-Redundanznetzteile der Platinklasse

*Kontaktieren Sie Ihren Supermicro-Vertriebsmitarbeiter für weitere Informationen.

  • Layer 2/3 Ethernet Switching, Link Aggregation (LACP), Jumbo Frames, VLAN-Unterstützung
  • Flexibilität bei der Konfiguration:
    • SSE-G24-TG4 – 24 RJ45-Ports mit 1 Gbit/s Ethernet, davon 4 SFP-Combo-Ports und 4 Ports mit 10 Gbit/s Ethernet (CX4, XFP oder SFP+), Stacking
    • SSE-G48-TG4 – 48 RJ45-Ethernet-Ports (1 Gbit/s) mit 4 SFP-Combo-Ports, 4 Ethernet-Ports (10 Gbit/s) (CX4, XFP oder SFP+), Stacking
    • SSE-X24S / SSE-X3348S(R) – 24 Ports 10 Gbit/s Ethernet (SFP+), Option für umgekehrten Luftstrom
  • Verwaltung: Webbasierte Verwaltungsschnittstelle, Industriestandard-CLI mit Telnet-SSH oder lokalem Verwaltungsport, Skripting, Protokollierung
  • Routing, Multicast:
    • Dienstqualität und DiffServ – 8 Prioritätswarteschlangen pro Port; Angepasstes WRR und strikte Prioritätsplanung
    • Sicherheit – Portbasierte Authentifizierung nach 802.1x, RADIUS- und TACACS+-Authentifizierung, SSH-/SSL-Verschlüsselung
  • Abmessungen: 17,3 "B x 15,2 "T x 1,7 "H (440mm x 386mm x 43mm)
  • 32x 100-Gigabit-Ethernet-Anschlüsse
    (Jeweils optional konfigurierbar für 40 Gigabit oder 4 x 25 Gigabit)
  • Layer-3-Routing mit Drahtgeschwindigkeit
  • 1:1 Nicht-blockierende Konnektivität
  • 1U-Formfaktor für flexible Installation
  • Rechenzentrumsfreundlich - Modelle mit normalem und umgekehrtem Luftstrom
  • Redundante hot-plug-fähige Netzteile
  • Blankes Metall – ONIE installiert
  • Cumulus Linux-fähig
  • HW-Fehlermeldungen - E-Mail oder SNMP
  • Redundanter Zugang für die Verwaltung
  • Unterstützung für offene Standards (SMASH 2.0, LDAP, WSMAN)
  • VLAN-Unterstützung
  • KVM und Virtual Media und SOL (keine zusätzliche Lizenz erforderlich)
  • Einfache Wartung (Befehlszeilen-Flash-Tools zur Aktualisierung der Firmware)

Supermicro Integrations- und Konzeptnachweis-Labordienstleistungen

Details anzeigen