Soluciones Hadoop para Big Data

Soluciones de Supermicro y Cloudera

El desafío

Existe una enorme cantidad de información impulsada por las aplicaciones en constante cambio, desde datos estructurados y no estructurados hasta semiestructurados. La infraestructura de TI convencional no está hecha para manejar la variedad, la velocidad y el volumen de los datos producidos por las redes de medios sociales, las aplicaciones móviles, los sensores de las máquinas y las investigaciones científicas, etc. Para las empresas, utilizar la analítica de grandes datos ya no es una cuestión de cuándo, sino de cómo. Hadoop, diseñado para el almacenamiento y procesamiento rentables de grandes volúmenes de datos, ha nacido con este propósito. Puede escalarse linealmente hasta miles de servidores y petabytes de almacenamiento.

Aprovechar la tecnología Hadoop y obtener una ventaja competitiva es una prioridad para casi todos los CIO corporativos. Para las empresas, implementar la infraestructura Hadoop de manera eficiente significa ganar o perder en la gran batalla por la cuota de mercado. Las empresas que implementan soluciones Hadoop a menudo invierten una gran cantidad de recursos en la búsqueda de la mejor arquitectura y el proveedor de soluciones más competente. Aquí es donde Supermicro interviene para ayudar.

La solución

Presentamos los clústeres Hadoop de Supermicro, una serie de soluciones de big data optimizadas que ofrecen alto rendimiento, alta fiabilidad y alta escalabilidad. Las soluciones Hadoop de Supermicro son clústeres llave en mano completamente integrados, optimizados y probados, con paquetes de soporte flexibles disponibles para satisfacer los requisitos específicos del cliente.

Los clústeres Hadoop de Supermicro incorporan servidores de cómputo y almacenamiento de alta densidad, probados en la industria y equipados con los mejores componentes seleccionados mediante un exhaustivo diseño de ingeniería, validación y pruebas. Las configuraciones certificadas simplifican el diseño y la implementación de una infraestructura de cómputo y almacenamiento de Big Data verdaderamente escalable que satisface los entornos de TI empresariales y de centros de datos más exigentes.

Ventaja de Supermicro

  • Diseñado desde cero con configuraciones óptimas de servidores y clústeres que satisfacen una gran variedad de cargas de trabajo
  • Soluciones probadas basadas en extensas pruebas de laboratorio y despliegues de producción a gran escala
  • Consiga la mejor relación precio/rendimiento y el mejor precio/capacidad con las plataformas de servidores y almacenamiento líderes del sector
  • Clusters Hadoop llave en mano de extremo a extremo con HW, SW y soporte global completamente integrados
  • Arquitectura avanzada basada en las últimas tecnologías como CPU SkyLake, SAS3, NVMe, unidades Optane 
  • Rendimiento de red y redundancia mejorados con opciones duales 10GbE / 25GbE / 40GbE / 100GbE
  • Las pruebas automatizadas de clúster completo garantizan la calidad de la construcción y el calendario de entrega

Clúster Hadoop totalmente integrado

Principales características y ventajas:

  • Configuraciones de clúster creadas a medida y optimizadas para la capacidad, el cálculo o el rendimiento de E/S
  • Diseño de nodo de nombre de alta disponibilidad sin punto único de fallo
  • Grandes opciones de memoria diseñadas específicamente para Spark y otros cálculos en memoria y de baja latencia
  • Plataformas de servidor Hyper diseñadas para despliegues extremadamente grandes
  • Diseño de alta densidad de computación, almacenamiento y memoria para lograr la mejor eficiencia y el menor coste total de propiedad (TCO)
  • Opciones flexibles de conmutadores de red con 1 ó 2 conmutadores 10G / 25G / 100G por rack.
  • Diseño rentable en rack 14U, ideal para entornos de prueba de concepto
  • Diseño de rack estándar 42U y opciones flexibles de PDU que se adaptan a cualquier entorno de centro de datos
  • Eficiencia hasta nivel titanio (96%+) - Fuentes de alimentación redundantes con PMBus
  • Integrado con IPMI y la suite SMC OOB (gestión fuera de banda) para la gestión automatizada del clúster
  • Totalmente integrado, totalmente configurado y completamente probado con las distribuciones Hadoop de su elección
  • Grupo de pruebas de concepto disponible para una experiencia de compra sin riesgos
Rack de solución de clúster Hadoop completamente integrado de Supermicro
  • 1 o 2x 48 puertos 10G SFP+ / 10GBase-T / 25GbE
    1 o 2 conmutadores de 32 puertos 100GbE, 1 conmutador de 48 puertos, GbE
  • 1x Nodo de gestión 1U UP Skylake 41xx / 51xx
  • 3x Nodos de nombre 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • Nodos de datos optimizados 2U SSG, 2U BigTwin o 4U FatTwin con procesadores Skylake 41xx / 51xx / 61xx / 81xx, doble 10G / 25G / 40G por nodo, opciones de disco duro de 2,5" y 3,5
  • Rack estándar de 42U con PDU medidos, opciones de personalización del rack disponibles
  • El servicio de integración incluye Burn-in y pruebas completas del cluster, actualización de BIOS y FW, configuración de redes, preinstalación de la distribución Hadoop elegida y cluster completo.

Especificaciones técnicas del clúster Hadoop

 Alta capacidadIO OptimizadoComputación de alta densidadEquilibrado
Modelo SKUSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
Nodo de datos24SYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
Nodo de datos (Cant.)18323637
Factor de formaSuperStorage 2U2U BigTwin4U FatTwinSuperStorage 1U
2x SKL 4114 2P 10C/20T 2.2G 85W2x SKL 5118 4/2P 12C/24T 2.3G 105W2x SKL 6130 4/2P 16C/32T 2.1G 125W2x SKL 5118 4/2P 12C/24T 2.3G 105W
128192256128
24 bahías de 3,56 Bahía 2,58 Bahía 3,512 Bahía 3,5
Unidad de datos total432448 (NVMe)*288444
Núcleos totales3607681152888
Memoria total Opción Valor - 4608 GB2.36.1449.24.7
Almacenamiento total3,45PB (8TB)1.792PB (4TB)1,15PB (4TB)2,66PB (6TB)
Nombre Nodo3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
Interruptores1x 48PT 25GBase-T2x 32PT 40G1x 48PT GbE1x 48PT10G SFP+
Armario (ancho x alto x fondo)42U
23,5 x 82,4 x 48
PDU2x 50A 208 PDU trifásica con contador
*ADD 32 Bay 2.5" Drives x8 JBOF = 256 NVMe

Especificaciones del servidor

24
24
  • Base de datos corporativa, procesamiento y almacenamiento de bases de datos, servidor empresarial, HPC, centro de datos, iSCSI SAN
  • Compatibilidad con doble zócalo P (LGA 3647): Procesadores Intel® Xeon® Scalable; 3 UPI de hasta 10,4GT/s
  • 24 ranuras DIMM; hasta 3TB ECC 3DS LRDIMM o RDIMM DDR4 2400MHz
  • 24 bahías para unidades SAS3/SATA3 de 3,5" intercambiables en caliente, 2 bahías para unidades de 2,5" intercambiables en caliente (parte trasera); SAS3 a través de Broadcom 3008 AOC
  • 2 ranuras PCI-E 3.0 x16 y 1 ranura PCI-E 3.0 x8
  • 1 Puerto IPMI dedicado
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Tipo A
  • 5 ventiladores de refrigeración PWM redundantes de 80 mm intercambiables en caliente
  • Fuentes de alimentación redundantes de nivel titanio (96%) de 1600 W
SYS-2029BT-HNR
SYS-2029BT-HNR
  • 4 nodos DP en 2U; profundidad 28,5", Cada nodo:
  • Compatibilidad con doble zócalo P (LGA 3647): Procesadores Intel® Xeon® Scalable; UPI dual de hasta 10,4GT/s
  • 24 módulos DIMM; hasta 3TB ECC 3DS LRDIMM o RDIMM DDR4-2666MHz
  • 6 bahías para unidades NVMe de 2,5" intercambiables en caliente por nodo
  • 2 ranuras PCI-E 3.0 x16 de bajo perfil, 1 tarjeta SIOM de red compatible
  • 1 puerto IPMI dedicado, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 ventiladores de 80 mm de alta resistencia con control óptimo de la velocidad del ventilador
  • Fuentes de alimentación redundantes de nivel titanio (96%) de 2200 W
SYS-F629P3-RC0B
SYS-F629P3-RC0B
  • Servidor FatTwin™; CADA NODO (x4 nodos de sistema de conexión en caliente):
  • Compatibilidad con doble zócalo P (LGA 3647): Procesadores Intel® Xeon® Scalable; UPI dual de hasta 10,4GT/s
  • 12 módulos DIMM; hasta 1,5TB ECC 3DS LRDIMM, hasta DDR4-2666MHz
  • 8x 3,5" SAS3 o 6 SAS3 + 2 opc. NVMe U.2; SAS3 con Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM: opc. de red flexible)
  • 1 puerto IPMI dedicado, 1 VGA, 2 USB 3.0, 1 soporte M.2
  • 2x ventiladores centrales de 8cm y 14k RPM
  • Fuentes de alimentación redundantes de nivel titanio (96%) de 1200 W
SSG-6019P-ACR12L
SSG-6019P-ACR12L
  • Almacenamiento de alta densidad, almacenamiento de objetos 1U, Ceph / Hadoop, almacenamiento a gran escala, análisis de Big Data
  • Compatibilidad con doble zócalo P (LGA 3647): Procesadores Intel® Xeon® Scalable de 2ª generación; UPI dual de hasta 10,4GT/s
  • 12 bahías para unidades SAS3/SATA3 de 3,5" intercambiables en caliente, 4 bahías para unidades NVMe/SATA de 2,5" intercambiables en caliente
  • 12 módulos DIMM; hasta 3TB 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Es compatible con Intel® Optane™ DCPMM*.
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2 puertos 10GBase-T a través de Intel C622, 1 puerto IPMI dedicado
  • 1 VGA, 4 USB 3.0, 1 cabezal TPM
  • 6x ventiladores de refrigeración de 4 cm y 20,5K RPM
  • 600Fuentes de alimentación redundantes de nivel Platinum

*Contacte a su representante de ventas de Supermicro para más información.

Conmutadores Ethernet de 1 Gb y 10 Gb
Conmutadores Ethernet de 1 Gb y 10 Gb
  • Conmutación Ethernet de capa 2/3, agregación de enlaces (LACP), tramas Jumbo, compatibilidad con VLAN
  • Flexibilidad de configuración:
    • SSE-G24-TG4 - 24 puertos Ethernet RJ45 de 1 Gbps con 4 puertos SFP Combo, 4 puertos Ethernet de 10 Gbps (CX4, XFP o SFP+), apilamiento
    • SSE-G48-TG4 - 48 puertos Ethernet RJ45 de 1 Gbps con 4 puertos SFP Combo, 4 puertos Ethernet de 10 Gbps (CX4, XFP o SFP+), apilamiento
    • SSE-X24S / SSE-X3348S(R) - 24 puertos 10Gbps Ethernet (SFP+), opción de flujo de aire inverso
  • Gestión: Interfaz de gestión basada en web, CLI estándar del sector con telnet SSH o puerto de gestión local, secuencias de comandos, registro
  • Enrutamiento, multidifusión:
    • Calidad de servicio y DiffServ - 8 colas de prioridad por puerto; WRR ajustada y programación de prioridad estricta
    • Seguridad - Autenticación basada en puertos 802.1x, autenticación RADIUS y TACACS+, cifrado SSH / SSL
  • Dimensiones: 17,3" ancho x 15,2" fondo x 1,7" alto (440 mm x 386 mm x 43 mm)
SSE-C3632S
SSE-C3632S

/ SSE-C3632SR(32 puertos)

  • 32x puertos Ethernet de cien gigabits
    (cada uno configurado opcionalmente para cuarenta gigabits o 4x veinticinco gigabits)
  • Enrutamiento de capa 3 a velocidad de cable
  • 1:1 Conectividad sin bloqueo
  • diseño 1U para una instalación flexible
  • Apto para centros de datos: modelos de flujo de aire normal e inverso
  • Fuentes de alimentación redundantes conectables en caliente
  • Metal desnudo - ONIE instalado
  • Compatible con Cumulus Linux
Gestión de servidores IPMI
Gestión de servidores IPMI
  • Alertas de fallo HW - E-mail o SNMP
  • Acceso redundante para la gestión
  • Compatibilidad con estándares abiertos (SMASH 2.0, LDAP, WSMAN)
  • Compatibilidad con VLAN
  • KVM y Virtual Media y SOL (sin necesidad de licencia adicional)
  • Fácil mantenimiento (herramientas flash de línea de comandos para actualización de firmware)

Servicios de laboratorio de integración y prueba de concepto de Supermicro

Ver detalles

Otros recursos