Soluciones Hadoop para Big Data

Soluciones Supermicro Cloudera

El desafío

Existe una enorme cantidad de información impulsada por las aplicaciones en constante cambio, desde datos estructurados y no estructurados hasta semiestructurados. La infraestructura de TI convencional no está hecha para manejar la variedad, la velocidad y el volumen de los datos producidos por las redes de medios sociales, las aplicaciones móviles, los sensores de las máquinas y las investigaciones científicas, etc. Para las empresas, utilizar la analítica de grandes datos ya no es una cuestión de cuándo, sino de cómo. Hadoop, diseñado para el almacenamiento y procesamiento rentables de grandes volúmenes de datos, ha nacido con este propósito. Puede escalarse linealmente hasta miles de servidores y petabytes de almacenamiento.

Cómo aprovechar la tecnología Hadoop y obtener una ventaja competitiva es algo que preocupa a casi todos los directores de informática de las empresas. Para las empresas, saber cómo implementar la infraestructura Hadoop de manera eficiente significa ganar o perder en la gran batalla por la cuota de mercado. Las empresas que implementan soluciones Hadoop suelen dedicar una gran cantidad de recursos a buscar la mejor arquitectura y el proveedor de soluciones más competente. Ahí es donde Supermicro en juego para ayudar.

La solución

Presentamos los clústeres Supermicro , una serie de soluciones optimizadas para big data que ofrecen un alto rendimiento, una gran fiabilidad y una elevada escalabilidad. Las soluciones Supermicro son clústeres llave en mano totalmente integrados, optimizados y probados, con paquetes de asistencia flexibles disponibles para satisfacer las necesidades específicas de cada cliente.

Los clústeres Supermicro cuentan con servidores de computación y almacenamiento de alta densidad probados en la industria, equipados con los mejores componentes seleccionados mediante un exhaustivo proceso de diseño, validación y pruebas de ingeniería. Las configuraciones certificadas eliminan las conjeturas a la hora de diseñar e implementar una infraestructura de computación y almacenamiento de Big Data verdaderamente escalable que satisfaga los entornos de TI y centros de datos empresariales más exigentes.

Supermicro

  • Diseñado desde cero con configuraciones óptimas de servidores y clústeres que satisfacen una gran variedad de cargas de trabajo
  • Soluciones probadas basadas en extensas pruebas de laboratorio y despliegues de producción a gran escala
  • Consiga la mejor relación precio/rendimiento y el mejor precio/capacidad con las plataformas de servidores y almacenamiento líderes del sector
  • Clusters Hadoop llave en mano de extremo a extremo con HW, SW y soporte global completamente integrados
  • Arquitectura avanzada basada en las últimas tecnologías como CPU SkyLake, SAS3, NVMe, unidades Optane 
  • Rendimiento de red y redundancia mejorados con opciones duales 10GbE / 25GbE / 40GbE / 100GbE
  • Las pruebas automatizadas de clúster completo garantizan la calidad de la construcción y el calendario de entrega

Clúster Hadoop totalmente integrado

Principales características y ventajas:

  • Configuraciones de clúster creadas a medida y optimizadas para la capacidad, el cálculo o el rendimiento de E/S
  • Diseño de nodo de nombre de alta disponibilidad sin punto único de fallo
  • Grandes opciones de memoria diseñadas específicamente para Spark y otros cálculos en memoria y de baja latencia
  • Plataformas de servidor Hyper diseñadas para despliegues extremadamente grandes
  • Diseño de alta densidad de computación, almacenamiento y memoria para lograr la mejor eficiencia y el menor coste total de propiedad (TCO)
  • Opciones flexibles de conmutadores de red con 1 ó 2 conmutadores 10G / 25G / 100G por rack.
  • Diseño rentable en rack 14U, ideal para entornos de prueba de concepto
  • Diseño de rack estándar 42U y opciones flexibles de PDU que se adaptan a cualquier entorno de centro de datos
  • Eficiencia hasta nivel titanio (96%+) - Fuentes de alimentación redundantes con PMBus
  • Integrado con IPMI y la suite SMC OOB (gestión fuera de banda) para la gestión automatizada del clúster
  • Totalmente integrado, totalmente configurado y completamente probado con las distribuciones Hadoop de su elección
  • Grupo de pruebas de concepto disponible para una experiencia de compra sin riesgos
Rack con solución de clúster Hadoop Supermicro integrada Supermicro
  • 1 o 2x 48 puertos 10G SFP+ / 10GBase-T / 25GbE
    1 o 2 conmutadores de 32 puertos 100GbE, 1 conmutador de 48 puertos, GbE
  • 1x Nodo de gestión 1U UP Skylake 41xx / 51xx
  • 3x Nodos de nombre 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • Nodos de datos optimizados 2U SSG, 2U BigTwin o 4U FatTwin con procesadores Skylake 41xx / 51xx / 61xx / 81xx, doble 10G / 25G / 40G por nodo, opciones de disco duro de 2,5" y 3,5
  • Rack estándar de 42U con PDU medidos, opciones de personalización del rack disponibles
  • El servicio de integración incluye Burn-in y pruebas completas del cluster, actualización de BIOS y FW, configuración de redes, preinstalación de la distribución Hadoop elegida y cluster completo.

Especificaciones técnicas del clúster Hadoop

 Alta capacidadIO OptimizadoComputación de alta densidadEquilibrado
Modelo SKUSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
Nodo de datos24SYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
Nodo de datos (Cant.)18323637
Factor de formaSuperStorage 2U2U BigTwin4U FatTwinSuperStorage 1U
2x SKL 4114 2P 10C/20T 2.2G 85W2x SKL 5118 4/2P 12C/24T 2.3G 105W2x SKL 6130 4/2P 16C/32T 2.1G 125W2x SKL 5118 4/2P 12C/24T 2.3G 105W
128192256128
24 bahías de 3,56 Bahía 2,58 Bahía 3,512 Bahía 3,5
Unidad de datos total432448 (NVMe)*288444
Núcleos totales3607681152888
Memoria total Opción Valor - 4608 GB2.36.1449.24.7
Almacenamiento total3,45PB (8TB)1.792PB (4TB)1,15PB (4TB)2,66PB (6TB)
Nombre Nodo3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
Interruptores1x 48PT 25GBase-T2x 32PT 40G1x 48PT GbE1x 48PT10G SFP+
Armario (ancho x alto x fondo)42U
23,5 x 82,4 x 48
PDU2x 50A 208 PDU trifásica con contador
*ADD 32 Bay 2.5" Drives x8 JBOF = 256 NVMe

Especificaciones del servidor

24
24
  • Base de datos corporativa, procesamiento y almacenamiento de bases de datos, servidor empresarial, HPC, centro de datos, iSCSI SAN
  • Compatibilidad con doble zócalo P (LGA 3647): Procesadores Intel® Xeon® Scalable; 3 UPI de hasta 10,4GT/s
  • 24 ranuras DIMM; hasta 3TB ECC 3DS LRDIMM o RDIMM DDR4 2400MHz
  • 24 bahías para unidades SAS3/SATA3 de 3,5" intercambiables en caliente, 2 bahías para unidades de 2,5" intercambiables en caliente (parte trasera); SAS3 a través de Broadcom 3008 AOC
  • 2 ranuras PCI-E 3.0 x16 y 1 ranura PCI-E 3.0 x8
  • 1 Puerto IPMI dedicado
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Tipo A
  • 5 ventiladores de refrigeración PWM redundantes de 80 mm intercambiables en caliente
  • Fuentes de alimentación redundantes de nivel titanio (96%) de 1600 W
SYS-2029BT-HNR
SYS-2029BT-HNR
  • 4 nodos DP en 2U; profundidad 28,5", Cada nodo:
  • Compatibilidad con doble zócalo P (LGA 3647): Procesadores Intel® Xeon® Scalable; UPI dual de hasta 10,4GT/s
  • 24 módulos DIMM; hasta 3TB ECC 3DS LRDIMM o RDIMM DDR4-2666MHz
  • 6 bahías para unidades NVMe de 2,5" intercambiables en caliente por nodo
  • 2 ranuras PCI-E 3.0 x16 de bajo perfil, 1 tarjeta SIOM de red compatible
  • 1 puerto IPMI dedicado, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 ventiladores de 80 mm de alta resistencia con control óptimo de la velocidad del ventilador
  • Fuentes de alimentación redundantes de nivel titanio (96%) de 2200 W
SYS-F629P3-RC0B
SYS-F629P3-RC0B
  • Servidor FatTwin™; CADA NODO (x4 nodos de sistema de conexión en caliente):
  • Compatibilidad con doble zócalo P (LGA 3647): Procesadores Intel® Xeon® Scalable; UPI dual de hasta 10,4GT/s
  • 12 módulos DIMM; hasta 1,5TB ECC 3DS LRDIMM, hasta DDR4-2666MHz
  • 8x 3,5" SAS3 o 6 SAS3 + 2 opc. NVMe U.2; SAS3 con Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM: opc. de red flexible)
  • 1 puerto IPMI dedicado, 1 VGA, 2 USB 3.0, 1 soporte M.2
  • 2x ventiladores centrales de 8cm y 14k RPM
  • Fuentes de alimentación redundantes de nivel titanio (96%) de 1200 W
SSG-6019P-ACR12L
SSG-6019P-ACR12L
  • Almacenamiento de alta densidad, almacenamiento de objetos 1U, Ceph / Hadoop, almacenamiento a gran escala, análisis de Big Data
  • Compatibilidad con doble zócalo P (LGA 3647): Procesadores Intel® Xeon® Scalable de 2ª generación; UPI dual de hasta 10,4GT/s
  • 12 bahías para unidades SAS3/SATA3 de 3,5" intercambiables en caliente, 4 bahías para unidades NVMe/SATA de 2,5" intercambiables en caliente
  • 12 módulos DIMM; hasta 3TB 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Es compatible con Intel® Optane™ DCPMM*.
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2 puertos 10GBase-T a través de Intel C622, 1 puerto IPMI dedicado
  • 1 VGA, 4 USB 3.0, 1 cabezal TPM
  • 6x ventiladores de refrigeración de 4 cm y 20,5K RPM
  • 600Fuentes de alimentación redundantes de nivel Platinum

*Póngase en contacto con su representante Supermicro para obtener más información.

Conmutadores Ethernet de 1 Gb y 10 Gb
Conmutadores Ethernet de 1 Gb y 10 Gb
  • Conmutación Ethernet de capa 2/3, agregación de enlaces (LACP), tramas Jumbo, compatibilidad con VLAN
  • Flexibilidad de configuración:
    • SSE-G24-TG4 - 24 puertos Ethernet RJ45 de 1 Gbps con 4 puertos SFP Combo, 4 puertos Ethernet de 10 Gbps (CX4, XFP o SFP+), apilamiento
    • SSE-G48-TG4 - 48 puertos Ethernet RJ45 de 1 Gbps con 4 puertos SFP Combo, 4 puertos Ethernet de 10 Gbps (CX4, XFP o SFP+), apilamiento
    • SSE-X24S / SSE-X3348S(R) - 24 puertos 10Gbps Ethernet (SFP+), opción de flujo de aire inverso
  • Gestión: Interfaz de gestión basada en web, CLI estándar del sector con telnet SSH o puerto de gestión local, secuencias de comandos, registro
  • Enrutamiento, multidifusión:
    • Calidad de servicio y DiffServ - 8 colas de prioridad por puerto; WRR ajustada y programación de prioridad estricta
    • Seguridad - Autenticación basada en puertos 802.1x, autenticación RADIUS y TACACS+, cifrado SSH / SSL
  • Dimensiones: 17,3" ancho x 15,2" fondo x 1,7" alto (440 mm x 386 mm x 43 mm)
SSE-C3632S
SSE-C3632S

/ SSE-C3632SR(32 puertos)

  • 32x puertos Ethernet de cien gigabits
    (cada uno configurado opcionalmente para cuarenta gigabits o 4x veinticinco gigabits)
  • Enrutamiento de capa 3 a velocidad de cable
  • 1:1 Conectividad sin bloqueo
  • diseño 1U para una instalación flexible
  • Apto para centros de datos: modelos de flujo de aire normal e inverso
  • Fuentes de alimentación redundantes conectables en caliente
  • Metal desnudo - ONIE instalado
  • Compatible con Cumulus Linux
Gestión de servidores IPMI
Gestión de servidores IPMI
  • Alertas de fallo HW - E-mail o SNMP
  • Acceso redundante para la gestión
  • Compatibilidad con estándares abiertos (SMASH 2.0, LDAP, WSMAN)
  • Compatibilidad con VLAN
  • KVM y Virtual Media y SOL (sin necesidad de licencia adicional)
  • Fácil mantenimiento (herramientas flash de línea de comandos para actualización de firmware)

Servicios de laboratorio de integración y prueba de concepto de Supermicro

Ver detalles

Otros recursos