跳至內容

開源 Spark、資料流和資料工程解決方案AI

Supermicro 使用開源的解決方案

挑戰

不斷變化的應用驅動著大量訊息,涵蓋結構化、非結構化和半結構化資料。傳統的IT基礎設施無法應付社群媒體網路、行動應用、機器感測器和科學研究等產生的資料種類繁多、速度快速且規模龐大。對企業而言,利用大數據分析已不再是「何時」的問題,而是如何的問題。 Spark和其他開源軟體應運而生,它們專為經濟高效地儲存和處理海量資料而設計,能夠線性擴展到數千台伺服器和PB級儲存。

對於能夠管理和維護 Spark 開源實作以及相關資料流和資料工程軟體的服務供應商和精通開源的客戶而言, Supermicro 透過提供具有內和帶外管理功能的可靠系統,以及提供適合客戶資料中心的各種系統平台,簡化了 Kubernetes 叢集的部署。

解決方案和Supermicro 優勢

Supermicro 伺服器叢集支援開源,並簡化了 Kubernetes 部署。

  • 系統選擇:客戶可以選擇最佳的硬體平台來建立群集
    • 機架式CloudDC / Hyper 系統或多節點孿生伺服器,或Blade 伺服器
    • 選擇CPU 架構,無論是英特爾或AMD 企業級CPU
    • 為 Spark 加速等應用選擇 GPU 加速器
    • 從 HDD 到 SSD 再到 NVMe 硬碟機的磁碟選擇
    • 可選擇的網路架構、10 GbE 至 400 GbE 選項
    • 全部由同一個IPMI管理/ Redfish 介面,並且可以透過單面板進行聚合。 Supermicro Cloud Composer
    • 許多部署工作都可以使用自動化方式完成。 Supermicro 超級雲端編排器
  • 實作選擇:客戶可在裸機實作、Red Hat OpenShift、Kubernetes 或虛擬機器實作上進行部署。
  • 可擴充性:客戶可以從最小的群集開始,然後透過增加伺服器來擴充。
  • 自動化: Supermicro 可以建置集群,經過全面測試,確保建置品質和交付進度。軟體實作可以使用自動化功能進行部署。 Supermicro 雲編排器

Kubernetes 完全整合開源叢集範例

主要特點和優勢:

  • 專為容量、運算或 I/O 效能最佳化的叢集配置
  • 支援 Kubernetes、OpenShift 和其他 Kubernetes 實現
  • 選擇英特爾Xeon 可擴展的或AMD EPYC CPU-建議使用相同的型號。 CPU 整個集群的架構
  • 高可用性名稱節點設計,無單點故障
  • 專為 Spark 和其他記憶體內低延遲計算而設計的大容量記憶體選項
  • Hyper -專為超大規模部署而設計的可擴展伺服器平台
  • 高密度運算、儲存和記憶體設計,以實現最佳效率和最低成本TCO
  • 靈活的網路交換器選項,每個機架可配置 1 或 2 個 10G / 25G / 100G 或更高速的交換器。
  • 經濟高效的 14U 機架設計,是概念驗證測試環境的理想選擇
  • 標準 42U 機架設計和靈活的 PDU 選項,可滿足任何資料中心環境的需求。
  • 最高可達鈦金級(96%+)效率 - 採用 PMBus 的冗餘電源
  • 內建 IPMI 和 SMC OOB(外帶管理)套件,用於自動化叢集管理
  • 與您選擇的 Hadoop 發行版完全整合、完全配置並經過全面測試。
  • 概念驗證測試群集可供使用,提供無風險購買體驗
  • 客戶提供開源軟體的系統鏡像,客戶自行提供支持
Supermicro 完全整合的Hadoop集群解決方案機架
  • 1 或 2 個 48 埠 10G SFP+ / 10GBase-T / 25GbE
    1 或 2 台 32 埠 100GbE 交換機,1 台 48 埠交換機,千兆乙太網路
  • 1x 管理節點 1U IntelXeon Scalable 或AMD EPYC CPU
  • 3x 名稱節點 1U DP IntelXeon Scalable 或AMD EPYC CPU
  • 最佳化資料節點 2U SSG、2U BigTwin 或 4U FatTwin® 配備 IntelXeon Scalable 或AMD EPYC CPU
  • 標準 42U 機架,附計量型 PDU,提供機架客製選項
  • 整合服務包括完整的叢集老化測試、BIOS 和韌體更新、網路配置以及客戶提供的開源鏡像。
Supermicro 伺服器

Supermicro 用於裸機或 Kubernetes 部署的伺服器

1UCloudDC 伺服器

多節點 GrandTwin® 伺服器

Supermicro 用於 VMware 部署或使用 GPU 的伺服器

2UHyper 伺服器