日本免费全黄少妇一区二区三区-高清无码一区二区三区四区-欧美中文字幕日韩在线观看-国产福利诱惑在线网站-国产中文字幕一区在线-亚洲欧美精品日韩一区-久久国产精品国产精品国产-国产精久久久久久一区二区三区-欧美亚洲国产精品久久久久

  1. 首頁 > 生活百科 > >

Dell PowerScale閃電項目實現(xiàn)并行化升級提速文件處理性能

電動汽車小米科技

Dell PowerScale閃電項目實現(xiàn)并行化升級提速文件處理性能

戴爾在超級計算2025大會上宣布 ， 閃電項目已成功讓PowerScale實現(xiàn)并行化處理 ， 顯著提升了文件讀寫性能 ， 同時還發(fā)布了更多PowerScale和ObjectScale相關(guān)消息 。
戴爾表示 ， 通過這些以及其他AI工廠相關(guān)公告 ， 戴爾與英偉達(dá)正在\"通過戴爾AI工廠與英偉達(dá)的技術(shù)進(jìn)步 ， 為企業(yè)AI交付未來\" 。 公司宣布了多項服務(wù)器、存儲和網(wǎng)絡(luò)產(chǎn)品增強(qiáng)功能 ， 我們重點關(guān)注存儲方面的進(jìn)展 。 PowerScale是戴爾的橫向擴(kuò)展集群文件系統(tǒng) ， 搭載OneFS軟件 ， 其技術(shù)源于戴爾收購的Isilon前身產(chǎn)品 。 ObjectScale是戴爾的分布式、基于微服務(wù)的多節(jié)點橫向擴(kuò)展多租戶對象存儲軟件 ， 具有支持S3 API的單一全局命名空間 。
在SC25大會上 ， 戴爾宣布了并行PowerScale、PowerScale軟件授權(quán)、面向PowerScale和ObjectScale的NIXL庫KV緩存卸載集成 ， 以及ObjectScale的AI優(yōu)化搜索功能 。
戴爾副董事長兼首席運營官杰夫·克拉克表示：\"戴爾AI工廠與英偉達(dá)解決了每個企業(yè)都面臨的問題：如何在不重建基礎(chǔ)設(shè)施的情況下從AI試點轉(zhuǎn)向生產(chǎn) 。 我們已經(jīng)完成了集成工作 ， 因此客戶無需自行處理 ， 這意味著他們可以更快部署并自信地擴(kuò)展規(guī)模 。 \"
PowerScale技術(shù)升級
PowerScale的閃電項目是一個近18個月的開發(fā)計劃 ， 旨在為PowerScale的OneFS操作系統(tǒng)添加并行IO功能 。 正如預(yù)期的那樣 ， 該項目通過使用pNFS（并行NFS）實現(xiàn) ， 為其數(shù)據(jù)服務(wù)器節(jié)點添加了元數(shù)據(jù)服務(wù)器和Flex Files布局支持 。
戴爾表示 ， 并行PowerScale在元數(shù)據(jù)服務(wù)器和客戶端之間實現(xiàn)了雙向通信 ， 允許在PowerScale集群中的多個節(jié)點間更好地并行分布數(shù)據(jù) 。 這提供了吞吐量、性能提升以及通過集群中多個路徑進(jìn)行并行I/O的線性可擴(kuò)展性 。
PowerScale現(xiàn)在支持NIXL（英偉達(dá)推理傳輸庫）；這是英偉達(dá)的代碼 ， 用于加速AI推理框架中的點對點通信 ， 如Dynamo（其低延遲KV緩存卸載引擎） ， 并提供GPU和CPU內(nèi)存以及文件、塊和對象存儲的抽象 ， 具有模塊化插件架構(gòu) 。 PowerScale的NIXL支持實現(xiàn)了可擴(kuò)展的KV緩存卸載 。 在131000個Token的完整上下文窗口下 ， 它實現(xiàn)了1秒的首Token時間（TTFT） ， 比標(biāo)準(zhǔn)vLLM快19倍 。
包括戴爾在內(nèi)的許多存儲供應(yīng)商都表示支持Dynamo ， 如Cloudian、Cohesity DDN、日立Vantara、HPE、IBM、NetApp、PEAK:AIO、Pure Storage、VAST Data和WEKA 。
PowerScale現(xiàn)在以僅軟件、訂閱許可的形式提供 ， 可在合格的PowerEdge服務(wù)器（如戴爾PowerEdge R7725xd）上運行 。 這將幫助客戶將PowerScale計算設(shè)施與PowerScale硬件+軟件設(shè)備分開購買 。
ObjectScale功能增強(qiáng)
兩項AI優(yōu)化搜索功能是S3表格和向量搜索API ， 旨在為分析和關(guān)鍵AI工作負(fù)載（如推理和檢索增強(qiáng)生成RAG）提供更快的搜索速度 。 S3表格存儲結(jié)構(gòu)化數(shù)據(jù) ， 而向量是非結(jié)構(gòu)化數(shù)據(jù)的數(shù)學(xué)表示 。 兩者結(jié)合為直接存儲在ObjectScale上的復(fù)雜數(shù)據(jù)提供高速訪問 。
亞馬遜表示 ， \"S3表格專門用于存儲表格數(shù)據(jù) ， 如日常購買交易、流式傳感器數(shù)據(jù)或廣告展示 。 表格數(shù)據(jù)以列和行的形式表示數(shù)據(jù) ， 就像數(shù)據(jù)庫表一樣 。 \"有多種方式可以將關(guān)系數(shù)據(jù)庫中的數(shù)據(jù)導(dǎo)入S3表格 。 例如 ， 可以使用AWS Glue或EMR與Spark作業(yè)定期移動數(shù)據(jù) 。
產(chǎn)品可用性
戴爾ObjectScale和搭載英偉達(dá)Dynamo的PowerScale現(xiàn)已全球發(fā)布 。 軟件定義的PowerScale將在2026年上半年全球發(fā)布 。 戴爾PowerScale并行NFS支持將在2026年全球發(fā)布 。
技術(shù)背景
PowerScale目前運行OneFS操作系統(tǒng) ， 將文件系統(tǒng)、卷管理器和數(shù)據(jù)保護(hù)結(jié)合到在OneFS驅(qū)動的存儲集群上運行的單一分布式軟件層中 。 集群具有內(nèi)部或后端網(wǎng)絡(luò) ， 包括10Gb、40Gb或100Gb以太網(wǎng) ， 或低延遲QDR Infiniband（IB） 。
客戶端使用在所有節(jié)點上可用的以太網(wǎng)連接（10GbE、25GbE、40GbE或100GbE）連接到集群 。 此外 ， OneFS 9.10及更高版本在全閃存F910和F710平臺上支持200GbE前端連接或HDR Infiniband加100Gb以太網(wǎng) 。
單個集群由多個節(jié)點組成 ， 最少4個 ， 最多252個 ， 這些節(jié)點是機(jī)架式企業(yè)設(shè)備 ， 包含：內(nèi)存、CPU、網(wǎng)絡(luò)、以太網(wǎng)或低延遲Infiniband互連、磁盤控制器和存儲介質(zhì) 。 因此 ， 分布式集群中的每個節(jié)點都具有計算和存儲或容量能力 。
平臺節(jié)點分為三種類型：性能型、混合/實用型和歸檔型 。
OneFS對帶有Flex Files的pNFS的支持要求OneFS采用獨立的元數(shù)據(jù)服務(wù)器（MDS）軟件實體 ， 與數(shù)據(jù)服務(wù)節(jié)點實體分離 。
Q&A
Q1：戴爾PowerScale閃電項目是什么？它有什么作用？
A：閃電項目是戴爾為期近18個月的開發(fā)計劃 ， 旨在為PowerScale的OneFS操作系統(tǒng)添加并行IO功能 。 通過使用pNFS技術(shù)和元數(shù)據(jù)服務(wù)器 ， 實現(xiàn)了數(shù)據(jù)在集群多個節(jié)點間的并行分布 ， 顯著提升了吞吐量和性能 。
Q2：NIXL庫對PowerScale有什么影響？
A：NIXL是英偉達(dá)推理傳輸庫 ， PowerScale支持NIXL后可以實現(xiàn)可擴(kuò)展的KV緩存卸載 。 在131000個Token的完整上下文窗口下 ， 能夠?qū)崿F(xiàn)1秒的首Token時間 ， 比標(biāo)準(zhǔn)vLLM快19倍 ， 大幅提升AI推理性能 。
Q3：ObjectScale的S3表格和向量搜索API有什么用途？
A：這兩項AI優(yōu)化搜索功能旨在為分析和AI工作負(fù)載提供更快搜索速度 。 S3表格專門存儲結(jié)構(gòu)化數(shù)據(jù)如交易記錄 ， 向量搜索API處理非結(jié)構(gòu)化數(shù)據(jù)的數(shù)學(xué)表示 ， 兩者結(jié)合為存儲在ObjectScale上的復(fù)雜數(shù)據(jù)提供高速訪問 。
【Dell PowerScale閃電項目實現(xiàn)并行化升級提速文件處理性能】

    推薦閱讀