0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

英特爾? DSA 助力云軸科技網(wǎng)絡(luò)性能提升,海量數(shù)據(jù)傳輸游刃有余

英特爾中國(guó) ? 來(lái)源:未知 ? 2023-10-21 16:40 ? 次閱讀
"

通過(guò)采用英特爾 DPDK,并將 DPDK Vhost 的數(shù)據(jù)包拷貝操作從 CPU 卸載到英特爾 DSA,我們有效提升了云平臺(tái)的網(wǎng)絡(luò)性能,釋放更多的 CPU 核心用于上層業(yè)務(wù)。結(jié)合 ZStack Cloud 在平臺(tái)層面的底層創(chuàng)新,能夠助力用戶更高效處理海量數(shù)據(jù),應(yīng)對(duì)不斷增長(zhǎng)的業(yè)務(wù)壓力,更好地 釋放數(shù)據(jù)價(jià)值。

— 王為

ZStack 首席技術(shù)官

"

挑戰(zhàn) 如何提升云平臺(tái)的網(wǎng)絡(luò)服務(wù)能力,支撐大規(guī)模的數(shù)據(jù)傳輸與數(shù)據(jù)處理如何通過(guò)軟件加速負(fù)載運(yùn)行,降低 CPU 等硬件的占用率 如何提升性能密度,降低總體擁有成本 (TCO)

概 述

作為云服務(wù)的重要基礎(chǔ)資源,網(wǎng)絡(luò)性能對(duì)于大規(guī)模數(shù)據(jù)的傳輸與處理有著重要意義。為了提升網(wǎng)絡(luò)性能,云軸科技 ZStack 采用第四代英特爾 至強(qiáng) 可擴(kuò)展處理器集成的英特爾 Data Streaming Accelerator(英特爾 DSA)加速器,以及英特爾 數(shù)據(jù)平面開(kāi)發(fā)套件(英特爾 DPDK)進(jìn)行加速,將網(wǎng)絡(luò)性能提升了高達(dá) 1.117 倍1 。

解決方案

ZStack Cloud 云平臺(tái)是遵循“簡(jiǎn)單、彈性、健壯、智能”的“4S”特性的私有云和無(wú)縫混合云產(chǎn)品。ZStack Cloud 產(chǎn)品已適配第四代英特爾 至強(qiáng) 可擴(kuò)展處理器,可快速完成云平臺(tái)整體部署。ZStack Cloud 基于高可用和分布式架構(gòu),面向中小型企業(yè)以及云計(jì)算服務(wù)提供商等多種用戶,能夠有效地幫助用戶構(gòu)建和維護(hù)穩(wěn)定的多云環(huán)境,提高故障處理效率,降低運(yùn)維成本。

wKgaomUzj52AeQ_MAAFzNeF1F5A462.jpg

圖 1. ZStack Cloud 云平臺(tái)架構(gòu)圖

為提升網(wǎng)絡(luò)性能,ZStack Cloud 采用了第四代英特爾 至強(qiáng) 可擴(kuò)展處理器進(jìn)行加速。第四代英特爾 至強(qiáng) 可擴(kuò)展處理器提供了出色性能和安全性,可根據(jù)用戶的業(yè)務(wù)需求進(jìn)行擴(kuò)展。英特爾 數(shù)據(jù)流加速器(英特爾 DSA)是第四代英特爾 至強(qiáng) 可擴(kuò)展處理器中的高性能數(shù)據(jù)移動(dòng)和轉(zhuǎn)換加速器,為數(shù)據(jù)移動(dòng)提供了高帶寬和低延時(shí),可用于卸載 DPDK Vhost 中的數(shù)據(jù)包拷貝操作。

wKgaomUzj52AWXd_AAD_xyOhEsg214.jpg

圖 2. 由英特爾 DSA 賦能的物理機(jī)-虛擬機(jī)-物理機(jī)數(shù)據(jù)傳輸路徑

在實(shí)際應(yīng)用中,ZStack Cloud 在 DPDK Vhost 中將數(shù)據(jù)包拷貝操作從 CPU 卸載到英特爾 DSA,使得 Vhost 的處理內(nèi)核可以避免進(jìn)行繁重的數(shù)據(jù)包拷貝。

wKgaomUzj52AY_UJAAEfagVpP5c548.jpg

圖 3. ZStack Cloud 將數(shù)據(jù)包拷貝操作卸載到英特爾 DSA

通過(guò)使用英特爾 DSA 加速器卸載 DPDK 下的數(shù)據(jù)包拷貝,ZStack Cloud 云平臺(tái)在同節(jié)點(diǎn)通信下的網(wǎng)絡(luò)帶寬性能得到了 1.117 倍的性能提升,在跨節(jié)點(diǎn)通信場(chǎng)景下的網(wǎng)絡(luò)帶寬性能得到了 1.092 倍的性能提升2

wKgaomUzj52AdfbCAACYgbybTGY707.jpg

圖 4. OVS-DPDK 在啟用英特爾 DSA 前后的吞吐性能對(duì)比(越高越好)3

測(cè)試結(jié)果表明,當(dāng)數(shù)據(jù)包大小超過(guò) 256 字節(jié)時(shí),英特爾 DSA 可以為 DPDK Vhost 帶來(lái)顯著的性能提升。當(dāng)數(shù)據(jù)包大小超過(guò) 1K 字節(jié)時(shí),英特爾 DSA 搬運(yùn)數(shù)據(jù)的效率全面優(yōu)于使用內(nèi)核。在媒體流服務(wù)器和分布式數(shù)據(jù)處理服務(wù)器等應(yīng)用場(chǎng)景中,英特爾 DSA 加速的 OVS-DPDK 均能夠提供高效透明(虛擬機(jī)內(nèi)應(yīng)用無(wú)感知)的底層優(yōu)化。

收 益 顯著提升網(wǎng)絡(luò)性能,加速虛擬機(jī)典型實(shí)例之間的數(shù)據(jù)移動(dòng),滿足網(wǎng)絡(luò) 密集型應(yīng)用的需求,例如,其有助于降低流媒體業(yè)務(wù)的網(wǎng)絡(luò)帶寬抖動(dòng),在影視渲染場(chǎng)景中加快渲染節(jié)點(diǎn)和存儲(chǔ)節(jié)點(diǎn)之間傳輸,在 AI 訓(xùn)練場(chǎng)景中實(shí)現(xiàn)云內(nèi)網(wǎng)絡(luò)進(jìn)行高速互聯(lián); 將 ZStack Cloud 底層的數(shù)據(jù)包拷貝工作從 CPU 核心卸載到英特爾 DSA 模塊,釋放更多的 CPU 核心用于上層業(yè)務(wù),有助于降低硬件投入,提升投資收益; 可有效利用英特爾 DSA,無(wú)需對(duì)上層業(yè)務(wù)進(jìn)行定制改造,即可提供高帶寬和低延時(shí)的網(wǎng)絡(luò)服務(wù); 通過(guò)開(kāi)放式架構(gòu)可以實(shí)現(xiàn)橫向擴(kuò)展,不受硬件型號(hào)限制,實(shí)現(xiàn)橫向 擴(kuò)容。

展 望

本次驗(yàn)證顯示,英特爾 DSA 可在虛擬機(jī)實(shí)例數(shù)據(jù)移動(dòng)等應(yīng)用中,發(fā)揮出色的數(shù)據(jù)傳輸加速作用。ZStack 與英特爾將在此合作基礎(chǔ)上,進(jìn)一步探索利用第四代英特爾 至強(qiáng) 可擴(kuò)展處理器的不同加速器加速負(fù)載運(yùn)行,助力客戶加快云平臺(tái)變革。

參考資料:

1 截止 ZStack 和英特爾 2023 年 7 月的測(cè)試結(jié)果。測(cè)試配置:雙路英特爾 至強(qiáng) 金牌 6426Y 處理器,384 GB 總內(nèi)存 (12*32 GB 4800 MHz),1*1.92 TB 固態(tài)盤,1*英特爾 以太網(wǎng)控制器 E810-XXV(25G端口),2*英特爾 以太網(wǎng)控制器 X710(10G 雙 端口)。

2,3 截止 ZStack 和英特爾 2023 年 7 月的測(cè)試結(jié)果。測(cè)試配置:雙路英特爾 至強(qiáng) 金牌 6426Y 處理器,384 GB 總內(nèi)存 (12*32 GB 4800 MHz),1*1.92 TB 固態(tài)盤,1*英特爾 以太網(wǎng)控制器 E810-XXV (25G 雙端口),2*英特爾 以太網(wǎng)控制器 X710(10G 雙端口)。

實(shí)際性能受使用情況、配置和其他因素的差異影響。更多信息請(qǐng)見(jiàn) www.Intel.com/PerformanceIndex

性能測(cè)試結(jié)果基于配置信息中顯示的日期進(jìn)行測(cè)試,且可能并未反映所有公開(kāi)可用的安全更新。詳情請(qǐng)參閱配置信息披露。沒(méi)有任何產(chǎn)品或組件是絕對(duì)安全的。

具體成本和結(jié)果可能不同。

英特爾技術(shù)可能需要啟用硬件、軟件或激活服務(wù)。

英特爾未做出任何明示和默示的保證,包括但不限于,關(guān)于適銷性、適合特定目的及不侵權(quán)的默示保證,以及在履約過(guò)程、交易過(guò)程或貿(mào)易慣例中引起的任何保證。

英特爾并不控制或?qū)徲?jì)第三方數(shù)據(jù)。請(qǐng)您審查該內(nèi)容,咨詢其他來(lái)源,并確認(rèn)提及數(shù)據(jù)是否準(zhǔn)確。


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 英特爾
    +關(guān)注

    關(guān)注

    61

    文章

    10082

    瀏覽量

    172902
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    10951

    瀏覽量

    213948

原文標(biāo)題:英特爾? DSA 助力云軸科技網(wǎng)絡(luò)性能提升,海量數(shù)據(jù)傳輸游刃有余

文章出處:【微信號(hào):英特爾中國(guó),微信公眾號(hào):英特爾中國(guó)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    英特爾推出具備高性能和能效的以太網(wǎng)解決方案

    網(wǎng)絡(luò)適配器,以及英特爾以太網(wǎng)控制器E610和網(wǎng)絡(luò)適配器,旨在滿足企業(yè)、電信、、邊緣、科學(xué)計(jì)算(HPC)和AI等領(lǐng)域日益增長(zhǎng)的需求。這些新一代解決方案可以提供強(qiáng)勁的高
    發(fā)表于 02-25 11:17 ?115次閱讀
    <b class='flag-5'>英特爾</b>推出具備高<b class='flag-5'>性能</b>和能效的以太網(wǎng)解決方案

    MPU數(shù)據(jù)傳輸協(xié)議詳解

    在現(xiàn)代電子系統(tǒng)中,微控制器(MPU)扮演著核心角色,負(fù)責(zé)處理各種任務(wù)和數(shù)據(jù)。為了實(shí)現(xiàn)這些功能,MPU需要與其他設(shè)備進(jìn)行數(shù)據(jù)交換。數(shù)據(jù)傳輸協(xié)議就是規(guī)定這些數(shù)據(jù)交換如何進(jìn)行的一套規(guī)則。 M
    的頭像 發(fā)表于 01-08 09:37 ?367次閱讀

    ptp對(duì)實(shí)時(shí)數(shù)據(jù)傳輸的影響

    的影響。 P2P技術(shù)概述 P2P技術(shù)最初是為了解決中心化網(wǎng)絡(luò)中的瓶頸問(wèn)題而設(shè)計(jì)的。在傳統(tǒng)的客戶端-服務(wù)器模型中,數(shù)據(jù)傳輸依賴于中心服務(wù)器,這在用戶數(shù)量激增時(shí)會(huì)導(dǎo)致性能瓶頸。P2P網(wǎng)絡(luò)
    的頭像 發(fā)表于 12-29 09:53 ?286次閱讀

    英特爾帶您解鎖上智算新引擎

    在近日舉辦的2024火山引擎FORCE原動(dòng)力大會(huì)上,英特爾與火山引擎聯(lián)合發(fā)布基于英特爾 至強(qiáng) 6 性能核處理器的第四代服務(wù)器實(shí)例,以打造彈性算力底座的產(chǎn)品化實(shí)踐。同時(shí),英特爾也攜手扣子
    的頭像 發(fā)表于 12-23 14:05 ?529次閱讀

    socket 數(shù)據(jù)傳輸效率提升技巧

    在現(xiàn)代網(wǎng)絡(luò)應(yīng)用中,數(shù)據(jù)傳輸效率是衡量系統(tǒng)性能的關(guān)鍵指標(biāo)之一。對(duì)于使用socket進(jìn)行數(shù)據(jù)傳輸的應(yīng)用,優(yōu)化傳輸效率不僅可以
    的頭像 發(fā)表于 11-12 14:34 ?617次閱讀

    海外HTTP服務(wù)優(yōu)化:提升國(guó)際數(shù)據(jù)傳輸效率

    針對(duì)海外HTTP服務(wù)優(yōu)化以提升國(guó)際數(shù)據(jù)傳輸效率的問(wèn)題。
    的頭像 發(fā)表于 10-17 07:18 ?376次閱讀

    HTTP海外加速技術(shù):加速跨國(guó)數(shù)據(jù)傳輸提升用戶體驗(yàn)

    HTTP海外加速技術(shù),作為優(yōu)化跨國(guó)網(wǎng)絡(luò)體驗(yàn)的重要手段,通過(guò)一系列技術(shù)手段顯著提升了跨國(guó)數(shù)據(jù)傳輸的速度和穩(wěn)定性,進(jìn)而改善了用戶的整體網(wǎng)絡(luò)體驗(yàn)。
    的頭像 發(fā)表于 10-15 07:58 ?437次閱讀

    網(wǎng)絡(luò)數(shù)據(jù)傳輸速率的單位是什么

    網(wǎng)絡(luò)數(shù)據(jù)傳輸速率的單位是 bps(bit per second) ,即比特每秒,也可以表示為b/s或bit/s。它表示的是每秒鐘傳輸的二進(jìn)制數(shù)的位數(shù)。比特(bit)是計(jì)算機(jī)中數(shù)據(jù)量的單
    的頭像 發(fā)表于 10-12 10:20 ?2538次閱讀

    DTU如何運(yùn)用VPN加密技術(shù)提升數(shù)據(jù)傳輸安全?

    VPN加密技術(shù)來(lái)提升DTU數(shù)據(jù)傳輸的安全性。▍DTU與VPN加密技術(shù)的結(jié)合DTU在數(shù)據(jù)傳輸過(guò)程中,常常需要面對(duì)網(wǎng)絡(luò)中的不安全因素,如數(shù)據(jù)被竊
    的頭像 發(fā)表于 07-04 14:53 ?581次閱讀
    DTU如何運(yùn)用VPN加密技術(shù)<b class='flag-5'>提升</b><b class='flag-5'>數(shù)據(jù)傳輸</b>安全?

    英特爾實(shí)現(xiàn)光學(xué)I/O芯粒的完全集成

    在科技日新月異的今天,數(shù)據(jù)傳輸速度的提升已成為推動(dòng)各行業(yè)發(fā)展的關(guān)鍵因素。近日,英特爾在高速數(shù)據(jù)傳輸的硅光集成技術(shù)上取得了令人矚目的突破,為數(shù)據(jù)
    的頭像 發(fā)表于 06-29 09:27 ?604次閱讀

    英特爾推出集成光學(xué)計(jì)算互聯(lián)OCI Chiplet芯片

    在全球信息技術(shù)飛速發(fā)展的今天,數(shù)據(jù)傳輸速度和效率成為了決定科技競(jìng)爭(zhēng)力的關(guān)鍵因素之一。英特爾,作為全球領(lǐng)先的半導(dǎo)體公司,始終站在技術(shù)革新的前沿。近日,英特爾宣布了一項(xiàng)具有劃時(shí)代意義的里程碑成果——集成光學(xué)計(jì)算互聯(lián)(OCI)chip
    的頭像 發(fā)表于 06-28 10:55 ?3470次閱讀

    以太網(wǎng)接口的數(shù)據(jù)傳輸原理詳解

    以太網(wǎng)接口作為計(jì)算機(jī)網(wǎng)絡(luò)中的關(guān)鍵組成部分,承擔(dān)著數(shù)據(jù)傳輸的重要職責(zé)。在了解以太網(wǎng)接口的數(shù)據(jù)傳輸原理之前,我們首先需要明確以太網(wǎng)的基本概念和工作機(jī)制。以太網(wǎng)是一種廣泛應(yīng)用的局域網(wǎng)技術(shù),它基于CSMA
    的頭像 發(fā)表于 05-29 16:47 ?2138次閱讀

    英特爾助力京東用CPU加速AI推理,以大模型構(gòu)建數(shù)智化供應(yīng)鏈

    英特爾助力京東用CPU加速AI推理,以大模型構(gòu)建數(shù)智化供應(yīng)鏈
    的頭像 發(fā)表于 05-27 11:50 ?651次閱讀
    <b class='flag-5'>英特爾</b><b class='flag-5'>助力</b>京東<b class='flag-5'>云</b>用CPU加速AI推理,以大模型構(gòu)建數(shù)智化供應(yīng)鏈

    利用自定義數(shù)據(jù)傳輸在機(jī)智上實(shí)現(xiàn)GPS定位數(shù)據(jù)傳輸

    GPS定位數(shù)據(jù)通常以經(jīng)度和緯度的形式表示,是一種地理位置信息。要將GPS定位數(shù)據(jù)加入機(jī)智平臺(tái),可以通過(guò)自定義數(shù)據(jù)傳輸來(lái)實(shí)現(xiàn)。首先,需要確定數(shù)據(jù)傳輸
    的頭像 發(fā)表于 05-09 08:10 ?479次閱讀
    利用自定義<b class='flag-5'>數(shù)據(jù)傳輸</b>在機(jī)智<b class='flag-5'>云</b>上實(shí)現(xiàn)GPS定位<b class='flag-5'>數(shù)據(jù)</b>的<b class='flag-5'>傳輸</b>

    借助英特爾? QAT從而顯著提升網(wǎng)絡(luò)和存儲(chǔ)應(yīng)用的性能

    全新第四代和第五代英特爾? 至強(qiáng)? 可擴(kuò)展處理器內(nèi)置英特爾? 數(shù)據(jù)保護(hù)與壓縮加速技術(shù)(英特爾? QAT),可通過(guò)卸載計(jì)算密集型工作負(fù)載來(lái)降低 CPU 占用率,從而顯著
    的頭像 發(fā)表于 03-18 16:25 ?1257次閱讀
    借助<b class='flag-5'>英特爾</b>? QAT從而顯著<b class='flag-5'>提升</b><b class='flag-5'>網(wǎng)絡(luò)</b>和存儲(chǔ)應(yīng)用的<b class='flag-5'>性能</b>