64核+高內(nèi)存帶寬！英特爾發(fā)布第五代至強(qiáng)可擴(kuò)展處理器，加速AI原生應(yīng)用落地

這款產(chǎn)品是英特爾最強(qiáng)AI性能的CPU，采用了Intel7工藝，該處理器擁有多達(dá)64 核，具備8 條 DDR5 通道，支持高達(dá)5,600 MT/s的傳輸速率，三級緩存是上一代產(chǎn)品的近 3 倍，且采用英特爾超級通道互聯(lián)2.0 以增加跨插槽內(nèi)帶寬，提供高達(dá)20 GT/s的傳輸。

據(jù)悉，第五代至強(qiáng)可擴(kuò)展處理器比較上一代產(chǎn)品，可以處理更多的AI工作負(fù)載，其迭代性能相較于上一代產(chǎn)品提升了21%，而在AI推理性能上，則擁有高達(dá)42%的提升，其內(nèi)存帶寬也提升了16%。相較上一代產(chǎn)品，第五代英特爾至強(qiáng)可擴(kuò)展處理器可在進(jìn)行通用計(jì)算時(shí)將整體性能提升高達(dá)21%，并在一系列客戶工作負(fù)載中將每瓦性能提升高達(dá)36%。對于遵循典型的五年更新周期并從更前一代處理器進(jìn)行升級的客戶而言，總體擁有成本最多降低77%。

京東云服務(wù)器搭載第五代至強(qiáng)，整機(jī)提升123%，大模型推理能力提升51%！

京東科技京東云事業(yè)部硬件架構(gòu)總監(jiān)董可新表示，基于英特爾新一代處理器的京東云自研服務(wù)器全面支持京東雙十一大促。評測結(jié)果顯示，新一代至強(qiáng)可擴(kuò)展服務(wù)器平臺比上一代整體提升了23%，一方面得益于新一代處理器更高的內(nèi)存頻率，以及更大的L3 Cache等新的技術(shù)特性，另一方面得益于我們在和英特爾聯(lián)合定制的新一代CPU中，針對京東各個(gè)業(yè)務(wù)場景的性能需求進(jìn)行了針對性的性能優(yōu)化。

在AI應(yīng)用方面，京東云服務(wù)器在通用的AI視覺類模型ResNet50推理性能測試中，比上一代平臺整體性能提升了38%。在通用的大語言模型Llama2-13B模型推理性能測試中，與上一代相比，提升高達(dá)51%，擁有出色的整體優(yōu)化效果。

在剛剛過去的雙十一中，京東商城上超過60個(gè)品牌的營銷額突破了10億。在大促期間，每秒用戶訪問峰值同比提升了170%，京東智能客服為超過14億次的用戶提供了累計(jì)智能咨詢的服務(wù)。他指出，特別在智能營銷方面，京東實(shí)現(xiàn)了能夠根據(jù)產(chǎn)業(yè)洞察及帶貨思維進(jìn)行服務(wù)的數(shù)字人（其成本不到真人的十分之一），以及其他成本降低達(dá)90%的生成式AI應(yīng)用。

英特爾和多家合作伙伴打造第五代Xeon生態(tài)合作圈

此外，數(shù)據(jù)中心與人工智能集團(tuán)副總裁兼中國區(qū)總經(jīng)理陳葆立介紹了英特爾和百度云合作的最新成果。在針對大規(guī)模推理的早期測試，雙方使用700億參數(shù)的Llama 2開源大模型進(jìn)行推理，采用了4臺內(nèi)含第五代至強(qiáng)的服務(wù)器，并通過100G的高速網(wǎng)絡(luò)聯(lián)合在一起。結(jié)果是，相比單臺的服務(wù)器，其性能提升了2.85倍。從整個(gè)性能上看，在處理Llama 2 700億模型推理時(shí)，時(shí)間可以控制在87毫秒以內(nèi)。

阿里云則展示了基于英特爾第五代至強(qiáng)可擴(kuò)展處理器，推出新一代云實(shí)例?；谟⑻貭柕谖宕翉?qiáng)芯片，阿里云第八代計(jì)算實(shí)例迎來了全面的計(jì)算升級。英特爾CPU在L3 Cache的3倍性能提升和內(nèi)存帶寬16%的提升，在媒體處理、網(wǎng)站應(yīng)用和AI應(yīng)用等場景性能提升20%以上。

通義千問720億大模型近期在開源社區(qū)Hugging Face大模型排行榜上問鼎。阿里云非常重視云上用戶的數(shù)據(jù)安全，結(jié)合英特爾TDX技術(shù)，阿里云第八代機(jī)密計(jì)算實(shí)例可以保障用戶在整個(gè)AI推理過程中，模型和數(shù)據(jù)全流程的數(shù)據(jù)安全。用戶可以在英特爾AMX技術(shù)的加持下，在阿里云第八代實(shí)例上輕松部署通義千問。

陳葆立總結(jié)說：“以ChatGPT為例的生成式人工智能帶來了一個(gè)全新的火爆趨勢。我們看到非常多的中國本土企業(yè)，包括眾多軟、硬件公司正在加速推進(jìn)AI在各行各業(yè)的應(yīng)用和落地。目前在國內(nèi)，已有超過20家的硬件伙伴，超過7家云服務(wù)商基于第五代英特爾至強(qiáng)可擴(kuò)展處理器，準(zhǔn)備好了全新的服務(wù)器和云服務(wù)。對中國的終端用戶來說，無論是對類型、規(guī)模以及應(yīng)用有著如何多樣化的需求，都將擁有豐富的選擇。英特爾可靠的產(chǎn)業(yè)伙伴們，將會(huì)為用戶提供全面的產(chǎn)品以及服務(wù)?！?br />
本文由電子發(fā)燒友原創(chuàng)，轉(zhuǎn)載請注明以上來源。微信號zy1052625525。需入群交流，請?zhí)砑游⑿舉lecfans999，投稿爆料采訪需求，請發(fā)郵箱zhangying@huaqiu.com。