0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

國際巨頭重金投入,國產(chǎn)深度學(xué)習(xí)框架OneFlow有何優(yōu)勢?

Carol Li ? 來源:電子發(fā)燒友網(wǎng) ? 作者:李彎彎 ? 2020-12-17 09:31 ? 次閱讀

近日,國產(chǎn)深度學(xué)習(xí)框架OneFlow發(fā)布了人工智能方向深度學(xué)習(xí)領(lǐng)域的DLPerf測評報告,填補了業(yè)內(nèi)針對深度學(xué)習(xí)框架測評的空白。

報告數(shù)據(jù)顯示,OneFlow在4機32卡下的ResNet50-v1.5和BERT-base兩個模型中,無論是Float32類型還是自動混合精度,在同樣的算法和硬件條件下,吞吐率及加速比均優(yōu)于其他深度學(xué)習(xí)框架。

ResNet-50是計算機視覺(Computer Version)領(lǐng)域最主流的深度學(xué)習(xí)模型之一,而BERT是自然語言處理(Natural Language Processing)領(lǐng)域的進行預(yù)訓(xùn)練的主流模型。OneFlow以這兩種模型為基礎(chǔ)的測試結(jié)果,對深度學(xué)習(xí)算法及硬件調(diào)優(yōu)有著重要的參考價值。

國內(nèi)首個由初創(chuàng)團隊研發(fā)并開源的AI框架

OneFlow是一流科技自主研發(fā)、擁有完全自主知識產(chǎn)權(quán)的深度學(xué)習(xí)框架軟件,是國內(nèi)首個由初創(chuàng)團隊研發(fā)并開源的AI框架,于今年7月31日正式開源后獲得了廣泛的業(yè)內(nèi)關(guān)注。

此次測評是OneFlow開源百天后向廣大開發(fā)者交出的第一份“大型答卷”。對此,創(chuàng)始人袁進輝表示:“OneFlow從研發(fā)之初就主打高效性,致力于解決大規(guī)模分布式AI訓(xùn)練問題。這三個多月來,我們做了大量工作來增強穩(wěn)定性、圖編譯和運行速度,在多機多卡場景下持續(xù)優(yōu)化,以達到分布式最佳性能?!?/p>

除了數(shù)據(jù)對比,在本次測評報告中,OneFlow還公布了對其他深度學(xué)習(xí)框架進行調(diào)優(yōu)的過程,以保證測評報告公正、準確、可復(fù)現(xiàn)。

在談到為何公布如此詳細的調(diào)優(yōu)過程時,袁進輝說道:“首先,我們要保證這份測評報告是客觀、可復(fù)現(xiàn)的,這樣才能幫助到開發(fā)者的日常工作。隨著數(shù)據(jù)量級的增長,開發(fā)者對于深度學(xué)習(xí)框架如何激發(fā)硬件性能持續(xù)關(guān)注,我們希望這份報告可以給開發(fā)者在應(yīng)用深度學(xué)習(xí)框架時提供必要的助力,并以此填補業(yè)界沒有DLPerf測評報告的空白?!?/p>

OneFlow開源后,收到了來自世界范圍內(nèi)的廣泛關(guān)注,關(guān)注者來自谷歌、臉書、微軟、亞馬遜、阿里、字節(jié)跳動、騰訊、百度、商湯、曠視等企業(yè)的核心技術(shù)人員。開源一個多月后,接到多家頭部互聯(lián)網(wǎng)企業(yè)和人工智能企業(yè)的使用意向。

下一步,OneFlow將基于本次DLPerf測試報告,為開發(fā)者提供更多關(guān)于深度學(xué)習(xí)框架的系列課程、分享與論文,繼續(xù)支持企業(yè)與機構(gòu)對深度學(xué)習(xí)框架的性能優(yōu)化,提升深度學(xué)習(xí)框架在行業(yè)中的應(yīng)用水平。

為什么要研發(fā)OneFlow深度學(xué)習(xí)框架

隨著十四五規(guī)劃綱要的出爐,人工智能成為國家級戰(zhàn)略重點,其中深度學(xué)習(xí)框架因其重要的行業(yè)位置受到各界關(guān)注。深度學(xué)習(xí)框架是基于深度學(xué)習(xí)的操作系統(tǒng),幫助企業(yè)更高效的進行深度學(xué)習(xí)算法研發(fā),與Windows、IOS有相似的作用。

中科院院士、清華大學(xué)人工智能研究院院長張鈸表示,目前國際巨頭紛紛投入重金研究深度學(xué)習(xí)框架,比如谷歌、Facebook和亞馬遜等等,誰掌握了操作系統(tǒng)技術(shù),并圍繞操作系統(tǒng)技術(shù)建立起生態(tài),誰就能在全球競爭中掌握主動權(quán),這是中國需要加強研發(fā)的重要人工智能技術(shù),以實現(xiàn)底層核心技術(shù)的自主創(chuàng)新。

北京一流科技公司創(chuàng)立于2017年1月,始終立足于通用性深度學(xué)習(xí)標準框架的研發(fā)和推廣使用,力爭打造人工智能深度學(xué)習(xí)框架產(chǎn)品的引領(lǐng)者和事實工業(yè)標準。目前,一流科技公司連續(xù)完成由九合創(chuàng)投、天目創(chuàng)投、快手戰(zhàn)投、聚卓資本等國內(nèi)知名投資機構(gòu)的數(shù)千萬級風(fēng)險投資。

事實上很早就已經(jīng)有企業(yè)推出AI開發(fā)框架,包括TensorFlow、Pytorch,不過,現(xiàn)在深度學(xué)習(xí),模型越來越大,大規(guī)模訓(xùn)練需求提升,速度成為AI框架核心痛點,而這也是OneFlow要解決的重點問題,未來深度學(xué)習(xí)框架將形成以TensorFlow、Pytorch、OneFlow為主的市場局面。

OneFlow具備其他深度學(xué)習(xí)框架所沒有的超大規(guī)模數(shù)據(jù)訓(xùn)練的能力,已經(jīng)在不少應(yīng)用場景中實現(xiàn)落地,比如,因為天生支持數(shù)據(jù)并行、模型并行和混合并行,已經(jīng)在安防領(lǐng)域人工智能公司落地,實現(xiàn)千億級人臉識別。

談到未來發(fā)展,袁進輝此前對媒體說道:“未來,我們將繼續(xù)保持OneFlow在高效性方面的優(yōu)勢,全面提升易用性和完備性,讓更多的開發(fā)者愿意使用,愛上使用全新一代的深度學(xué)習(xí)框架,降低使用人工智能技術(shù)的成本和難度,解放生產(chǎn)力,把機械化的事情交給機器,讓人去做更有創(chuàng)造力的事情。”

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 深度學(xué)習(xí)
    +關(guān)注

    關(guān)注

    73

    文章

    5503

    瀏覽量

    121175
  • OneFlow
    +關(guān)注

    關(guān)注

    0

    文章

    9

    瀏覽量

    8802
收藏 人收藏

    評論

    相關(guān)推薦

    深度學(xué)習(xí)中RNN的優(yōu)勢與挑戰(zhàn)

    循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)是深度學(xué)習(xí)領(lǐng)域中處理序列數(shù)據(jù)的基石。它們通過在每個時間步長上循環(huán)傳遞信息,使得網(wǎng)絡(luò)能夠捕捉時間序列數(shù)據(jù)中的長期依賴關(guān)系。然而,盡管RNN在某些任務(wù)上表現(xiàn)出色,它們也面臨著一些
    的頭像 發(fā)表于 11-15 09:55 ?406次閱讀

    FPGA做深度學(xué)習(xí)能走多遠?

    。FPGA的優(yōu)勢就是可編程可配置,邏輯資源多,功耗低,而且賽靈思等都在極力推廣。不知道用FPGA做深度學(xué)習(xí)未來會怎樣發(fā)展,能走多遠,你怎么看。 A:FPGA 在深度
    發(fā)表于 09-27 20:53

    NVIDIA推出全新深度學(xué)習(xí)框架fVDB

    在 SIGGRAPH 上推出的全新深度學(xué)習(xí)框架可用于打造自動駕駛汽車、氣候科學(xué)和智慧城市的 AI 就緒型虛擬表示。
    的頭像 發(fā)表于 08-01 14:31 ?613次閱讀

    國產(chǎn)FPGA的發(fā)展前景是什么?

    ,提升產(chǎn)品性能和技術(shù)水平。通過與國際巨頭的合作與競爭,國產(chǎn)FPGA在容量、制程、性能等方面逐步縮小與國際先進水平的差距。 技術(shù)創(chuàng)新:國產(chǎn)FP
    發(fā)表于 07-29 17:04

    PyTorch深度學(xué)習(xí)開發(fā)環(huán)境搭建指南

    PyTorch作為一種流行的深度學(xué)習(xí)框架,其開發(fā)環(huán)境的搭建對于深度學(xué)習(xí)研究者和開發(fā)者來說至關(guān)重要。在Windows操作系統(tǒng)上搭建PyTorc
    的頭像 發(fā)表于 07-16 18:29 ?1059次閱讀

    深度學(xué)習(xí)中的無監(jiān)督學(xué)習(xí)方法綜述

    深度學(xué)習(xí)作為機器學(xué)習(xí)領(lǐng)域的一個重要分支,近年來在多個領(lǐng)域取得了顯著的成果,特別是在圖像識別、語音識別、自然語言處理等領(lǐng)域。然而,深度學(xué)習(xí)模型
    的頭像 發(fā)表于 07-09 10:50 ?745次閱讀

    深度學(xué)習(xí)與nlp的區(qū)別在哪

    方法,它通過模擬人腦的神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu),實現(xiàn)對數(shù)據(jù)的自動特征提取和學(xué)習(xí)。深度學(xué)習(xí)的核心是構(gòu)建多層的神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu),每一層都包含大量的神經(jīng)元,這些神經(jīng)元通過權(quán)重連接,實現(xiàn)對輸入數(shù)據(jù)的逐層抽象和特征提取。
    的頭像 發(fā)表于 07-05 09:47 ?936次閱讀

    深度學(xué)習(xí)常用的Python庫

    深度學(xué)習(xí)常用的Python庫,包括核心庫、可視化工具、深度學(xué)習(xí)框架、自然語言處理庫以及數(shù)據(jù)抓取庫等,并詳細分析它們的功能和
    的頭像 發(fā)表于 07-03 16:04 ?653次閱讀

    TensorFlow與PyTorch深度學(xué)習(xí)框架的比較與選擇

    深度學(xué)習(xí)作為人工智能領(lǐng)域的一個重要分支,在過去十年中取得了顯著的進展。在構(gòu)建和訓(xùn)練深度學(xué)習(xí)模型的過程中,深度
    的頭像 發(fā)表于 07-02 14:04 ?973次閱讀

    深度學(xué)習(xí)與傳統(tǒng)機器學(xué)習(xí)的對比

    在人工智能的浪潮中,機器學(xué)習(xí)深度學(xué)習(xí)無疑是兩大核心驅(qū)動力。它們各自以其獨特的方式推動著技術(shù)的進步,為眾多領(lǐng)域帶來了革命性的變化。然而,盡管它們都屬于機器學(xué)習(xí)的范疇,但
    的頭像 發(fā)表于 07-01 11:40 ?1389次閱讀

    國產(chǎn)FPGA的優(yōu)勢是什么?

    發(fā)現(xiàn)國產(chǎn)的FPGA 芯片也是越來越多,請問國產(chǎn)的芯片對比國外的最大的優(yōu)勢是什么?
    發(fā)表于 05-26 20:20

    ARM-based相比ARM cortex優(yōu)勢

    你看好ARM-based架構(gòu)嗎 相比ARM cortex優(yōu)勢 ARM其他還有什么架構(gòu)啊,感覺曝光的好少。。
    發(fā)表于 04-24 06:55

    AI手機出貨量3年后占比將過半!智能手機巨頭OPPO選擇重金投入

    在星紀魅族選擇All in AI后,另一智能手機巨頭OPPO也選擇重金投入
    的頭像 發(fā)表于 02-23 09:56 ?613次閱讀

    OneFlow Softmax算子源碼解讀之BlockSoftmax

    寫在前面:筆者這段時間工作太忙,身心俱疲,博客停更了一段時間,現(xiàn)在重新?lián)炱饋?。本文主要解讀 OneFlow 框架的第二種 Softmax 源碼實現(xiàn)細節(jié),即 block 級別的 Softmax。
    的頭像 發(fā)表于 01-08 09:26 ?717次閱讀
    <b class='flag-5'>OneFlow</b> Softmax算子源碼解讀之BlockSoftmax

    OneFlow Softmax算子源碼解讀之WarpSoftmax

    寫在前面:近來筆者偶然間接觸了一個深度學(xué)習(xí)框架 OneFlow,所以這段時間主要在閱讀 OneFlow
    的頭像 發(fā)表于 01-08 09:24 ?861次閱讀
    <b class='flag-5'>OneFlow</b> Softmax算子源碼解讀之WarpSoftmax