阿里巴巴首次公開深度學習框架——X-Deep Learning

今年，各企業(yè)在開源路上的勢頭可以說是“你追我趕”，誰也不甘落后。6 月，小米宣布開源自己在移動端深度學習框架 MACE；9 月，騰訊 AI Lab 宣布開源一款自動化深度學習模型壓縮與加速的框架——PocketFlow。雙十一剛過，阿里巴巴就宣布要把商業(yè)操作系統(tǒng)中一個重要的業(yè)務板塊——阿里媽媽的重要技術框架進行開源，這也是阿里巴巴首次公開深度學習框架。

作為阿里巴巴旗下的大數(shù)據(jù)營銷平臺，阿里媽媽基于自身廣告業(yè)務，自主研發(fā)了深度學習框架 X-Deep Learning（下文簡稱 XDL），并已經(jīng)大規(guī)模部署應用在核心生產(chǎn)場景。相關代碼鏈接將在 12 月中旬正式發(fā)布。

▌1.XDL 面向廣告、推薦、搜索研發(fā)，覆蓋核心場景

XDL 是首個面向高維稀疏數(shù)據(jù)場景的深度學習開源框架。數(shù)據(jù)的高維稀疏性既是阿里媽媽業(yè)務場景的重要特征，也是互聯(lián)網(wǎng)的眾多核心應用場景（如廣告/推薦/搜索等）的特征，覆蓋了大多數(shù)互聯(lián)網(wǎng)企業(yè)的數(shù)據(jù)應用模式。新框架 XDL 針對阿里媽媽業(yè)務數(shù)據(jù)高維稀疏的場景特點進行了優(yōu)化。此外，微博、抖音、今日頭條等也屬于該范疇內，XDL在這些場景中都具有通用性。因此，不管是以廣告、推薦、搜索為代表業(yè)務的企業(yè)級用戶，還是對此感興趣的個人用戶，都可以加入到開源計劃當中。

另外，在阿里巴巴XDL開源之前，業(yè)界的深度學習開源框架基本是面向圖像、語音處理等場景數(shù)據(jù)而設計，這與整個人工智能領域的研究重點有關，圖像和語音是率先取得理論突破的場景，而 XDL 的開源可以說是首次在工業(yè)級互聯(lián)網(wǎng)場景中取得突破。

▌2.開放與易用，是阿里巴巴具備開源 XDL 的技術標準

XDL 采用了橋接的架構設計理念，打造面向工業(yè)級應用的分布式規(guī)模能力，單機能夠處理的計算則引用現(xiàn)有開源框架。這種橋接的架構，使得 XDL 跟業(yè)界的開源社區(qū)是無縫對接的，例如用戶可以在 XDL 框架上應用基于 Tensorflow 或者 Pytorch 編寫的深度學習算法。此外，對于已經(jīng)在使用其它開源框架的企業(yè)或者個人用戶，也可以在原有系統(tǒng)基礎上進行擴展。

除了核心的 XDL 訓練框架外，阿里媽媽透露將全面開源面向高維稀疏數(shù)據(jù)場景的系統(tǒng)化解決方案，計劃分批次對外發(fā)布，包括面向在線實時服務的深度學習預估引擎、面向全庫實時檢索的深度學習匹配引擎；同時還內置阿里媽媽自主研發(fā)的一系列算法，涉及 CTR 預估模型、CVR 預估模型、匹配召回模型、模型壓縮訓練算法等等。

剩下的就是坐等代碼了！