索引速度提升10倍！愛可生向量數(shù)據(jù)庫基于昇騰AI實(shí)現(xiàn)全面升級(jí)

近日,在深圳昇騰創(chuàng)新中心的支持下,愛可生向量數(shù)據(jù)庫(TensorDB)完成了與華為Atlas 800推理服務(wù)器和全場(chǎng)景AI框架昇思MindSpore的兼容性測(cè)試,實(shí)現(xiàn)了愛可生向量檢索技術(shù)與昇騰AI基礎(chǔ)軟硬件平臺(tái)的全面融合。

上海愛可生信息技術(shù)股份公司

上海愛可生信息技術(shù)股份有限公司是國內(nèi)知名的分布式數(shù)據(jù)庫、開源數(shù)據(jù)庫解決方案以及數(shù)據(jù)處理技術(shù)提供商。公司自主研發(fā)的云樹數(shù)據(jù)中臺(tái)、數(shù)據(jù)庫集群管理平臺(tái)、數(shù)據(jù)庫云平臺(tái)軟件、向量數(shù)據(jù)庫等產(chǎn)品已被廣泛應(yīng)用于金融、電力、智能制造、電信、廣電、交通等行業(yè),標(biāo)桿客戶包括:中國工商銀行、興業(yè)銀行、中國農(nóng)業(yè)銀行、太平洋保險(xiǎn)、友邦保險(xiǎn)、中國人保、國家電網(wǎng)、上汽集團(tuán)、中國移動(dòng)等世界500強(qiáng)企業(yè)。

向量數(shù)據(jù)庫(TensorDB)的目標(biāo)是在以圖搜圖、視頻推薦、文本檢索等常見的AI場(chǎng)景中,對(duì)海量非結(jié)構(gòu)化數(shù)據(jù)嵌入后的高維數(shù)據(jù)提供存儲(chǔ)、管理、計(jì)算的綜合能力,以滿足金融、交通、互聯(lián)網(wǎng)等行業(yè)對(duì)核心業(yè)務(wù)系統(tǒng)高可用性、高擴(kuò)展性的要求。

愛可生向量數(shù)據(jù)庫(TensorDB)

企業(yè)版

基于昇騰AI,TensorDB內(nèi)核的眾多計(jì)算任務(wù)實(shí)現(xiàn)了深度優(yōu)化:

①降低了向量計(jì)算、矩陣計(jì)算等高維數(shù)據(jù)之間計(jì)算帶來的消耗,提升了檢索算法的批處理能力,同時(shí)讀入并計(jì)算的請(qǐng)求數(shù)可達(dá)每秒4000次。

②保障了不同維度、數(shù)量級(jí)的向量數(shù)據(jù)訓(xùn)練和檢索的穩(wěn)定性,在不損失檢索精度的前提下,使模型訓(xùn)練的收斂速度提升4倍以上。

③充分利用算子可以異步執(zhí)行的特點(diǎn),實(shí)現(xiàn)了數(shù)據(jù)預(yù)處理、多種計(jì)算類算子、數(shù)據(jù)后處理在不同線程、不同流之間并發(fā),將索引過程提升10倍以上。

隨著存儲(chǔ)成本的下降,以及新興技術(shù)的發(fā)展,各行各業(yè)對(duì)非結(jié)構(gòu)化數(shù)據(jù)的重視程度將越來越高。昇騰AI將努力做好基礎(chǔ)軟硬件平臺(tái),發(fā)揮在人工智能領(lǐng)域積累的技術(shù)優(yōu)勢(shì),攜手愛可生等伙伴,共同加強(qiáng)數(shù)據(jù)場(chǎng)景能力建設(shè),共同服務(wù)中國數(shù)字經(jīng)濟(jì)轉(zhuǎn)型升級(jí)。

審核編輯黃宇