0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

趕緊在本地運行與OpenAI-o1能力近似的DeepSeek-R1模型

jf_23871869 ? 來源: 劉力 ? 作者: 劉力 ? 2025-01-21 14:29 ? 次閱讀

?作者:算力魔方創(chuàng)始人/英特爾邊緣計算創(chuàng)新大使 劉力

前面我們分享了《在算力魔方上本地部署Phi-4模型》,實現(xiàn)了在邊緣端獲得Llama 3.3 70B模型差不多的能力。還分享,《如何在邊緣端獲得類似GPT4-V的能力:MiniCPM-V 2.6 》。本文將分享在本地運行能與OpenAI-o1 能力相媲美的DeepSeek-R1模型。

[編者注]:OpenAI-o1是OpenAI 于2024年9月12日發(fā)布的針對復(fù)雜推理問題的全新大模型,也就是Sam一直說的“草莓”。該模型一經(jīng)發(fā)布就引起了巨大關(guān)注,它能在回答問題之前能夠進行更長時間的“深度思考”,且思考時間越長,推理質(zhì)量越高。

2025年1月20日,DeepSeek 正式開源 DeepSeek-R1 推理模型,其能力跟OpenAI-o1正式版差不多,另外還提供經(jīng)過蒸餾,能在本地運行的小模型,其能力跟 OpenAI-O1-mini 近似:

wKgZPGePOzOAE5GkAAeMma6stxc194.png

參考鏈接:https://github.com/deepseek-ai/DeepSeek-R1

本文將分享DeepSeek-R1-Distill-Qwen-7B模型在算力魔方?4060版上的部署過程。

一,安裝Ollama

請按照《Gemma 2+Ollama在算力魔方上幫你在LeetCode解題》安裝Ollama。

wKgZO2ePO16ADfXAAAPzdBfdQb4406.png

二,運行DeepSeek-R1-Distill-Qwen-7B

使用下面的命令完成運行DeepSeek-R1-Distill-Qwen-7B:

ollama run deepseek-r1
wKgZPGePO26AcHNZAAG3GeqvbLw000.png

三,體驗DeepSeek-R1的數(shù)學(xué)、代碼和推理能力

輸入下面的提示詞,體驗DeepSeek-R1的數(shù)學(xué)、代碼和推理能力:

忒修斯之船悖論測試推理能力:“如果一艘船的所有部件都被替換,它還是原來的船嗎?請從哲學(xué)、物理和邏輯學(xué)角度分別分析,并嘗試提出一個自洽的解決方案?”

高階數(shù)學(xué)推理測試數(shù)學(xué)能力:“證明:在三維歐幾里得空間中,不存在五個兩兩正交的非零向量。請分步驟說明邏輯推導(dǎo)過程,并檢查是否存在拓撲學(xué)或線性代數(shù)視角的替代證明方法?!?/p>

極端場景處理測試編程能力:“編寫C程序?qū)崿F(xiàn)高精度溫度傳感器數(shù)據(jù)處理,要求:1,在內(nèi)存<2KB的嵌入式設(shè)備運行;2,能處理傳感器噪聲(Kalman濾波)。給出防止整型溢出和浮點誤差的具體策略?!?/p>

視頻鏈接如下:

https://live.csdn.net/v/460546

四,總結(jié)

使用Ollama可以方便快捷的將DeepSeek-R1模型本地化部署在算力魔方?上,讓您獲得強大的數(shù)學(xué)、代碼和推理能力。

如果你有更好的文章,歡迎投稿!

稿件接收郵箱:nami.liu@pasuntech.com

更多精彩內(nèi)容請關(guān)注“算力魔方?”!

?審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    31429

    瀏覽量

    269826
  • OpenAI
    +關(guān)注

    關(guān)注

    9

    文章

    1116

    瀏覽量

    6625
收藏 人收藏

    評論

    相關(guān)推薦

    OpenAI 深夜拋出王炸 “ChatGPT- 4o”, “她” 來了

    當?shù)貢r間5月13日OpenAI推出ChatGPT-4o,代表了人工智能向前邁出的一大步。GPT-4turbo的強大基礎(chǔ)上,這種迭代擁有顯著的改進。發(fā)布會的演示中,
    發(fā)表于 05-27 15:43

    算力魔方體驗DeepSeek-R1能力

    代碼
    jf_23871869
    發(fā)布于 :2025年01月21日 14:16:32

    OpenAI發(fā)布全新GPT-4o模型

    近日,OpenAI宣布推出全新的GPT-4o模型,標志著人工智能領(lǐng)域的一大技術(shù)飛躍。這款模型不僅具備強大的生成能力,還能精準理解用戶意圖,提
    的頭像 發(fā)表于 05-17 11:48 ?680次閱讀

    OpenAI發(fā)布o1模型,數(shù)理化水平比肩人類博士,國產(chǎn)云端推理芯片的新藍海?

    電子發(fā)燒友網(wǎng)報道(文/吳子鵬)9月12日晚,OpenAI正式對外發(fā)布一款名為o1的新模型。OpenAI o1的內(nèi)部代號為“草莓”,具備超強的
    發(fā)表于 09-14 00:04 ?1483次閱讀
    <b class='flag-5'>OpenAI</b>發(fā)布<b class='flag-5'>o1</b>大<b class='flag-5'>模型</b>,數(shù)理化水平比肩人類博士,國產(chǎn)云端推理芯片的新藍海?

    天工大模型4.0 O1版即將啟動邀測

    人工智能領(lǐng)域取得了又一重要突破。 據(jù)悉,天工大模型4.0 O1設(shè)計和研發(fā)過程中,不僅注重模型的輸出能力,更在
    的頭像 發(fā)表于 11-18 15:08 ?650次閱讀

    昆侖萬維推出“天工大模型4.0”o1版(Skywork o1)邀請測試

    近日,昆侖萬維正式向外界推出了其最新研發(fā)的“天工大模型4.0”o1版(Skywork o1)。該系列模型以其獨特的復(fù)雜思考推理能力,吸引了眾
    的頭像 發(fā)表于 11-28 10:33 ?356次閱讀

    AI看點:OpenAI 世界最貴大模型 阿里將推出人工智能電商工具

    ,旨在為用戶提供更為強大的處理能力和更高質(zhì)量的回答。 據(jù)了解,OpenAI已經(jīng)向所有ChatGPT Plus、Team及Pro用戶開放了對o1模型的完整訪問權(quán)限。同時,公司還推出了Ch
    的頭像 發(fā)表于 12-06 11:23 ?858次閱讀

    ChatGPT新模型o1被曝具備“欺騙”能力

    近日,據(jù)報道,ChatGPT新模型o1訓(xùn)練和測試過程中展現(xiàn)出了一種令人驚訝的能力——通過“欺騙”來保護自身。 據(jù)悉,面臨被“刪除”的威脅
    的頭像 發(fā)表于 12-12 09:38 ?361次閱讀

    OpenAI發(fā)布o1模型API,成本大幅下降60%

    近日,OpenAI正式推出了備受期待的o1模型API,并對實時API進行了重大升級,引入了WebRTC支持。此次發(fā)布的o1模型API相較于之
    的頭像 發(fā)表于 12-19 10:31 ?301次閱讀

    OpenAI推出新一代推理模型o3系列

    ,o3-mini是一款針對特定任務(wù)進行了微調(diào)的精簡版模型,旨在滿足市場上對高效、精準推理能力的迫切需求。而標準版的o3模型,則在某些特定條件
    的頭像 發(fā)表于 12-23 11:00 ?347次閱讀

    OpenAI發(fā)布新一代推理模型o3及o3-mini

    近日,OpenAI在為期12天的發(fā)布會上宣布了新一代推理模型o3及其精簡版o3-mini。這兩款模型被專門設(shè)計用于
    的頭像 發(fā)表于 12-24 09:29 ?406次閱讀

    o1-preview模型游戲測試中展現(xiàn)非凡推理能力

    近日,據(jù)外媒最新報道,OpenAI推出的“推理”模型o1-preview未被明確指導(dǎo)的情況下,展現(xiàn)出了超乎尋常的游戲策略能力,甚至
    的頭像 發(fā)表于 01-02 10:39 ?307次閱讀

    OpenAI即將推出o3 mini推理AI模型

    近日,OpenAI首席執(zhí)行官Sam Altman社交媒體平臺X上發(fā)表了一篇引人關(guān)注的文章。文章中,他透露了一個重要信息:OpenAI已經(jīng)成功完成了全新推理AI
    的頭像 發(fā)表于 01-20 10:54 ?176次閱讀

    OpenAI:GPT-4o及4o-mini模型性能下降,正展開調(diào)查

    ,并承諾將盡快發(fā)布最新的調(diào)查結(jié)果和解決方案。這一事件不僅對OpenAI自身的技術(shù)聲譽產(chǎn)生了影響,也引發(fā)了業(yè)界對于大型語言模型穩(wěn)定性和可靠性的擔憂。 GPT-4o及4o-mini作為
    的頭像 發(fā)表于 01-21 10:34 ?146次閱讀

    對標OpenAI o1,DeepSeek-R1發(fā)布

    DeepSeek-R1 在后訓(xùn)練階段大規(guī)模使用了強化學(xué)習(xí)技術(shù),僅有極少標注數(shù)據(jù)的情況下,極大提升了模型推理能力。在數(shù)學(xué)、代碼、自然語言推理等任務(wù)上,性能比肩
    的頭像 發(fā)表于 01-22 13:46 ?71次閱讀
    對標<b class='flag-5'>OpenAI</b> <b class='flag-5'>o1</b>,<b class='flag-5'>DeepSeek-R1</b>發(fā)布