AI 時代已經(jīng)來了!
現(xiàn)在,越來越多的企業(yè)和個人開始使用 AI 技術(shù)來解決各種問題。想要了解 AI,那么就一定要了解 AI 模型,作為 AI 的核心技術(shù)之一,AI 模型為各種進(jìn)階的人工智能應(yīng)用奠定了基礎(chǔ),從 ChatGPT 、文心一言、通義千問這種語言模型,到 Stable Diffusion、Midjourney 這種文本到圖像生成模型,很難不讓開發(fā)者們開始對 AI 模型的開發(fā)產(chǎn)生關(guān)注。
目前已經(jīng)有許多開源的 AI 模型供開發(fā)者們學(xué)習(xí),但開發(fā)者們接觸后才發(fā)現(xiàn),AI 模型大多體積龐大,對其進(jìn)行版本控制和共享下載都十分困難。比如 stable-diffusion-v1-5 模型總共要占用近 24GB 的空間,清華大學(xué)開源的 ChatGLM-6B 也需要超過 13GB 的空間,如此巨大的空間占用,對于個人開發(fā)者來說是一個巨大的挑戰(zhàn)。
AI 模型也能用 Gitee 托管
為了幫助開發(fā)者們更高效的學(xué)習(xí)和開發(fā) AI 模型,Gitee 現(xiàn)已經(jīng)支持了 AI 模型托管功能,為廣大 AI 開發(fā)者提供高速穩(wěn)定的托管服務(wù),現(xiàn)在除了代碼之外,你也可以在 Gitee 托管自己的 AI 模型了。
查看 AI 模型
AI 模型的管理界面和代碼的管理界面風(fēng)格統(tǒng)一,比較明顯的區(qū)別在于在大文件(如 AI 模型文件)后會對其進(jìn)行 LFS 文件的標(biāo)注,并注明其所占空間大小,這樣就能很方便地定位到 AI 模型文件。
下載 AI 模型
- 通過網(wǎng)頁下載如果你想要下載倉庫中的某個 AI 模型,就像下載代碼倉庫中的某個文件一樣,點擊其文件名并點擊下載即可。
- 通過命令行下載除網(wǎng)頁外,你也可以通過命令行下載模型文件:
#克隆倉庫
gitclonehttps://gitee.com/
cd
#若已全局啟動lfs,AI模型已全部自動下載完成
#若未全局啟動lfs,可手動下載指定模型
gitlfsinstall
#執(zhí)行完成后,的模型文件就可以直接使用了
gitlfspull-I
通過 Git LFS 管理模型
你還可以使用 Git LFS 的方式對模型進(jìn)行管理。在倉庫標(biāo)簽頁中的「管理」進(jìn)入「Git LFS」選項,就可以查看該倉庫內(nèi)所有的 LFS 文件,包含其文件類型、大小等信息,并可以對它們進(jìn)行下載和刪除的操作。
怎么把 AI 模型上傳到 Gitee
那么,如果想在 Gitee 上托管 AI 模型該如何操作呢?流程和代碼托管一樣嗎?
與代碼托管類似,目前 Gitee 支持從 Hugging Face 導(dǎo)入和從本地推送兩種方式進(jìn)行 AI 模型的上傳:
從 Hugging Face 導(dǎo)入
Hugging Face 是一家非?;钴S的人工智能創(chuàng)業(yè)公司。它擁有一個活躍的人工智能社區(qū)。有超過5000多家機構(gòu)都在 Hugging Face 的社區(qū)發(fā)布內(nèi)容,包括 Google AI、Facebook AI、微軟等,這也讓它成為了目前開發(fā)者們最熟悉的人工智能技術(shù)社區(qū)。
現(xiàn)在你可以直接使用 Hugging Face 的模型地址來將其導(dǎo)入至 Gitee 中,其操作與代碼倉庫的導(dǎo)入是相同的:
- 點擊右上角頭像旁的「+」,選擇從外部倉庫導(dǎo)入;
- 在 Git 倉庫 URL 中輸入你想要導(dǎo)入的 Hugging Face 地址,Gitee 會為其自動設(shè)置名稱及路徑;
- 點擊「導(dǎo)入」,等待幾分鐘即可完成,同時后臺開始同步 LFS 文件(速度取決于文件大?。?。
從本地推送
除了從 Hugging Face 導(dǎo)入外,由于 Gitee 全面支持 Git LFS 功能,所以 Gitee 同樣支持從本地推送 AI 模型,其流程與代碼推送略有不同的是,推送 AI 模型時需要加入git lfs
相關(guān)命令。
- 推送 Hugging Face 的模型倉庫
#克隆倉庫至本地
gitclonehttps://huggingface.co/bert-base-uncased.git
cdbert-base-uncased
#同步模型數(shù)據(jù)
gitlfsfetch--all
#推送到Gitee倉庫
gitlfspushhttps://gitee.com/--all
- 推送自己的 AI 模型倉庫
cdai-models-project
#初始化倉庫
gitinit
#添加remote
gitremoteaddoriginhttps://gitee.com/
//...
//創(chuàng)建ai模型,如:xxx.msgpack
//...
#追蹤模型文件
gitlfstrack"*.msgpack"
#提交追蹤變更
gitadd.gitattributes
gitcommit-m"track*.msgpack"
#提交模型
gitadd.
gitcommit-m"append...."
#推送模型
gitlfspushorigin--all
gitpush
想要獲得更大的存儲空間?
目前該功能已經(jīng)對所有付費企業(yè)開放,由于 AI 模型體積龐大,存儲和流量成本較高,付費企業(yè)可以通過擴(kuò)容 LFS 容量以存儲更多的 AI 模型,在企業(yè)控制臺中,點擊左下角的設(shè)置即可查看 Git LFS 配額使用情況,并可按需進(jìn)行擴(kuò)容操作。
如果你想要獲取更多關(guān)于 LFS 擴(kuò)容的信息,歡迎掃描下方二維碼聯(lián)系專屬顧問,或前往 Gitee 企業(yè)版官網(wǎng)了解更多詳情:https://gitee.com/enterprises。
AI 時代已來,Gitee 已經(jīng)做好準(zhǔn)備幫助你搭上這趟快車,快來和我們同行吧!
審核編輯 :李倩
-
AI
+關(guān)注
關(guān)注
87文章
30896瀏覽量
269107 -
模型
+關(guān)注
關(guān)注
1文章
3243瀏覽量
48842 -
代碼
+關(guān)注
關(guān)注
30文章
4788瀏覽量
68616
原文標(biāo)題:緊跟AI步伐, Gitee已支持AI模型托管
文章出處:【微信號:OSC開源社區(qū),微信公眾號:OSC開源社區(qū)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論