0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Python新提案:使全局解釋器鎖成為可選項(xiàng)

OSC開源社區(qū) ? 來源:OSC開源社區(qū) ? 2023-01-13 15:31 ? 次閱讀

去年的 2022 Python 語言峰會(huì)上,開發(fā)者 Sam Gross 帶來了新提案:刪除全局解釋器鎖 GIL,解放多線程性能。但由于 GIL 歷史悠久,許多官方 / 非官方的 Python 包和模塊都深度融合了 GIL 模塊,徹底移除 GIL 功能可能會(huì)對生態(tài)造成影響。在 2023 年 1 月 9 日, Sam Gross 又創(chuàng)建了另一個(gè) Python 提案 PEP 703:使全局解釋器鎖成為構(gòu)建 Python 的可選項(xiàng)。

f52bcf44-9299-11ed-bfe3-dac502259ad0.png

CPython 的全局解釋器鎖(“GIL”)防止多個(gè)線程同時(shí)執(zhí)行 Python 代碼,GIL 是 Python 有效使用多核 CPU 的障礙。

向 CPython 添加一個(gè)構(gòu)建配置 ( --without-gil) ,使其可在沒有全局解釋器鎖的情況下運(yùn)行 Python 代碼,并進(jìn)行必要的更改,以使解釋器線程安全。

這條 PEP 提案的內(nèi)容可謂是論文級別。提案中先闡述了 GIL 對 Python 并發(fā)的性能阻礙,隨后詳細(xì)分析了抽離 GIL 需要對 Python 內(nèi)部進(jìn)行哪些改動(dòng):

移除全局解釋器鎖需要對 CPython 內(nèi)部進(jìn)行大量更改,但對公共 Python 和 C API 的更改相對較少。

實(shí)施的變更大約分為以下四類:

引用計(jì)數(shù)、內(nèi)存管理、容器線程安全、鎖和 atomic API

由于該提案內(nèi)容實(shí)在太多,感興趣的朋友請?jiān)?PEP 703 詳情頁(https://peps.python.org/pep-0703)和 Cpython 核心開發(fā)者對該提案的討論帖(https://discuss.python.org/t/pep-703-making-the-global-interpreter-lock-optional/22606/10)中細(xì)閱。

目前此 PEP 已經(jīng)有了參考實(shí)現(xiàn),它的原型源于當(dāng)初為了移除 GIL 而開發(fā)的 nogil 項(xiàng)目,該原型對單線程代碼帶來較明顯 (~10%) 性能提升。

如果該提案通過,意味著默認(rèn)情況下 CPython 不會(huì)刪除或關(guān)閉 GIL,也不會(huì)讓用戶有選擇地啟用 / 刪除 GIL。因?yàn)?-without-gil是一個(gè)編譯時(shí)標(biāo)志,可以在從源代碼構(gòu)建 Python 解釋器時(shí)進(jìn)行設(shè)置。但如果棄用該配置,會(huì)導(dǎo)致對解釋器的構(gòu)建和運(yùn)行方式的深度侵入性更改,PEP 中也對此進(jìn)行了詳細(xì)介紹。

對用戶側(cè)來說,該改動(dòng)意味著如果用戶使用任何帶有編譯擴(kuò)展的包,將需要獲取或構(gòu)建一個(gè)專門針對 Python 解釋器的(不同的)ABI 編譯的版本,該版本在沒有 GIL 的情況下編譯。

關(guān)于 Python GIL

由于 CPython 的內(nèi)存管理非線程安全,因此設(shè)計(jì)了 CPython 的 GIL (Global Interpreter Lock - 全局解釋器鎖),以防止競爭條件并確保線程安全。GIL 是一個(gè)互斥鎖,只允許一個(gè)線程持有 Python 解釋器的控制權(quán),從而保護(hù)對 Python 對象的訪問,防止多個(gè)線程同時(shí)執(zhí)行 Python 字節(jié)碼。

但事后看來,GIL 并不理想,因?yàn)樗柚沽硕嗑€程的 CPython 程序充分利用多核處理器的性能。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • python
    +關(guān)注

    關(guān)注

    56

    文章

    4807

    瀏覽量

    84975
  • 解釋器
    +關(guān)注

    關(guān)注

    0

    文章

    103

    瀏覽量

    6556

原文標(biāo)題:Python新提案:使全局解釋器鎖成為可選項(xiàng)

文章出處:【微信號(hào):OSC開源社區(qū),微信公眾號(hào):OSC開源社區(qū)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    Vivado之實(shí)現(xiàn)布局布線流程介紹

    流程由一系列的子流程組成,包括:Design Initialization設(shè)計(jì)初始化、Opt Design設(shè)計(jì)優(yōu)化、Power Opt Design功率優(yōu)化【可選項(xiàng)】、Place Design布局
    的頭像 發(fā)表于 12-06 09:08 ?691次閱讀
    Vivado之實(shí)現(xiàn)布局布線流程介紹

    D的基本實(shí)現(xiàn)

    是由電平觸發(fā)的,而觸發(fā)則是由邊沿觸發(fā)的。這意味著在控制信號(hào)(通常是使能信號(hào))為高或低電平時(shí)保持?jǐn)?shù)據(jù)狀態(tài),而觸發(fā)在時(shí)鐘信號(hào)的上升沿或
    的頭像 發(fā)表于 08-30 10:45 ?926次閱讀

    的基本輸出時(shí)序

    在深入探討的輸出時(shí)序時(shí),我們需要詳細(xì)分析在不同控制信號(hào)下的行為表現(xiàn),特別是控制信號(hào)(如使能信號(hào)E)的電平變化如何影響數(shù)據(jù)輸入(D
    的頭像 發(fā)表于 08-30 10:43 ?681次閱讀

    與觸發(fā)的狀態(tài)圖是一樣的嗎?為什么?

    與觸發(fā)的狀態(tài)圖并不完全相同 ,這主要是由于它們的工作原理和觸發(fā)機(jī)制存在差異。
    的頭像 發(fā)表于 08-28 10:20 ?341次閱讀

    怎么根據(jù)sr的輸入信息

    在SR中,輸出信息(Q和Q')是根據(jù)輸入信息(S和R)來確定的。SR是一種雙穩(wěn)態(tài)電路,它可以保持一個(gè)二進(jìn)制狀態(tài),直到輸入信號(hào)改變。以下是根據(jù)S和R的輸入信息判斷Q和Q'輸出
    的頭像 發(fā)表于 08-28 09:20 ?506次閱讀

    d解決了sr的什么問題

    D(Data Latch)和SR(Set-Reset Latch)是數(shù)字電路中常見的兩種存儲(chǔ)元件。它們在數(shù)字系統(tǒng)中扮演著重要的角色,用于存儲(chǔ)和傳遞信息。然而,這兩種
    的頭像 發(fā)表于 08-28 09:16 ?663次閱讀

    pytorch和python的關(guān)系是什么

    ,PyTorch已經(jīng)成為了一個(gè)非常受歡迎的框架。本文將介紹PyTorch和Python之間的關(guān)系,以及它們在深度學(xué)習(xí)領(lǐng)域的應(yīng)用。 Python簡介 Python是一種高級、
    的頭像 發(fā)表于 08-01 15:27 ?2229次閱讀

    Python建模算法與應(yīng)用

    Python作為一種功能強(qiáng)大、免費(fèi)、開源且面向?qū)ο蟮木幊陶Z言,在科學(xué)計(jì)算、數(shù)學(xué)建模、數(shù)據(jù)分析等領(lǐng)域展現(xiàn)出了卓越的性能。其簡潔的語法、對動(dòng)態(tài)輸入的支持以及解釋性語言的本質(zhì),使得Python在多個(gè)平臺(tái)上
    的頭像 發(fā)表于 07-24 10:41 ?643次閱讀

    手機(jī)存儲(chǔ)不夠用,“軟NAS”成為新的可選項(xiàng)

    無論是硬件級的NAS解決方案亦或是便捷的網(wǎng)盤服務(wù),核心都是為了能夠解決日益膨脹的個(gè)人數(shù)據(jù)存儲(chǔ)需求,而魯大師AiNAS這樣的“軟NAS”出現(xiàn),為用戶提供了多一種選擇。同時(shí)對于云盤服務(wù)供應(yīng)商來說,也有了新的競爭壓力,靠“限速賣會(huì)員”躺著賺錢的時(shí)代,似乎已經(jīng)過去了。
    的頭像 發(fā)表于 07-17 11:36 ?401次閱讀
    手機(jī)存儲(chǔ)不夠用,“軟NAS”<b class='flag-5'>成為</b>新的<b class='flag-5'>可選項(xiàng)</b>

    用pycharm進(jìn)行python爬蟲的步驟

    PyCharm,然后點(diǎn)擊“Create New Project”創(chuàng)建一個(gè)新的Python項(xiàng)目。選擇一個(gè)合適的項(xiàng)目名稱和位置,然后選擇Python解釋。如果您還沒有安裝Py
    的頭像 發(fā)表于 07-11 10:11 ?938次閱讀

    使能PSRAM ,默認(rèn)選項(xiàng)MALLOC, 發(fā)現(xiàn)HTTP報(bào)錯(cuò)的原因?

    使能PSRAM ,默認(rèn)選項(xiàng)MALLOC, 發(fā)現(xiàn) HTTP出現(xiàn)如下錯(cuò)誤 E (36786) esp-tls-mbedtls: mbedtls_ssl_setup returned -0x7f00 E
    發(fā)表于 06-21 06:31

    鴻蒙開發(fā)接口安全:【@system.cipher (加密算法)】

    加密類型,可選項(xiàng)有: 1.?encrypt?加密 2.?decrypt?解密
    的頭像 發(fā)表于 06-06 09:11 ?1117次閱讀
    鴻蒙開發(fā)接口安全:【@system.cipher (加密算法)】

    FPGA開發(fā)過程中配置全局時(shí)鐘需要注意哪些問題

    的時(shí)鐘源。外部時(shí)鐘輸入和內(nèi)部時(shí)鐘資源都是可選項(xiàng),需要綜合考慮它們的穩(wěn)定性、精度和成本等因素。 時(shí)鐘分配 :全局時(shí)鐘資源需要有效地分配到各個(gè)邏輯單元。在分配時(shí)鐘時(shí),要注意避免時(shí)鐘信號(hào)的交叉和干擾,以減少
    發(fā)表于 04-28 09:43

    谷歌推出Jpegli開源編碼庫,優(yōu)化圖片壓縮,提升圖像品質(zhì)

    另一大優(yōu)勢則在于,Jpegli在保持對現(xiàn)有JPEG編碼/解碼的全面兼容的前提下,同樣支持常用的8位格式,且額外支持10位乃至更高的可選項(xiàng)(有助于減輕壓縮偽影等問題)。
    的頭像 發(fā)表于 04-07 11:16 ?623次閱讀

    如何使用linux下gdb來調(diào)試python程序

    GDB: ``` $ sudo apt install gdb ``` 安裝完成后,需要安裝Python調(diào)試符號(hào)。這些符號(hào)文件包含了Python解釋的調(diào)試信息,使得GDB能夠
    的頭像 發(fā)表于 01-31 10:41 ?2721次閱讀