91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

GIL在CPython解釋器中的工作原理

FPGA之家 ? 來源:編程技術(shù)宇宙 ? 作者:軒轅之風(fēng) ? 2022-09-01 10:24 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

我是一個(gè)Python線程,我的工作就是解釋執(zhí)行程序員編寫的Python代碼。

之所以說是解釋執(zhí)行,是因?yàn)镻ython是高級語言,CPU那家伙不認(rèn)識Python代碼,需要運(yùn)行的時(shí)候動(dòng)態(tài)翻譯成CPU指令。

a961259e-2996-11ed-ba43-dac502259ad0.png

我把Python源代碼經(jīng)過“編譯”以后,變成了一個(gè)個(gè)的字節(jié)碼文件:.pyc,這是一個(gè)二進(jìn)制的文件,人類是看不懂的,只有我才能看懂。

然后我的工作就簡單了,不斷的取出字節(jié)碼文件中的“指令”解釋執(zhí)行,直到所有指令都執(zhí)行完成,我就可以休息了。

a973c690-2996-11ed-ba43-dac502259ad0.png

GIL

后來,多線程編程技術(shù)流行了起來,進(jìn)程里不止我一個(gè)線程了,又來了幾個(gè)新的伙伴。

本以為我們能和平共處,沒想到這一來就麻煩了,我們幾個(gè)各干各的,經(jīng)常把內(nèi)存空間搞出問題,也找不到背鍋的人。

終于有一天,我實(shí)在忍受不了了,召集大家商討個(gè)解決辦法。

“小伙伴們,咱們不能再這樣各搞各的了,咱們是一個(gè)Team,要彼此協(xié)作,一個(gè)線程可以走的很快,但一群線程在一起才能走的更遠(yuǎn)吶!”

“老大,你有什么想法你就直說吧”,另一個(gè)線程說到。

“要不,咱們加個(gè)鎖吧!簡單快捷,每個(gè)線程要執(zhí)行代碼,都得來申請這個(gè)鎖,申請到了才能執(zhí)行,否則就得等著”,我說到。

“那什么時(shí)候釋放呢?”

“要不弄個(gè)計(jì)數(shù)器,每個(gè)線程數(shù)到100就釋放,這樣保證別人有機(jī)會(huì)來執(zhí)行?”

“那怎么計(jì)數(shù)呢?每執(zhí)行一個(gè)字節(jié)碼就計(jì)數(shù)一次嗎?”

“可以,不過也不用那么死板,有些指令比較簡單的,很快可以完成,就可以不用計(jì)數(shù)了”

“好是好,但要是還沒數(shù)夠100,卻在執(zhí)行I/O操作阻塞了,還把鎖霸占的話,那不是資源浪費(fèi)嗎?”

小伙伴們七嘴八舌的討論著。

a98d4a48-2996-11ed-ba43-dac502259ad0.png

我想了想說到:“那就這樣,把兩種情況結(jié)合一下,常規(guī)情況下數(shù)到100就釋放一次鎖,但如果遇到阻塞情況,也要提前釋放鎖,怎么樣?”

大伙紛紛點(diǎn)頭,達(dá)成了一致,隨后我們還給這個(gè)鎖取了一個(gè)名字:全局解釋器鎖GIL。

自從用上了GIL,我們大家伙干活都規(guī)矩多了,再也沒有出現(xiàn)把公共資源搞壞的情況了。

升級版GIL

再后來,多核技術(shù)開始興起了,一個(gè)CPU里面可以同時(shí)執(zhí)行多個(gè)線程。小伙伴們高興地把這個(gè)消息散播開了。

“老大,現(xiàn)在CPU有多核了,咱們可以一起執(zhí)行了,可不可以把那個(gè)GIL給去掉啊,這樣才能利用多核的優(yōu)勢啊。”

“是啊,隔壁Java線程老是嘲笑我們看起來人多,實(shí)際只有一個(gè)線程在執(zhí)行”

可說易行難,這么多年我們都是這樣工作的,要突然去掉,出了問題誰也不敢負(fù)責(zé)啊。

“可是老大,現(xiàn)在這個(gè)GIL鎖不公平”,新來的線程抱怨到。

“哪里不公平了?”

“我準(zhǔn)備執(zhí)行代碼,發(fā)現(xiàn)鎖在你的手里,只好原地等待,等了半天都睡著了,好不容易等到你釋放了,操作系統(tǒng)把我給喚醒,準(zhǔn)備去申請鎖,結(jié)果發(fā)現(xiàn)又被你搶到了,真是浪費(fèi)表情”,新的線程滿臉委屈。

“是啊,老大,我也發(fā)現(xiàn)了,這不是偶發(fā)現(xiàn)象,我觀察很久了,經(jīng)常都會(huì)發(fā)生!頻繁被喚醒,卻發(fā)現(xiàn)白忙活一場,白白浪費(fèi)CPU資源,大家都怨氣很大啊”,另一個(gè)線程伙伴也說到。

a99c8710-2996-11ed-ba43-dac502259ad0.png

我有些不好意思,“嗯,這確實(shí)是個(gè)問題”

“還沒完呢”,新來的線程繼續(xù)說到:“現(xiàn)在按照字節(jié)碼指令數(shù)來統(tǒng)計(jì),但有些指令碼簡單,有些很復(fù)雜,導(dǎo)致同樣數(shù)到100,有些線程可以運(yùn)行很久,而有些就運(yùn)行很快就結(jié)束了,也不公平”

小伙伴們提的問題都很重要,看來是時(shí)候?qū)IL進(jìn)行一次升級了。

經(jīng)過一陣激烈的討論,我們改進(jìn)了原來對GIL,用上了新的策略:

不再用計(jì)數(shù)的方式,改用時(shí)間片的方式:每個(gè)線程的執(zhí)行時(shí)間片是5000微秒。

為了保證釋放GIL后,不被自己馬上又搶到,新增了一個(gè)鎖實(shí)現(xiàn)強(qiáng)制線程切換

改進(jìn)以后,這下總算公平了,各位小伙伴再也沒有話說,又可以安心的工作了。

結(jié)語

Python是一門解釋執(zhí)行的語言,擁有強(qiáng)大的第三方庫和跨平臺能力,近幾年P(guān)ython煥發(fā)了第二春,橫掃爬蟲、web開發(fā)、機(jī)器學(xué)習(xí)等眾多領(lǐng)域。

但長期以來,Python最為人詬病的就是它有一把鎖:GIL,這把鎖讓Python無法真正的實(shí)現(xiàn)多線程執(zhí)行,無法利用多核CPU的高性能。

實(shí)際上,這個(gè)鎖跟Python沒有半毛錢的關(guān)系,而是負(fù)責(zé)解釋執(zhí)行Python的解釋器:CPython的鍋。

CPython是用C語言編寫的Python解釋器,也是最廣為使用的Python解釋器,一般在沒有特殊說明時(shí),說Python指的就是這個(gè)CPython解釋器。

Python誕生之初,多線程技術(shù)還遠(yuǎn)沒有今天這么深入人心,甚至多核CPU也是Python誕生許多年后才出現(xiàn)的。早期的解釋器中為了支持多個(gè)線程,使用了粗暴的GIL來進(jìn)行控制,方便簡單的同時(shí),也成為了CPython的巨大歷史包袱。

Python3.2之前,Python使用簡單的計(jì)數(shù)法來統(tǒng)計(jì)控制每個(gè)線程執(zhí)行的時(shí)間。在這之后,引入了更為公平的時(shí)間片方式來升級替換。

過去二十年,曾經(jīng)有許許多多大牛都嘗試徹底去除GIL,但都沒有完美成功。

雖然Python沒能徹底去除GIL,好在,提供了其他幾種方式“曲線救國”實(shí)現(xiàn)并發(fā):

Ctypes 通過編寫C語言擴(kuò)展與Python交互,在C語言層面繞過GIL實(shí)現(xiàn)多核利用。

MultiProcess Python提供了MultiProcess,通過多進(jìn)程的方式繞過GIL

協(xié)程 協(xié)程又稱用戶態(tài)線程,Python3.4版本后新增了對協(xié)程的支持,也是對性能的提升提供了一種選擇。



審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    11279

    瀏覽量

    225034
  • 計(jì)數(shù)器
    +關(guān)注

    關(guān)注

    32

    文章

    2316

    瀏覽量

    98199
  • python
    +關(guān)注

    關(guān)注

    57

    文章

    4876

    瀏覽量

    90059
  • GIL
    GIL
    +關(guān)注

    關(guān)注

    0

    文章

    6

    瀏覽量

    7156

原文標(biāo)題:天啦嚕!Python多線程居然是騙人的?

文章出處:【微信號:zhuyandz,微信公眾號:FPGA之家】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    三相電源防雷的作用、工作原理及實(shí)際應(yīng)用的考慮因素

    ,作為電力防護(hù)體系的關(guān)鍵組件,承擔(dān)著保護(hù)三相交流電源系統(tǒng)免受雷電侵襲的重任。本文將深入探討三相電源防雷的作用、工作原理及其現(xiàn)代防雷技術(shù)
    的頭像 發(fā)表于 11-26 13:42 ?517次閱讀

    信號發(fā)生的構(gòu)成和工作原理

    信號發(fā)生作為現(xiàn)代電子測試與測量領(lǐng)域中的關(guān)鍵設(shè)備,其精密的構(gòu)造和巧妙的工作原理使之能夠產(chǎn)生各種所需的電信號。本文將深入探討信號發(fā)生的構(gòu)成及其工作原理,以幫助讀者更好地理解這一重要電子
    的頭像 發(fā)表于 11-13 11:45 ?403次閱讀
    信號發(fā)生<b class='flag-5'>器</b>的構(gòu)成和<b class='flag-5'>工作原理</b>

    PTC熱敏電阻儲(chǔ)能系統(tǒng)的應(yīng)用及工作原理深度解析

    PTC熱敏電阻儲(chǔ)能系統(tǒng)的應(yīng)用及工作原理深度解析 一、PTC熱敏電阻核心特性 PTC(Positive Temperature Coefficient Thermistor)是一種典型的非線性熱敏
    發(fā)表于 09-02 14:23

    鄂電 GIL/GIS 故障定位超聲傳感:如何實(shí)現(xiàn)故障精準(zhǔn)定位

    電力系統(tǒng)GIL(氣體絕緣金屬封閉輸電線路)與 GIS(氣體絕緣金屬封閉開關(guān)設(shè)備)是保障高壓電傳輸?shù)暮诵脑O(shè)備,其內(nèi)部一旦出現(xiàn)絕緣缺陷、金屬微粒、局部放電等故障,若無法精準(zhǔn)定位,可能導(dǎo)致設(shè)備爆炸
    的頭像 發(fā)表于 08-28 10:48 ?851次閱讀
    鄂電 <b class='flag-5'>GIL</b>/GIS 故障定位超聲傳感<b class='flag-5'>器</b>:如何實(shí)現(xiàn)故障精準(zhǔn)定位

    三相穩(wěn)壓工作原理工作流程及應(yīng)用場景

    三相穩(wěn)壓作為一種穩(wěn)定電壓的關(guān)鍵設(shè)備,工業(yè)、商業(yè)以及家庭場景中都有著極為廣泛的應(yīng)用。它能夠精準(zhǔn)調(diào)節(jié)電網(wǎng)電壓的波動(dòng),讓設(shè)備始終穩(wěn)定的電壓環(huán)境運(yùn)行,有效避免因電壓起伏而對設(shè)備造成損害
    的頭像 發(fā)表于 07-21 10:10 ?1474次閱讀

    煙氣檢測儀是如何工作的?工作原理大揭秘

    如何工作的呢? 煙氣檢測儀的工作原理基于多種檢測技術(shù),常見的有電化學(xué)傳感技術(shù)、紅外吸收技術(shù)等。 電化學(xué)傳感技術(shù)是一種應(yīng)用廣泛的檢測方法。其核心是電化學(xué)傳感
    發(fā)表于 06-16 16:10

    電壓傳感是什么?工作原理是哪樣

    傳感廣泛應(yīng)用于電力系統(tǒng)、工業(yè)自動(dòng)化、電子設(shè)備測試、新能源汽車等領(lǐng)域,用于監(jiān)測電壓變化、保護(hù)電路安全、優(yōu)化系統(tǒng)性能等。 電壓傳感工作原理 電壓傳感
    的頭像 發(fā)表于 06-13 18:00 ?3017次閱讀

    FLASH的工作原理與應(yīng)用

    的性能,即使斷電的情況下也能保持?jǐn)?shù)據(jù)不丟失。Flash存儲(chǔ)的讀取速度非???,適合用于頻繁讀取數(shù)據(jù)的應(yīng)用場景。它的工作原理是通過控制電子半導(dǎo)體材料中的移動(dòng)來存儲(chǔ)
    的頭像 發(fā)表于 05-27 13:10 ?2092次閱讀
    FLASH的<b class='flag-5'>工作原理</b>與應(yīng)用

    GPIO配置的工作原理是什么?

    我使用 EZ-USB 配置實(shí)用程序,我想知道是否有人知道 GPIO 配置的工作原理。 例如,GPIO0 可以用作傳感復(fù)位,我知道這個(gè) GPIO0 用于重置傳感,但我不明白的是選項(xiàng)用戶 GPIO 例如GPIO 1可以是Use
    發(fā)表于 05-19 06:56

    電動(dòng)調(diào)壓工作原理

    電壓調(diào)壓是一種用于控制電路電壓的裝置,其工作原理因類型而異,以下是幾種常見電壓調(diào)壓工作原理
    的頭像 發(fā)表于 05-12 13:46 ?1369次閱讀
    電動(dòng)調(diào)壓<b class='flag-5'>器</b>的<b class='flag-5'>工作原理</b>

    微動(dòng)開關(guān)的工作原理

    微動(dòng)開關(guān)的工作原理
    的頭像 發(fā)表于 04-17 09:00 ?3625次閱讀

    光學(xué)傳感工作原理與應(yīng)用

    現(xiàn)代科技的廣闊天地中,光學(xué)傳感如同一雙雙敏銳的“眼睛”,無處不在地捕捉著光線的信息,將其轉(zhuǎn)化為可供我們理解和分析的數(shù)字信號。從智能手機(jī)上的指紋解鎖,到自動(dòng)駕駛汽車的精確導(dǎo)航,再到醫(yī)療領(lǐng)域
    的頭像 發(fā)表于 04-15 18:24 ?1823次閱讀

    甲烷傳感煤礦行業(yè)的應(yīng)用

    。本文將深入探討甲烷傳感工作原理、類型、煤礦的應(yīng)用以及未來的發(fā)展趨勢。 一、甲烷傳感工作原理
    的頭像 發(fā)表于 04-15 18:09 ?964次閱讀

    運(yùn)動(dòng)控制接電子尺的工作原理

    電子尺,也稱為直線位移傳感或電阻尺,其工作原理基于滑動(dòng)變阻器的分壓原理。電子尺內(nèi)部包含一個(gè)阻軌、一個(gè)電刷以及激勵(lì)單元等關(guān)鍵部件。當(dāng)電刷阻軌上滑動(dòng)時(shí),會(huì)改變阻軌上電壓的分布,從而輸出一個(gè)與電刷位置成正比的電壓
    的頭像 發(fā)表于 03-14 16:05 ?1868次閱讀

    開關(guān)電源的基本工作原理

    方式多用于DC/AC逆變電源,或 DC/DC 電壓變換;后兩種工作方式多用于開關(guān)穩(wěn)壓電源。 根據(jù)開關(guān)器件電路連接的方式,目前比較廣泛使用的開關(guān)電源,大體上可分為:串聯(lián)式開關(guān)電源、并聯(lián)式開關(guān)電源、變壓
    發(fā)表于 03-10 17:01