chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

GIL在CPython解釋器中的工作原理

FPGA之家 ? 來(lái)源:編程技術(shù)宇宙 ? 作者:軒轅之風(fēng) ? 2022-09-01 10:24 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

我是一個(gè)Python線程,我的工作就是解釋執(zhí)行程序員編寫(xiě)的Python代碼。

之所以說(shuō)是解釋執(zhí)行,是因?yàn)镻ython是高級(jí)語(yǔ)言,CPU那家伙不認(rèn)識(shí)Python代碼,需要運(yùn)行的時(shí)候動(dòng)態(tài)翻譯成CPU指令。

a961259e-2996-11ed-ba43-dac502259ad0.png

我把Python源代碼經(jīng)過(guò)“編譯”以后,變成了一個(gè)個(gè)的字節(jié)碼文件:.pyc,這是一個(gè)二進(jìn)制的文件,人類(lèi)是看不懂的,只有我才能看懂。

然后我的工作就簡(jiǎn)單了,不斷的取出字節(jié)碼文件中的“指令”解釋執(zhí)行,直到所有指令都執(zhí)行完成,我就可以休息了。

a973c690-2996-11ed-ba43-dac502259ad0.png

GIL

后來(lái),多線程編程技術(shù)流行了起來(lái),進(jìn)程里不止我一個(gè)線程了,又來(lái)了幾個(gè)新的伙伴。

本以為我們能和平共處,沒(méi)想到這一來(lái)就麻煩了,我們幾個(gè)各干各的,經(jīng)常把內(nèi)存空間搞出問(wèn)題,也找不到背鍋的人。

終于有一天,我實(shí)在忍受不了了,召集大家商討個(gè)解決辦法。

“小伙伴們,咱們不能再這樣各搞各的了,咱們是一個(gè)Team,要彼此協(xié)作,一個(gè)線程可以走的很快,但一群線程在一起才能走的更遠(yuǎn)吶!”

“老大,你有什么想法你就直說(shuō)吧”,另一個(gè)線程說(shuō)到。

“要不,咱們加個(gè)鎖吧!簡(jiǎn)單快捷,每個(gè)線程要執(zhí)行代碼,都得來(lái)申請(qǐng)這個(gè)鎖,申請(qǐng)到了才能執(zhí)行,否則就得等著”,我說(shuō)到。

“那什么時(shí)候釋放呢?”

“要不弄個(gè)計(jì)數(shù)器,每個(gè)線程數(shù)到100就釋放,這樣保證別人有機(jī)會(huì)來(lái)執(zhí)行?”

“那怎么計(jì)數(shù)呢?每執(zhí)行一個(gè)字節(jié)碼就計(jì)數(shù)一次嗎?”

“可以,不過(guò)也不用那么死板,有些指令比較簡(jiǎn)單的,很快可以完成,就可以不用計(jì)數(shù)了”

“好是好,但要是還沒(méi)數(shù)夠100,卻在執(zhí)行I/O操作阻塞了,還把鎖霸占的話,那不是資源浪費(fèi)嗎?”

小伙伴們七嘴八舌的討論著。

a98d4a48-2996-11ed-ba43-dac502259ad0.png

我想了想說(shuō)到:“那就這樣,把兩種情況結(jié)合一下,常規(guī)情況下數(shù)到100就釋放一次鎖,但如果遇到阻塞情況,也要提前釋放鎖,怎么樣?”

大伙紛紛點(diǎn)頭,達(dá)成了一致,隨后我們還給這個(gè)鎖取了一個(gè)名字:全局解釋器鎖GIL。

自從用上了GIL,我們大家伙干活都規(guī)矩多了,再也沒(méi)有出現(xiàn)把公共資源搞壞的情況了。

升級(jí)版GIL

再后來(lái),多核技術(shù)開(kāi)始興起了,一個(gè)CPU里面可以同時(shí)執(zhí)行多個(gè)線程。小伙伴們高興地把這個(gè)消息散播開(kāi)了。

“老大,現(xiàn)在CPU有多核了,咱們可以一起執(zhí)行了,可不可以把那個(gè)GIL給去掉啊,這樣才能利用多核的優(yōu)勢(shì)啊?!?/p>

“是啊,隔壁Java線程老是嘲笑我們看起來(lái)人多,實(shí)際只有一個(gè)線程在執(zhí)行”

可說(shuō)易行難,這么多年我們都是這樣工作的,要突然去掉,出了問(wèn)題誰(shuí)也不敢負(fù)責(zé)啊。

“可是老大,現(xiàn)在這個(gè)GIL鎖不公平”,新來(lái)的線程抱怨到。

“哪里不公平了?”

“我準(zhǔn)備執(zhí)行代碼,發(fā)現(xiàn)鎖在你的手里,只好原地等待,等了半天都睡著了,好不容易等到你釋放了,操作系統(tǒng)把我給喚醒,準(zhǔn)備去申請(qǐng)鎖,結(jié)果發(fā)現(xiàn)又被你搶到了,真是浪費(fèi)表情”,新的線程滿(mǎn)臉委屈。

“是啊,老大,我也發(fā)現(xiàn)了,這不是偶發(fā)現(xiàn)象,我觀察很久了,經(jīng)常都會(huì)發(fā)生!頻繁被喚醒,卻發(fā)現(xiàn)白忙活一場(chǎng),白白浪費(fèi)CPU資源,大家都怨氣很大啊”,另一個(gè)線程伙伴也說(shuō)到。

a99c8710-2996-11ed-ba43-dac502259ad0.png

我有些不好意思,“嗯,這確實(shí)是個(gè)問(wèn)題”

“還沒(méi)完呢”,新來(lái)的線程繼續(xù)說(shuō)到:“現(xiàn)在按照字節(jié)碼指令數(shù)來(lái)統(tǒng)計(jì),但有些指令碼簡(jiǎn)單,有些很復(fù)雜,導(dǎo)致同樣數(shù)到100,有些線程可以運(yùn)行很久,而有些就運(yùn)行很快就結(jié)束了,也不公平”

小伙伴們提的問(wèn)題都很重要,看來(lái)是時(shí)候?qū)IL進(jìn)行一次升級(jí)了。

經(jīng)過(guò)一陣激烈的討論,我們改進(jìn)了原來(lái)對(duì)GIL,用上了新的策略:

不再用計(jì)數(shù)的方式,改用時(shí)間片的方式:每個(gè)線程的執(zhí)行時(shí)間片是5000微秒。

為了保證釋放GIL后,不被自己馬上又搶到,新增了一個(gè)鎖實(shí)現(xiàn)強(qiáng)制線程切換

改進(jìn)以后,這下總算公平了,各位小伙伴再也沒(méi)有話說(shuō),又可以安心的工作了。

結(jié)語(yǔ)

Python是一門(mén)解釋執(zhí)行的語(yǔ)言,擁有強(qiáng)大的第三方庫(kù)和跨平臺(tái)能力,近幾年P(guān)ython煥發(fā)了第二春,橫掃爬蟲(chóng)、web開(kāi)發(fā)、機(jī)器學(xué)習(xí)等眾多領(lǐng)域。

但長(zhǎng)期以來(lái),Python最為人詬病的就是它有一把鎖:GIL,這把鎖讓Python無(wú)法真正的實(shí)現(xiàn)多線程執(zhí)行,無(wú)法利用多核CPU的高性能。

實(shí)際上,這個(gè)鎖跟Python沒(méi)有半毛錢(qián)的關(guān)系,而是負(fù)責(zé)解釋執(zhí)行Python的解釋器:CPython的鍋。

CPython是用C語(yǔ)言編寫(xiě)的Python解釋器,也是最廣為使用的Python解釋器,一般在沒(méi)有特殊說(shuō)明時(shí),說(shuō)Python指的就是這個(gè)CPython解釋器。

Python誕生之初,多線程技術(shù)還遠(yuǎn)沒(méi)有今天這么深入人心,甚至多核CPU也是Python誕生許多年后才出現(xiàn)的。早期的解釋器中為了支持多個(gè)線程,使用了粗暴的GIL來(lái)進(jìn)行控制,方便簡(jiǎn)單的同時(shí),也成為了CPython的巨大歷史包袱。

Python3.2之前,Python使用簡(jiǎn)單的計(jì)數(shù)法來(lái)統(tǒng)計(jì)控制每個(gè)線程執(zhí)行的時(shí)間。在這之后,引入了更為公平的時(shí)間片方式來(lái)升級(jí)替換。

過(guò)去二十年,曾經(jīng)有許許多多大牛都嘗試徹底去除GIL,但都沒(méi)有完美成功。

雖然Python沒(méi)能徹底去除GIL,好在,提供了其他幾種方式“曲線救國(guó)”實(shí)現(xiàn)并發(fā):

Ctypes 通過(guò)編寫(xiě)C語(yǔ)言擴(kuò)展與Python交互,在C語(yǔ)言層面繞過(guò)GIL實(shí)現(xiàn)多核利用。

MultiProcess Python提供了MultiProcess,通過(guò)多進(jìn)程的方式繞過(guò)GIL

協(xié)程 協(xié)程又稱(chēng)用戶(hù)態(tài)線程,Python3.4版本后新增了對(duì)協(xié)程的支持,也是對(duì)性能的提升提供了一種選擇。



審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    11080

    瀏覽量

    217120
  • 計(jì)數(shù)器
    +關(guān)注

    關(guān)注

    32

    文章

    2291

    瀏覽量

    96425
  • python
    +關(guān)注

    關(guān)注

    56

    文章

    4827

    瀏覽量

    86774
  • GIL
    GIL
    +關(guān)注

    關(guān)注

    0

    文章

    5

    瀏覽量

    7088

原文標(biāo)題:天啦嚕!Python多線程居然是騙人的?

文章出處:【微信號(hào):zhuyandz,微信公眾號(hào):FPGA之家】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    電動(dòng)調(diào)壓工作原理

    電壓調(diào)壓是一種用于控制電路電壓的裝置,其工作原理因類(lèi)型而異,以下是幾種常見(jiàn)電壓調(diào)壓工作原理
    的頭像 發(fā)表于 05-12 13:46 ?377次閱讀
    電動(dòng)調(diào)壓<b class='flag-5'>器</b>的<b class='flag-5'>工作原理</b>

    光學(xué)傳感工作原理與應(yīng)用

    現(xiàn)代科技的廣闊天地中,光學(xué)傳感如同一雙雙敏銳的“眼睛”,無(wú)處不在地捕捉著光線的信息,將其轉(zhuǎn)化為可供我們理解和分析的數(shù)字信號(hào)。從智能手機(jī)上的指紋解鎖,到自動(dòng)駕駛汽車(chē)的精確導(dǎo)航,再到醫(yī)療領(lǐng)域
    的頭像 發(fā)表于 04-15 18:24 ?594次閱讀

    變送器的工作原理 變送器工業(yè)的應(yīng)用

    處理技術(shù),具體工作原理包括但不限于電阻式、電感式、電容式、電渦流式、磁電式、壓電式、光電式、磁彈性式、振頻式等。 工業(yè)應(yīng)用,變送器通常作為測(cè)量系統(tǒng)的重要組成部分,與傳感緊密配合
    的頭像 發(fā)表于 01-31 10:04 ?2679次閱讀

    分壓工作原理

     分壓是一種電路元件,其工作原理基于歐姆定律和電壓分配法則。分壓通常由兩個(gè)或更多個(gè)電阻(或其他元件,如電容器)串聯(lián)而成,用于將輸入電壓分配到輸出端。以下是分壓
    的頭像 發(fā)表于 01-28 13:50 ?1671次閱讀

    移動(dòng)電源的工作原理_移動(dòng)電源結(jié)構(gòu)

    移動(dòng)電源的工作原理是將電能存儲(chǔ)在內(nèi)置電池中,然后通過(guò)適當(dāng)?shù)碾妷汉碗娏鬏敵?,為電子設(shè)備提供所需的電能。以下是關(guān)于移動(dòng)電源工作原理的詳細(xì)解釋
    的頭像 發(fā)表于 01-27 16:11 ?1460次閱讀

    超級(jí)電容電池的工作原理

    超級(jí)電容電池是一種介于傳統(tǒng)電容器與電池之間的新型儲(chǔ)能裝置。其工作原理主要基于電荷分離和電場(chǎng)存儲(chǔ),以下是關(guān)于超級(jí)電容電池工作原理的詳細(xì)解釋
    的頭像 發(fā)表于 01-27 11:17 ?1164次閱讀

    FDD的工作原理詳解

    工作原理的詳細(xì)解釋: 一、基本思想 FDD通過(guò)將頻譜劃分為上行和下行兩個(gè)不重疊的頻段,實(shí)現(xiàn)同時(shí)雙向通信。上行鏈路和下行鏈路使用兩個(gè)分開(kāi)的頻率,這兩個(gè)頻率之間有一定的頻率間隔要求,以避免相互干擾。 二、核心組件 雙工 :雙工
    的頭像 發(fā)表于 01-07 17:12 ?1990次閱讀

    氣體壓力傳感工作原理解析 氣體壓力傳感工業(yè)應(yīng)用的作用

    氣體壓力傳感工作原理解析 1. 壓力傳感的基本概念 壓力傳感是一種將壓力信號(hào)轉(zhuǎn)換成電信號(hào)的裝置。它可以測(cè)量絕對(duì)壓力、差壓或表壓力。
    的頭像 發(fā)表于 12-09 16:19 ?2035次閱讀

    CMOS傳感工作原理 CMOS技術(shù)相機(jī)的應(yīng)用

    CMOS傳感工作原理 CMOS傳感的核心是其能夠?qū)⒐庑盘?hào)轉(zhuǎn)換為電信號(hào)的能力。這種轉(zhuǎn)換是通過(guò)一個(gè)由光敏元件組成的陣列實(shí)現(xiàn)的,每個(gè)元件對(duì)應(yīng)圖像的一個(gè)像素。以下是CMOS傳感
    的頭像 發(fā)表于 11-14 09:49 ?4516次閱讀

    線性傳感工作原理

    線性傳感是一種檢測(cè)裝置,其工作原理基于輸入與輸出之間成線性關(guān)系的特性。以下是對(duì)線性傳感工作原理的詳細(xì)解釋
    的頭像 發(fā)表于 10-21 16:10 ?1690次閱讀

    輔助電源的工作原理

     輔助電源的工作原理主要涉及主電源發(fā)生故障或不穩(wěn)定時(shí),自動(dòng)切換到備用電源,以保證設(shè)備的持續(xù)供電。以下是關(guān)于輔助電源工作原理的詳細(xì)解釋
    的頭像 發(fā)表于 10-21 14:56 ?1277次閱讀

    鋅銀電池的工作原理

    鋅銀電池的工作原理主要基于鋅和銀兩種金屬之間的氧化還原反應(yīng)。以下是鋅銀電池工作原理的詳細(xì)解釋
    的頭像 發(fā)表于 10-03 14:59 ?3650次閱讀

    cmos電流反饋運(yùn)放的工作原理是什么?

    這是一個(gè)cmos電流反饋型運(yùn)放的原理圖 誰(shuí)能詳細(xì)的解釋一下它的工作原理 具體每個(gè)mos有什么用 如何實(shí)現(xiàn)放大的 謝謝了
    發(fā)表于 09-23 07:40

    光耦合工作原理介紹

    電子電路設(shè)計(jì),光耦合是一種關(guān)鍵元件,它通過(guò)光信號(hào)傳輸信息,實(shí)現(xiàn)電氣隔離。這種獨(dú)特的工作機(jī)制使得光耦合
    的頭像 發(fā)表于 09-14 10:37 ?1541次閱讀
    光耦合<b class='flag-5'>器</b>的<b class='flag-5'>工作原理</b>介紹

    VCO的工作原理是什么

    VCO(Voltage-Controlled Oscillator,電壓控制振蕩)的工作原理是基于電子器件的非線性特性,通過(guò)改變輸入電壓來(lái)調(diào)整輸出信號(hào)的頻率。以下是對(duì)VCO工作原理的詳細(xì)闡述,包括其電路結(jié)構(gòu)、
    的頭像 發(fā)表于 08-20 17:16 ?4449次閱讀