亚洲激情专区-91九色丨porny丨老师-久久久久久久女国产乱让韩-国产精品午夜小视频观看

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

python 并發編程 非阻塞IO模型原理解析

發布時間:2020-08-27 22:00:53 來源:腳本之家 閱讀:149 作者:minger_lcm 欄目:開發技術

非阻塞IO(non-blocking IO)

Linux下,可以通過設置socket使其變為non-blocking。當對一個non-blocking socket執行讀操作時,流程是這個樣子:

python 并發編程 非阻塞IO模型原理解析

從圖中可以看出,當用戶進程發出read操作時,如果kernel中的數據還沒有準備好,那么它并不會block用戶進程,而是立刻返回一個error。從用戶進程角度講 ,它發起一個read操作后,并不需要等待,而是馬上就得到了一個結果。用戶進程判斷結果是一個error時,它就知道數據還沒有準備好,于是用戶就可以在本次到下次再發起read詢問的時間間隔內做其他事情,或者直接再次發送read操作。一旦kernel中的數據準備好了,并且又再次收到了用戶進程的system call,那么它馬上就將數據拷貝到了用戶內存(這一階段仍然是阻塞的,這段是本地拷貝,copy data ),然后返回。

也就是說非阻塞的recvform系統調用調用之后,進程并沒有被阻塞,內核馬上返回給進程,如果數據還沒準備好,
此時會返回一個error。進程在返回之后,可以干點別的事情,然后再發起recvform系統調用。重復上面的過程,
循環往復的進行recvform系統調用。這個過程通常被稱之為輪詢。輪詢檢查內核數據,直到數據準備好,再拷貝數據到進程,
進行數據處理。需要注意,拷貝數據整個過程,進程仍然是屬于阻塞的狀態。
所以,在非阻塞式IO中,用戶進程其實是需要不斷的主動詢問kernel操作系統內存 數據準備好了沒有。

非阻塞IO示例

  • 設置socket接口為 非阻塞IO接口
  • 默認是True 為阻塞
  • server.setblocking(False)
  • 處理一下這個異常

BlockingIOError: [WinError 10035] 無法立即完成一個非阻止性套接字操作。

from socket import *
server = socket(AF_INET,SOCK_STREAM)
server.bind(('127.0.0.1',8000))
server.listen(5)
# 設置socket接口為 非阻塞IO接口
# 默認是True 為阻塞
server.setblocking(False)
print("starting...")
while True:
  try:
    conn,addr = server.accept()
    print(addr)

  except BlockingIOError:
    print("干其他的工作")
server.close()

執行結果,如上面的圖,一直返回error消息

starting...
干其他的工作
干其他的工作
干其他的工作
干其他的工作

服務端 可以與 多個客戶端建立連接,實現服務端可以不停的建立連接

from socket import *
server = socket(AF_INET,SOCK_STREAM)
server.bind(('127.0.0.1',8000))
server.listen(5)
# 設置socket接口為 非阻塞IO接口
# 默認是True 為阻塞
server.setblocking(False)
r_list = []
print("starting...")
while True:
  try:
    conn,addr = server.accept()
    r_list.append(conn)
    print(r_list)
  except BlockingIOError:
    pass
server.close()

起三個客戶端與服務端建立連接

python 并發編程 非阻塞IO模型原理解析

r_list 存著所有建立的連接

有連接來,就建立連接,沒有連接來,就拋出異常

實現IO非阻塞 并發 多個連接

from socket import *
server = socket(AF_INET,SOCK_STREAM)
server.bind(('127.0.0.1',8000))
server.listen(5)
# 設置socket接口為 非阻塞IO接口
# 默認是True 為阻塞
server.setblocking(False)
r_list = []
print("starting...")
while True:
  try:
    conn,addr = server.accept()
    r_list.append(conn)
    print(r_list)
  except BlockingIOError:
    # 定義刪除連接列表
    del_rlist = []
    for conn in r_list:
      try:
        data = conn.recv(1024)
        # 收空數據時候
        if not data:
          del_rlist.append(conn)
          continue
        conn.send(data.upper())
      # 沒有連接,拋出異常,就結束這次循環,繼續
      except BlockingIOError:
        continue
      # 套接字出現異常,客戶端單方面連接斷開
      except Exception:
        conn.close()
        del_rlist.append(conn)
        break
    # 結束上面循環之后,循環del_list 連接元素 刪除連接
    for conn in del_rlist:
      del_rlist.remove(conn)
server.close()

BUG:send也是IO阻塞接口

當send在數據量過大時候,也會阻塞。

send操作是,把應用程序把數據發送到操作系統緩存區里,而操作系統緩存區空間也是有限的。緩存區也會滿了,后面還有數據需要發送,那只能等緩存區清掉數據,有空間了,才能發送數據。所以在這里緩存區滿了,就阻塞。

修改后服務端的代碼 可以自己檢測IO,遇到IO切換單個線程的其他任務,去運行,實現單線程并發

from socket import *
server = socket(AF_INET,SOCK_STREAM)
server.bind(('127.0.0.1',8000))
server.listen(5)
# 設置socket接口為 非阻塞IO接口
# 默認是True 為阻塞
server.setblocking(False)
r_list = []
w_list = []
print("starting...")
while True:
  try:
    conn,addr = server.accept()
    r_list.append(conn)
    print(r_list)
  except BlockingIOError:
    # 收消息
    # 定義刪除連接列表
    del_rlist = []
    for conn in r_list:
      try:
        data = conn.recv(1024)
        # 收空數據時候
        if not data:
          del_rlist.append(conn)
          continue
        '''加入元祖 元祖有兩個元素 
        1.存放套接字連接
        2.準備要發送的的數據
        '''
        w_list.append((conn, data.upper()))
      # 沒有連接,拋出異常,就結束這次循環,繼續
      except BlockingIOError:
        continue
      # 套接字出現異常,客戶端單方面連接斷開
      except Exception:
        conn.close()
        del_rlist.append(conn)
        break
    # 發消息
    # 用于 發成功數據后,刪除套接字連接的列表
    del_wlist = []
        for item in w_list:
     try:
        conn = item[0]
        data = item[1]
        conn.send(data)
        # 發成功后,從列表刪除連接
        del_wlist.append(item)
      # send 有可能出現異常 沒發完情況
      except BlockingIOError:
        pass
    # 結束上面循環之后,循環del_wlist 連接元素 刪除連接
    for item in del_wlist:
      del_wlist.remove(item)
    # 結束上面循環之后,循環del_rlist 連接元素 刪除連接
    for conn in del_rlist:
      del_rlist.remove(conn)
server.close()

這就是非阻塞IO

但是非阻塞IO模型絕不被推薦。
我們不能否則其優點:能夠在等待任務完成的時間里干其他活了(包括提交其他任務,也就是 “后臺” 可以有多個任務在“”同時“”執行)。

干其他活時候,有可能來新的連接,新的連接來了,不能及時響應與該新的連接,建立連接。所以會導致問題:數據不會及時響應

但是也難掩其缺點:

1. 循環調用recv()將大幅度推高CPU占用率;這也是我們在代碼中留一句time.sleep(2)的原因,否則在低配主機下極容易出現卡機情況

2. 任務完成的響應延遲增大了,因為每過一段時間才去輪詢一次read操作,而任務可能在兩次輪詢之間的任意時間完成。
這會導致整體數據吞吐量的降低。

3.死循環While True會導致CPU的無用的耗用、占用

此外,在這個方案中recv()更多的是起到檢測“操作是否完成”的作用,實際操作系統提供了更為高效的檢測“操作是否完成“作用的接口,例如select()多路復用模式,可以一次檢測多個連接是否活躍

以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支持億速云。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

丽水市| 吴忠市| 广东省| 正阳县| 棋牌| 太仓市| 鄢陵县| 施甸县| 文水县| 铁岭县| 神池县| 四会市| 山阴县| 周至县| 杨浦区| 湛江市| 弥渡县| 花莲县| 阜城县| 镇赉县| 高陵县| 乳源| 博客| 怀柔区| 利辛县| 乐清市| 六安市| 兴和县| 舒兰市| 柞水县| 尖扎县| 四会市| 延吉市| 体育| 辰溪县| 宜黄县| 银川市| 陆川县| 翼城县| 武城县| 玉树县|