高級IO技術詳解:阻塞/非阻塞IO、多路復用與內存映射

高級IO技術詳解:阻塞/非阻塞IO、多路復用與內存映射

關鍵詞:阻塞IO 非阻塞IO select/poll/epoll mmap


一、阻塞IO vs 非阻塞IO

類型行為特點設置方式
阻塞IO- 讀空管道阻塞
- 寫滿管道阻塞
默認模式
非阻塞IO- 讀空文件返回 -1errno=EAGAIN
- 寫滿立即返回錯誤
1. open() 時加 O_NONBLOCK 標志
2. 通過 fcntl() 設置:
fcntl(fd, F_SETFL, O_NONBLOCK)

二、IO多路復用(解決高并發IO問題)

1. 狀態機模型

將IO任務抽象為狀態流轉,例如讀操作的狀態轉換:

STATE_R → read()├── 返回值 >0STATE_W (準備寫)  ├── 返回值=0STATE_T (終止)  ├── errno=EAGAIN → 保持STATE_R  └── 其他錯誤    → STATE_E (異常)

2. select() 函數

int select(int nfds, fd_set *readfds, fd_set *writefds, fd_set *exceptfds, struct timeval *timeout);
  • 核心操作
    FD_ZERO(&set);     // 清空集合
    FD_SET(fd, &set);  // 添加fd
    FD_CLR(fd, &set);  // 移除fd
    FD_ISSET(fd, &set);// 檢查fd是否就緒
    
  • 特點
    • 監聽讀/寫/異常事件
    • 文件描述符上限:FD_SETSIZE (通常1024)
    • 每次調用需重新初始化fd_set
    • 超時控制可模擬sleepselect(0, NULL, NULL, NULL, &tv)

3. poll() 函數

struct pollfd {int fd;         // 監聽的文件描述符short events;   // 監聽的事件(POLLIN/POLLOUT)short revents;  // 返回的事件
};
int poll(struct pollfd *fds, nfds_t nfds, int timeout);
  • 優勢
    • 無文件描述符數量限制
    • 監聽與返回結果分離(通過eventsrevents
    • 無需每次重新初始化結構體

4. epoll(Linux專屬高性能模型)

int epoll_create(int size);  // 創建epoll實例
int epoll_ctl(int epfd, int op, int fd, struct epoll_event *event); // 注冊fd
int epoll_wait(int epfd, struct epoll_event *events, int maxevents, int timeout); // 等待事件
  • 核心優勢
    • 事件驅動,無需遍歷所有fd
    • 支持邊緣觸發(ET)與水平觸發(LT)模式
    • 百萬級并發支持

三、內存映射IO(mmap)

void *mmap(void *addr, size_t length, int prot, int flags, int fd, off_t offset);
  • 功能:將磁盤文件直接映射到內存空間
  • 應用場景
    • 零拷貝文件讀寫
    • 大文件高效處理
    • 進程間共享內存

四、關鍵總結

技術適用場景性能瓶頸
select/poll低并發兼容性需求O(n) 輪詢效率低
epollLinux高并發網絡服務無上限,事件驅動O(1)
mmap大文件讀寫/進程通信減少內核-用戶態拷貝開銷

擴展思考

  1. 邊緣觸發(ET)模式下為何必須非阻塞IO?
  2. mmap 寫回磁盤的同步機制(msync())如何保證數據安全?
  3. 異步IO(aio)與多路復用的本質區別?

原創聲明:本文為博主原創筆記整理,轉載請注明出處!


本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/pingmian/85584.shtml
繁體地址,請注明出處:http://hk.pswp.cn/pingmian/85584.shtml
英文地址,請注明出處:http://en.pswp.cn/pingmian/85584.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

【無標題】拓撲對偶框架的嚴格性補完與哲學突破

拓撲對偶框架的嚴格性補完與哲學突破: 一、數學嚴格性補完:同調類守恒的解決方案 1.1 負系數問題的幾何化修正 **問題本質**:當 $a_i$ 含負數時,曲率分配 $\kappa\frac{2\pi a_i}{A_{\text{max}}}$ 導致偽黎曼流形 **解決方案…

從0開始學習R語言--Day25--A/B測試 vs 多臂老虎機

通常在比較兩個不同的方案對數據的影響時,我們會各拿50%的數據去進行對照試驗,這樣觀測到的結果會最大程度地保留統計學上的特點。但實際上,并不是所有對比不同方案都要這樣做,一來,我們需要等到兩組實驗都完全結束后&…

功耗高?加密弱?愛普特APT32F1023H8S6單片機 2μA待機+AES硬件加密破局

愛普特APT32F1023H8S6單片機深度解析 1. 產品定位 APT32F1023H8S6 是愛普特半導體(APT)推出的 32位高性能單片機,基于 ARM Cortex-M0內核,主打 高集成度、低功耗、高性價比,面向消費電子、工業控制和物聯網領域。 2. …

【MFC】繪制自定義控件-顯示圖片(支持放大操作)

目錄 一、CDC類(二級緩存)二、計算視口三、放大操作代碼中初始化操作(方便以后cv) 一、CDC類(二級緩存) CDC類是設備上下文的核心類,它的作用是抽象化對圖形輸出設備(像屏幕、打印機…

在Proteus新工程中放置基本元器件

視頻教程: [最詳細]Proteus新建第一個工程與快捷鍵設置 操作步驟 1選擇這個黃色的三角,然后點擊旁邊的P,開始找元件。 2點開P后,呈現如下圖界面,我們在Keyword欄中,輸入stm32,然后他會自動出現對應的元件&…

PRUD幣推動健康數據資產化,開啟Web3隱私金融新時代

在全球健康科技與數據主權浪潮下,PRUD幣(Prudential Utility & Data Token)正成為Web3健康金融領域中的重要通證。項目通過鏈上身份綁定、健康行為證明、隱私計算與NFT機制,為用戶打造了“健康數據資產化”的創新路徑&#xf…

Mac 安裝 finalshell

1.下載 地址:FinalShell官網 第一個進入選擇對應的 mac 版本下載。 下一步下一步完成安裝。 2.鏈接虛擬機,點擊圖示文件夾 點擊新建鏈接,新建 SSH 鏈接 3.去 vmware 中查詢 Linux 系統的 IP,使用 ip addr 命令或者 ifconfig 命令皆可。 ip…

Javaweb - 2 HTML

目錄 HTML 入門 1. HTML & CSS & JavaScript 的作用 2. 什么是 HTML 3. 什么是超文本 4. 什么是標記語言 5. HTML 基本結構 6. HTML 概念詞匯解釋 7. HTML 的一些語法規則 8. 開發工具 VsCode 安裝插件: 常見設置: HTML 常見標簽 …

CWGAN-GP 增強型 CAE 在非 IID 數據集中用于 5G-NR 干擾檢測

抽象 在不斷擴大的 5G-NR 無線蜂窩網絡領域中,無線干擾攻擊作為安全攻擊普遍存在,損害了接收信號的質量。我們通過將加性高斯白噪聲 (AWGN) 合并到真實世界的同相和正交 (I/Q) OFDM 數據集中來模擬干擾環境…

JavaEE-Spring-Web-Mvc

Spring Web MVC 是基于 Servlet API 構建的原始 Web 框架,從?開始就包含在 Spring 框架中。它的正式名稱“Spring Web MVC”來?其源模塊的名稱(Spring-webmvc),但它通常被稱為"Spring MVC". Servlet 是?種實現動態??的技術. 準確來講Serv…

Linux從入門到入門

系統教程學習類 Ubuntu 從入門到精通 系統頁面/基本操作類 Ubuntu20.04終端固定終端到左邊的導航欄_ubuntu20.04設置菜單固定-CSDN博客Ubuntu 20.04 系統5分鐘后老是自動鎖屏_修改鎖屏時間-CSDN博客 命令類 拷貝:將 下載 文件夾里的.sh文件 復制到opt目錄下 sudo cp…

AI自動生成Git提交信息-git AI Commit

在現代軟件開發中,編寫清晰且一致的Git提交信息對于維護項目歷史和促進團隊協作至關重要。然而,為每次變更手動撰寫描述性提交信息可能耗時,尤其是處理復雜差異或大型項目時。AI Commit 是一個利用AI分析Git差異并生成符合Conventional Commi…

【三大前端語言之一】樣式:CSS詳解

【三大前端語言之一】樣式:CSS詳解 在了解完HTML的有關知識后,我們應該知道,一個網頁光有框架還不行,必須還得有裝飾它的樣式。就好比房子的結構搭好了,但如果沒有油漆、沒有窗簾、沒有家具,就無法真正展現…

Spring AI 聊天記憶功能實戰(一):從接口設計到生產實踐

Spring AI 聊天記憶功能實戰(一):從接口設計到生產實踐 在構建AI對話應用時,聊天記憶管理及存儲是實現連貫上下文交互的關鍵組件。而大模型(LLM)本質上是無狀態的,這意味著它們不會保留歷史交互…

Element Plus 對話框 el-dialog 和 抽屜 el-drawer 的使用注意項(使用 div 包裹)

總結:使用 div 包裹!!! 詳細說明: 對話框 el-dialog 或 抽屜 el-drawer 樣式的設置說明: 要想有效設置 el-dialog 或 el-drawer 的樣式,需確保 el-dialog 或 el-drawer 的上層不是template&am…

【python】簡單演示 gateway、service、client的工作原理

gateway 看起來主要是做協議轉換的A gateway is a network node that acts as an entrance and exit point, connecting two networks that use different protocols. It allows data to flow between these networks, essentially acting as a translator between different c…

數據倉庫面試題合集⑥

實時指標體系設計 + Flink 優化實戰:面試高頻問題 + 項目答題模板 面試中不僅會問“你做過實時處理嗎?”,更會追問:“實時指標體系是怎么搭建的?”、“你們的 Flink 穩定性怎么保證?” 本篇聚焦實時指標體系設計與 Flink 優化場景,幫你答出架構設計力,也答出調優實戰感…

Vue + AbortController 請求取消彈窗 hook 封裝

背景 實際業務開發場景中,往往存在有些大數據請求的需求,一旦請求發起加載遮罩后用戶就無法操作了,直接尬住,所以提供一個支持取消查詢的功能還是很有必要的,為了在全業務接口都能使用封裝一個hook。 ?為什么要用 A…

數據結構相關

1 問題 如何辨析數據對象和數據結構?如何設計多種儲存結構以及他們特性有什么?內存條和硬盤的區別? 2 方法 明晰倆者的定義數據對象是性質相同的有限個數據元素的集合,他是數據的一個子集。數據結構是指所涉及的數據元素的集合以及…

MacOS內存管理-刪除冗余系統數據System Data

文章目錄 一、問題復現二、解決思路三、解決流程四、附錄 一、問題復現 以題主的的 Mac 為例,我們可以看到System Data所占數據高達77.08GB,遠遠超出系統所占內存 二、解決思路 占據大量空間的是分散在系統中各個位置Cache數據; 其中容量最…