搜尋
首頁運維linux運維linux io指的是什麼

linux io指的是什麼

Mar 24, 2023 am 09:43 AM
linuxio

linux io指的是一種檔案操作;在Linux中,檔案就是一串二進位流,那麼在資訊的交換過程中,我們都是對這些流進行資料收發操作,這些操作簡稱為I/O操作;由於Linux使用的是虛擬記憶體機制,所以必須透過系統呼叫請求核心來完成IO動作。

linux io指的是什麼

本教學操作環境:linux5.9.8系統、Dell G3電腦。

linux io指的是什麼?

我們都知道在Linux的世界,一切皆檔案。

而檔案就是一串二進位流,不管Socket、FIFO、管道還是終端,對我們來說,一切都是流。

  • 在資訊的交換過程中,我們都是對這些流進行資料收發操作,簡稱為I/O操作。

  • 往流讀取數據,系統呼叫Read,寫入數據,系統呼叫Write。

通常使用者程序的一個完整的IO分為兩個階段:

磁碟IO:

linux io指的是什麼

網路IO:

linux io指的是什麼

作業系統和驅動程式運行在核心空間,應用程式運行在用戶空間,兩者不能使用指標傳遞數據,因為Linux使用的虛擬記憶體機制,必須透過系統呼叫請求核心來完成IO動作。

IO有記憶體IO、網路IO和磁碟IO三種,通常我們說的IO指的是後兩者!

為什麼需要IO模型

如果使用同步的方式來通訊的話,所有的操作都在一個執行緒內順序執行完成,這麼做缺點是很明顯的:

  • 因為同步的通訊操作會阻塞同一個執行緒的其他任何操作,只有這個操作完成了之後,後續的操作才可以完成,所以出現了同步阻塞多執行緒(每個Socket都建立一個執行緒對應),但是系統內執行緒數量是有限制的,同時執行緒切換很浪費時間,適合Socket少的情況。

因該需要出現IO模型。

Linux的IO模型

在描述Linux IO模型之前,我們先來了解Linux系統資料讀取的過程:

linux io指的是什麼

以使用者請求index.html檔案為範例說明

linux io指的是什麼

#基本概念

使用者空間與內核空間

作業系統的核心是內核,獨立於普通的應用程序,可以存取受保護的記憶體空間,也有存取底層硬體設備的所有權限。

  • 為了確保內核的安全,使用者行程不能直接操作內核,作業系統將虛擬空間分割為兩部分,一部分為內核空間,一部分為使用者空間。

進程切換

為了控制進程的執行,核心必須有能力掛起正在CPU上執行的進程,並恢復先前掛起的某個進程的執行。

這種行為稱為進程切換。

因此可以說,任何進程都是在作業系統核心的支援下運行的,是與核心緊密相關的。

進程的阻塞

正在執行的進程,由於期待的某些事件未發生,例如請求系統資源失敗、等待某種操作的完成、新數據尚未到達或無新工作做等,則由系統自動執行阻塞原語(Block),使自己由運行狀態變為阻塞狀態。

可見,進程的阻塞是進程本身的主動行為,也因此只有處於運行態的進程(獲得CPU),才可能將其轉換為阻塞狀態。

當行程進入阻塞狀態,是不佔用CPU資源的。

檔案描述子

檔案描述子(File Descriptor)是電腦科學中的一個術語,是一個用於表述指向文件的引用的抽象化概念。

檔案描述子在形式上是一個非負整數,實際上,它是一個索引值,指向核心為每個行程所維護的該行程開啟檔案的記錄表。

  • 當程式開啟一個現有檔案或建立一個新檔案時,核心會向進程傳回一個檔案描述符。

快取IO

大多數檔案系統的預設 IO 操作都是快取 IO。

其讀寫過程如下:

  • 讀取操作:作業系統檢查核心的緩衝區有沒有需要的數據,如果已經快取了,那麼就直接從快取中返回;否則從磁碟、網路卡等中讀取,然後快取在作業系統的快取中;

  • 寫入操作:將資料從使用者空間複製到核心空間的快取中。這時對使用者程式來說寫操作就已經完成,至於什麼時候再寫到磁碟、網卡等中由作業系統決定,除非顯示地呼叫了 sync 同步指令。

假設核心空間快取無需要的數據,使用者行程從磁碟或網路讀取資料分兩個階段:

  • 階段一: 核心程式從磁碟、網路卡等讀取資料到核心空間快取區;

  • #階段二: 使用者程式從核心空間快取拷貝數據到用戶空間。

快取IO 的缺點:

資料在傳輸過程中需要在應用程式位址空間和核心空間進行多次資料拷貝操作,這些資料拷貝操作所帶來的CPU以及記憶體開銷非常大。

同步阻塞

用戶空間的應用程式執行一個系統調用,這會導致應用程式阻塞,什麼也不乾,直到資料準備好,並且將資料從核心複製到用戶進程,最後進程再處理數據,在等待數據到處理數據的兩個階段,整個進程都被阻塞,不能處理別的網路IO。

  • 呼叫應用程式處於不再消費 CPU 而只是簡單等待回應的狀態,因此從處理的角度來看,這是非常有效的。

這也是最簡單的IO模型,在通常FD較少、就緒很快的情況下使用是沒有問題的。

linux io指的是什麼

同步非阻塞

非阻塞的系統呼叫呼叫之後,進程並沒有被阻塞,核心馬上回傳給進程,如果資料還沒準備好,此時會回傳一個error。

  • 進程在回傳之後,可以做點別的事情,然後再發起系統呼叫。

  • 重複上面的過程,循環往復的進行系統呼叫。這個過程通常被稱之為輪詢。

  • 輪詢檢查內核數據,直到數據準備好,再拷貝數據到進程,進行數據處理。

  • 需要注意,拷貝資料整個過程,進程仍然是屬於阻塞的狀態。

  • 這種方式在程式設計中對Socket設定O_NONBLOCK即可。

linux io指的是什麼

IO多路復用

IO多路復用,這是一種進程預先告知核心的能力,讓核心發現進程指定的一個或多個IO條件就緒了,就通知進程。

使得一個行程能在一連串的事件上等待。

IO複用的實作方式目前主要有Select、Poll和Epoll。

linux io指的是什麼

偽代碼描述IO多路復用:

while(status == OK) { // 不断轮询 ready_fd_list = io_wait(fd_list); //内核缓冲区是否有准备好的数据 for(fd in ready_fd_list) {  data = read(fd) // 有准备好的数据读取到用户缓冲区  process(data) }}

訊號驅動

首先我們允許Socket進行訊號驅動IO ,並安裝一個訊號處理函數,進程繼續運作並不阻塞。

當資料準備好時,進程會收到一個SIGIO訊號,可以在訊號處理函數中呼叫I/O操作函數處理資料。

流程如下:

  • 開啟套接字訊號驅動IO功能

  • 系統呼叫Sigaction執行訊號處理函數(非阻塞,立刻返回)

  • 資料就緒,產生Sigio訊號,透過訊號回調通知應用來讀取資料

此種IO方式存在的一個很大的問題:Linux中訊號佇列是有限制的,如果超過這個數字問題就無法讀取資料

linux io指的是什麼

##非同步非阻塞

非同步IO流程如下所示:

  • 當使用者執行緒調用了

    aio_read系統調用,立刻就可以開始去做它的事,用戶執行緒不阻塞

  • 核心就開始了IO的第一個階段:準備資料。當核心一直等到資料準備好了,它就會將資料從核心核心緩衝區,拷貝到使用者緩衝區

  • #核心會給使用者執行緒發送一個訊號,或是回呼使用者執行緒註冊的回調接口,告訴用戶線程Read操作完成了

  • 用戶線程讀取用戶緩衝區的數據,完成後續的業務操作

相對於同步IO,非同步IO不是順序執行。

用戶進程進行aio_read系統呼叫之後,無論核心資料是否準備好,都會直接返回給用戶進程,然後用戶態進程可以去做別的事情。

等到資料準備好了,核心直接複製資料給進程,然後從核心向進程發送通知。

對比訊號驅動IO,非同步IO的主要區別在於:

  • 訊號驅動由內核告訴我們何時可以開始一個IO操作(資料在內核緩衝區中),而異步IO則由核心通知IO操作何時已經完成(資料已經在用戶空間中)。

非同步IO又叫做事件驅動IO,在Unix中,為非同步方式存取檔案定義了一套函式庫函數,定義了AIO的一系列介面。

  • 使用aio_readaio_write啟動非同步IO操作,使用aio_error檢查正在執行的IO操作的狀態。

目前Linux中AIO的核心實作只對檔案IO有效,如果要實作真正的AIO,需要使用者自己來實作。

目前有許多開源的非同步IO函式庫,例如libevent、libev、libuv。

linux io指的是什麼

相關推薦:《Linux影片教學

以上是linux io指的是什麼的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
Linux中的維護模式是什麼?解釋了Linux中的維護模式是什麼?解釋了Apr 22, 2025 am 12:06 AM

MaintenancemodeInuxisAspecialBootenvironmentforforcalsystemmaintenancetasks.itallowsadMinistratorStoperFormTaskSlikerSettingPassingPassingPasswords,RepairingFilesystems,andRecoveringFrombootFailuresFailuresFailuresInamInimAlenimalenimalenrenmentrent.ToEnterMainterMainterMaintErmaintErmaintEncemememodeBoode,Interlecttheboo

Linux:深入研究其基本部分Linux:深入研究其基本部分Apr 21, 2025 am 12:03 AM

Linux的核心組件包括內核、文件系統、Shell、用戶空間與內核空間、設備驅動程序以及性能優化和最佳實踐。 1)內核是系統的核心,管理硬件、內存和進程。 2)文件系統組織數據,支持多種類型如ext4、Btrfs和XFS。 3)Shell是用戶與系統交互的命令中心,支持腳本編寫。 4)用戶空間與內核空間分離,確保系統穩定性。 5)設備驅動程序連接硬件與操作系統。 6)性能優化包括調整系統配置和遵循最佳實踐。

Linux體系結構:揭示5個基本組件Linux體系結構:揭示5個基本組件Apr 20, 2025 am 12:04 AM

Linux系統的五個基本組件是:1.內核,2.系統庫,3.系統實用程序,4.圖形用戶界面,5.應用程序。內核管理硬件資源,系統庫提供預編譯函數,系統實用程序用於系統管理,GUI提供可視化交互,應用程序利用這些組件實現功能。

Linux操作:利用維護模式Linux操作:利用維護模式Apr 19, 2025 am 12:08 AM

Linux的維護模式可以通過GRUB菜單進入,具體步驟為:1)在GRUB菜單中選擇內核並按'e'編輯,2)在'linux'行末添加'single'或'1',3)按Ctrl X啟動。維護模式提供了一個安全環境,適用於系統修復、重置密碼和系統升級等任務。

Linux:如何進入恢復模式(和維護)Linux:如何進入恢復模式(和維護)Apr 18, 2025 am 12:05 AM

進入Linux恢復模式的步驟是:1.重啟系統並按特定鍵進入GRUB菜單;2.選擇帶有(recoverymode)的選項;3.在恢復模式菜單中選擇操作,如fsck或root。恢復模式允許你以單用戶模式啟動系統,進行文件系統檢查和修復、編輯配置文件等操作,幫助解決系統問題。

Linux的基本要素:為初學者解釋Linux的基本要素:為初學者解釋Apr 17, 2025 am 12:08 AM

Linux的核心組件包括內核、文件系統、Shell和常用工具。 1.內核管理硬件資源並提供基本服務。 2.文件系統組織和存儲數據。 3.Shell是用戶與系統交互的接口。 4.常用工具幫助完成日常任務。

Linux:看看其基本結構Linux:看看其基本結構Apr 16, 2025 am 12:01 AM

Linux的基本結構包括內核、文件系統和Shell。 1)內核管理硬件資源,使用uname-r查看版本。 2)EXT4文件系統支持大文件和日誌,使用mkfs.ext4創建。 3)Shell如Bash提供命令行交互,使用ls-l列出文件。

Linux操作:系統管理和維護Linux操作:系統管理和維護Apr 15, 2025 am 12:10 AM

Linux系統管理和維護的關鍵步驟包括:1)掌握基礎知識,如文件系統結構和用戶管理;2)進行系統監控與資源管理,使用top、htop等工具;3)利用系統日誌進行故障排查,借助journalctl等工具;4)編寫自動化腳本和任務調度,使用cron工具;5)實施安全管理與防護,通過iptables配置防火牆;6)進行性能優化與最佳實踐,調整內核參數和養成良好習慣。

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

Dreamweaver Mac版

Dreamweaver Mac版

視覺化網頁開發工具

ZendStudio 13.5.1 Mac

ZendStudio 13.5.1 Mac

強大的PHP整合開發環境

SAP NetWeaver Server Adapter for Eclipse

SAP NetWeaver Server Adapter for Eclipse

將Eclipse與SAP NetWeaver應用伺服器整合。

DVWA

DVWA

Damn Vulnerable Web App (DVWA) 是一個PHP/MySQL的Web應用程序,非常容易受到攻擊。它的主要目標是成為安全專業人員在合法環境中測試自己的技能和工具的輔助工具,幫助Web開發人員更好地理解保護網路應用程式的過程,並幫助教師/學生在課堂環境中教授/學習Web應用程式安全性。 DVWA的目標是透過簡單直接的介面練習一些最常見的Web漏洞,難度各不相同。請注意,該軟體中