有的時候需要用python處理二進制數據,比如,存取文件,socket操作時.這時候,可以使用python的struct模組來完成.可以用struct來處理c語言中的結構體.
struct模組中最重要的三個函數是pack(), unpack(), calcsize()
pack(fmt, v1, v2, ...) 依照給定的格式(fmt),把資料封裝成字串(實際上是類似c結構體的位元組流)
unpack(fmt, string) 依照給定的格式(fmt)解析位元組流string,回傳解析出來的tuple
calcsize(fmt) fmt)佔用多少位元組的記憶體
struct支援的格式如下表:
Format C 類型 Python 位元組數
x pad byte
b signed char integer 1B unsigned char integer 1? _Bool bool 1h short integer I unsigned int integer or long 4l long integer 4 L unsigned long long 4q long long long 8Q unsigned long long long 8Q unsigned long long long 8
float 8s char[] string 1p char[] string 1 P void * long註1.q和Q只在機器支援64位元操作時有意思註2.每個格式前可以有一個數字,表示個數注3.s格式表示一定長度的字元串,4s表示長度為4的字串,但是p表示的是pascal字串注4.P用來轉換一個指針,其長度和機器字長相關注5.最後一個可以用來表示指針類型的,佔4個位元組為了同c中的結構體交換數據,還要考慮有的c或c++編譯器使用了位元組對齊,通常是以4個位元組為單位的32位元系統,故而struct依照本地機器位元組順序轉換.可以用格式中的第一個字元來改變對齊方式.定義如下:Character Byte order Size and alignment@ native native @ native native standard 按原位元組數> 音) 按原始位元組數> -end standard 依原位元組數使用方法是放在fmt的第一個位置,就像'@5s6sif'例子1:結構體如下:struct Header { unsigned short id; char[4] tag; unsigned int version; unsigned int count; }透過socket.recv接收了一個上面的結構體數據,存在字串s中,現在需要把它解析出來,可以使用unpack()函數:
import struct id, tag, version, count = struct.unpack("!H4s2I", s)上面的格式字串中,!表示我們要使用網絡字節順序解析,因為我們的數據是從網絡中接收到的,在網絡上傳送的時候它是網路位元組順序的.後面的H表示一個unsigned short的id,4s表示4位元組長的字串,2I表示有兩個unsigned int型別的資料.就透過一個unpack,現在id, tag, version, count裡已經保存好我們的資訊了.同樣,也可以很方便的把本地資料再pack成struct格式:
ss = struct.pack("!H4s2I", id, tag, version, count);pack函數就把id, tag, version, count按照指定的格式轉換成了結構體Header,ss現在是一個字串(實際上是類似於c結構體的位元組流),可以透過socket.send(ss)把這個字串發送出去。 範例2:
import struct a=12.34 #将a变为二进制 bytes=struct.pack('i',a)此時bytes就是一個string字串,字串以位元組同a的二進位儲存內容相同。 再進行反操作,現有二進位資料bytes,(其實就是字串),將它反過來轉換成python的資料型別:#注意,unpack回傳的是tuple !!
a,=struct.unpack('i',bytes)
如果是由多個資料構成的,可以這樣:
a='hello' b='world!' c=2 d=45.123 bytes=struct.pack('5s6sif',a,b,c,d)
此時的bytes就是二進位形式的資料了,可以直接寫入檔案例如binfile.write(bytes)
然後,當我們需要時可以再讀出來,bytes=binfile.read()再透過struct.unpack()解碼成python變數:
a,b,c,d=struct.unpack('5s6sif',bytes)
'5s6sif'這個叫做fmt,就是格式化字串,由數字加字元構成,5s表示佔5個字符的字串,2i,表示2個整數等等,下面是可用的字元及類型,ctype表示可以與python中的類型一一對應。
注意:二進位檔案處理時會碰到的問題
我們使用處理二進位檔案時,需要用以下方法:
binfile=open(filepath,'rb') #读二进制文件 binfile=open(filepath,'wb') #写二进制文件
那麼和binfile=open(filepath,’r')的結果到底有何不同呢?
不同之處有兩個地方:
第一,使用’r'的時候如果碰到’0x1A’,就會視為文件結束,這就是EOF。使用’rb’則不存在這個問題。即,如果你用二進位寫入再用文字讀出的話,如果其中存在’0X1A’,就只會讀出檔案的一部分。使用’rb’的時候會一直讀到文件最後。
第二,對於字串x=’abcndef’,我們可用len(x)得到它的長度為7,n我們稱之為換行符,實際上是’0X0A’。當我們用’w'即文字方式寫的時候,在windows平台上會自動將’0X0A’變成兩個字元’0X0D’,’0X0A’,即檔案長度實際上變成8.。當用’r'文字方式讀取時,又自動的轉換成原來的換行符。如果換成’wb’二進位方式來寫的話,則會保持一個字元不變,讀取時也是原樣讀取。所以如果用文字方式寫入,用二進位方式讀取的話,就要考慮這多出的一個位元組了。 ’0X0D’又稱回車符。 linux下不會變。因為linux只使用’0X0A’來表示換行。

本教程演示如何使用Python處理Zipf定律這一統計概念,並展示Python在處理該定律時讀取和排序大型文本文件的效率。 您可能想知道Zipf分佈這個術語是什麼意思。要理解這個術語,我們首先需要定義Zipf定律。別擔心,我會盡量簡化說明。 Zipf定律 Zipf定律簡單來說就是:在一個大型自然語言語料庫中,最頻繁出現的詞的出現頻率大約是第二頻繁詞的兩倍,是第三頻繁詞的三倍,是第四頻繁詞的四倍,以此類推。 讓我們來看一個例子。如果您查看美國英語的Brown語料庫,您會注意到最頻繁出現的詞是“th

Python 提供多種從互聯網下載文件的方法,可以使用 urllib 包或 requests 庫通過 HTTP 進行下載。本教程將介紹如何使用這些庫通過 Python 從 URL 下載文件。 requests 庫 requests 是 Python 中最流行的庫之一。它允許發送 HTTP/1.1 請求,無需手動將查詢字符串添加到 URL 或對 POST 數據進行表單編碼。 requests 庫可以執行許多功能,包括: 添加表單數據 添加多部分文件 訪問 Python 的響應數據 發出請求 首

本文解釋瞭如何使用美麗的湯庫來解析html。 它詳細介紹了常見方法,例如find(),find_all(),select()和get_text(),以用於數據提取,處理不同的HTML結構和錯誤以及替代方案(SEL)

處理嘈雜的圖像是一個常見的問題,尤其是手機或低分辨率攝像頭照片。 本教程使用OpenCV探索Python中的圖像過濾技術來解決此問題。 圖像過濾:功能強大的工具圖像過濾器

PDF 文件因其跨平台兼容性而廣受歡迎,內容和佈局在不同操作系統、閱讀設備和軟件上保持一致。然而,與 Python 處理純文本文件不同,PDF 文件是二進製文件,結構更複雜,包含字體、顏色和圖像等元素。 幸運的是,借助 Python 的外部模塊,處理 PDF 文件並非難事。本文將使用 PyPDF2 模塊演示如何打開 PDF 文件、打印頁面和提取文本。關於 PDF 文件的創建和編輯,請參考我的另一篇教程。 準備工作 核心在於使用外部模塊 PyPDF2。首先,使用 pip 安裝它: pip 是 P

本教程演示瞭如何利用Redis緩存以提高Python應用程序的性能,特別是在Django框架內。 我們將介紹REDIS安裝,Django配置和性能比較,以突出顯示BENE

自然語言處理(NLP)是人類語言的自動或半自動處理。 NLP與語言學密切相關,並與認知科學,心理學,生理學和數學的研究有聯繫。在計算機科學

本文比較了Tensorflow和Pytorch的深度學習。 它詳細介紹了所涉及的步驟:數據準備,模型構建,培訓,評估和部署。 框架之間的關鍵差異,特別是關於計算刻度的


熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

AI Hentai Generator
免費產生 AI 無盡。

熱門文章

熱工具

DVWA
Damn Vulnerable Web App (DVWA) 是一個PHP/MySQL的Web應用程序,非常容易受到攻擊。它的主要目標是成為安全專業人員在合法環境中測試自己的技能和工具的輔助工具,幫助Web開發人員更好地理解保護網路應用程式的過程,並幫助教師/學生在課堂環境中教授/學習Web應用程式安全性。 DVWA的目標是透過簡單直接的介面練習一些最常見的Web漏洞,難度各不相同。請注意,該軟體中

Atom編輯器mac版下載
最受歡迎的的開源編輯器

Dreamweaver Mac版
視覺化網頁開發工具

PhpStorm Mac 版本
最新(2018.2.1 )專業的PHP整合開發工具

SecLists
SecLists是最終安全測試人員的伙伴。它是一個包含各種類型清單的集合,這些清單在安全評估過程中經常使用,而且都在一個地方。 SecLists透過方便地提供安全測試人員可能需要的所有列表,幫助提高安全測試的效率和生產力。清單類型包括使用者名稱、密碼、URL、模糊測試有效載荷、敏感資料模式、Web shell等等。測試人員只需將此儲存庫拉到新的測試機上,他就可以存取所需的每種類型的清單。