首頁  >  文章  >  後端開發  >  如何在 Golang 中並發讀取和寫入檔案?

如何在 Golang 中並發讀取和寫入檔案?

PHPz
PHPz原創
2024-06-05 18:12:001105瀏覽

並發讀取檔案:建立 goroutine 並發讀取資料區塊,使用管道通訊協調;並發寫入檔案:使用 goroutine 寫入數據,用互斥鎖保護寫入操作。

如何在 Golang 中并发读取和写入文件?

如何在 Golang 中並發讀取和寫入檔案?

並發處理檔案 I/O 是提升 Golang 程式效能的常用技術。透過並發訪問,我們可以同時讀取和寫入數據,而不是等待一個操作完成再開始另一個操作。本文將展示如何在 Golang 中使用 goroutine 並發讀取和寫入檔案。

並發讀取

為了並發讀取文件,我們可以建立多個 goroutine,每個 goroutine 從文件讀取資料區塊。為了協調這些 goroutine,我們將使用管道進行通訊。

package main

import (
    "bufio"
    "os"
    "fmt"
    "sync"
    "time"
)

func readFile(filePath string, wg *sync.WaitGroup, ch chan<- string) {
    defer wg.Done()
    file, err := os.Open(filePath)
    if err != nil {
        fmt.Println(err)
        return
    }
    defer file.Close()

    scanner := bufio.NewScanner(file)
    for scanner.Scan() {
        ch <- scanner.Text()
    }
}

func main() {
    // 创建一个容量为 10 的管道
    ch := make(chan string, 10)

    // 等待组用于跟踪 goroutine
    var wg sync.WaitGroup

    filePath := "filename.txt"
    for i := 0; i < 10; i++ {
        wg.Add(1)
        go readFile(filePath, &wg, ch)
    }

    // 从管道中读取数据,并停止管道以等待所有 goroutine 完成
    go func() {
        wg.Wait()
        close(ch)
    }()

    for data := range ch {
        fmt.Println(data)
    }

    // 等待管道数据完全输出
    time.Sleep(1 * time.Second)
}

並發寫入

對於並發寫入文件,我們使用類似的方法,但使用goroutine 寫入數據,並使用互斥鎖確保獨佔存取寫入操作。

package main

import (
    "os"
    "fmt"
    "sync"
)

func writeFile(filePath string, wg *sync.WaitGroup, data <-chan string) {
    defer wg.Done()

    // 使用互斥锁保护文件写入
    lock := new(sync.Mutex)

    file, err := os.OpenFile(filePath, os.O_APPEND|os.O_WRONLY|os.O_CREATE, 0666)
    if err != nil {
        fmt.Println(err)
        return
    }
    defer file.Close()

    for dataString := range data {
        lock.Lock()
        _, err = file.WriteString(dataString + "\n")
        if err != nil {
            fmt.Println(err)
            continue
        }
        lock.Unlock()
    }
}

func main() {
    // 创建一个容量为 10 的管道
    ch := make(chan string, 10)

    // 等待组用于跟踪 goroutine
    var wg sync.WaitGroup

    filePath := "filename.txt"
    for i := 0; i < 10; i++ {
        wg.Add(1)
        go writeFile(filePath, &wg, ch)
    }

    // 向管道写入数据,并停止管道以等待所有 goroutine 完成
    go func() {
        for i := 0; i < 100; i++ {
            ch <- fmt.Sprintf("Data point %d\n", i)
        }
        close(ch)
    }()

    wg.Wait()
}

以上是如何在 Golang 中並發讀取和寫入檔案?的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn