如何在 Go 中正确复制 HTTP 响应体以实现多次读取-Golang-PHP中文网

如何在 Go 中正确复制 HTTP 响应体以实现多次读取

Go 中 http.Response.Body 是一次性可读的 io.ReadCloser，读取后即关闭；若需多次解析，必须先将内容完整读入内存（如 []byte 或 strings.Reader），再传入处理函数。

go 中 `http.response.body` 是一次性可读的 `io.readcloser`，读取后即关闭；若需多次解析，必须先将内容完整读入内存（如 `[]byte` 或 `strings.reader`），再传入处理函数。

在 Go 的 HTTP 客户端编程中，一个常见误区是认为将 resp.Body（类型为 io.ReadCloser）作为参数传递给多个函数，就等同于“传值复制”——实际上，你传递的是对同一底层流的引用，而非数据副本。Body 本质是一个有状态的、不可重放的读取器：一旦被 io.ReadAll、json.NewDecoder、goquery.NewDocumentFromReader 等函数消费，其内部缓冲区即被耗尽，后续读取将返回 0, io.EOF（或空字节切片），导致二次调用失败。

✅ 正确做法：显式读取并缓存响应体内容
使用 io.ReadAll 将整个响应体读入内存，得到一份独立的 []byte 数据，之后可安全地多次构造 io.Reader 实例：

resp, err := client.Get(URL)
if err != nil {
    log.Fatal(err)
}
defer resp.Body.Close()

// ✅ 一次性读取全部内容到内存
bodyBytes, err := io.ReadAll(resp.Body)
if err != nil {
    log.Fatal("failed to read body:", err)
}

// ✅ 基于字节切片创建新 Reader —— 每次都是全新、可重放的
parseGoQuery("tag1", bytes.NewReader(bodyBytes))
parseGoQuery("tag2", bytes.NewReader(bodyBytes))

⚠️ 注意事项：

内存安全：io.ReadAll 会将整个响应体加载到内存，对大文件（如 GB 级下载）不适用；此时应考虑流式处理或临时文件缓存。
错误检查不可省略：resp.Body 可能因网络中断或服务端异常提前关闭，务必检查 io.ReadAll 的返回错误。
不要重复 Close()：resp.Body.Close() 只需调用一次（通常用 defer），而 bytes.NewReader 返回的 reader 无需关闭。
避免 ioutil.ReadAll（已弃用）：Go 1.16+ 应使用 io.ReadAll（位于 io 包）。