如何在Golang中实现HTTP请求缓存_Golang HTTP请求缓存实现方法汇总

雨静君_7811

雨静君_7811

2025-11-10

191人浏览

原创

答案:golang中实现http请求缓存可通过内存缓存、自定义roundtripper、外部系统如redis或第三方库eko/gocache,结合缓存key设计、ttl设置与并发控制,提升性能并降低服务压力。

如何在golang中实现http请求缓存_golang http请求缓存实现方法汇总

在Golang中实现HTTP请求缓存,核心目标是减少重复网络请求、提升响应速度和降低服务压力。虽然标准库net/http不直接提供缓存机制,但可以通过多种方式手动或借助第三方工具实现。以下是几种常见且实用的实现方法。

1. 使用内存缓存(如 sync.Map 或第三方库)

对于短期、轻量级的缓存需求,可以使用Go内置的sync.Mapmap配合sync.RWMutex来存储HTTP响应结果。

基本思路:将请求的URL(或其哈希值)作为键,响应体和状态码作为值进行存储,并设置过期时间。

注意:需自行处理并发读写和过期清理。

示例代码片段:

var cache = struct {
    sync.RWMutex
    m map[string]struct {
        body        []byte
        statusCode  int
        expire      time.Time
    }
}{m: make(map[string]struct{})}
<p>func getCachedResponse(url string) ([]byte, int, bool) {
cache.RLock()
defer cache.RUnlock()
if item, found := cache.m[url]; found && time.Now().Before(item.expire) {
return item.body, item.statusCode, true
}
return nil, 0, false
}</p><p>func setCache(url string, body []byte, statusCode int, duration time.Duration) {
cache.Lock()
defer cache.Unlock()
cache.m[url] = struct {
body       []byte
statusCode int
expire     time.Time
}{body, statusCode, time.Now().Add(duration)}
}
</p>

每次发起HTTP请求前先查缓存,命中则直接返回,未命中再发起请求并写入缓存。

2. 利用 net/http/httputil.ReverseProxy + 自定义 RoundTripper

通过实现自定义的RoundTripper,可以在HTTP客户端发送请求前拦截并检查缓存。

这种方式更贴近标准库设计,适合封装成可复用组件。

关键点:

  • 实现Transport.RoundTrip方法
  • 根据请求生成唯一key(如Method + URL)
  • 缓存响应的*http.Response(注意Body需可重读)

由于http.Response.Bodyio.ReadCloser,缓存时需要读取并重新赋值为bytes.NewReader,否则无法多次读取。

Miller CSV TSV JSON 数据处理器
Miller CSV TSV JSON 数据处理器

Miller (mlr) 是一个命令行工具,用于查询、整形和重新格式化名称索引数据,如 CSV、TSV、JSON 和 JSON Lines。它将 awk、sed、cut、join 和 sort 的功能整合到一个专为结构化数据处理而构建的单一工具中。

下载

3. 集成外部缓存系统(Redis / BoltDB)

当应用需要持久化缓存或多实例共享缓存时,推荐使用Redis等外部存储。

使用go-redis等客户端库,将序列化的响应数据(如JSON)存入Redis,并设置TTL。

优点:

  • 支持分布式环境
  • 自动过期管理
  • 容量可控

示例流程:

  1. 请求前计算key(如sha256(method+url)
  2. 从Redis获取缓存数据
  3. 命中则反序列化构造Response
  4. 未命中则发起请求并回填缓存

4. 使用成熟第三方库(如 gocache)

开源社区已有封装良好的缓存库,例如allegro/bigcachedlclark/regexp2(非此用途,仅举例),更推荐eko/gocache

eko/gocache 支持多层缓存(内存 + Redis),并提供统一接口。

使用示例:

import "github.com/eko/gocache/v2/cache"
import "github.com/eko/gocache/v2/store"
<p>// 初始化缓存
memStore := store.NewGoCache(gocache.NewGoCache(5*time.Minute), nil)
c := cache.New(memStore)</p><p>// 缓存HTTP响应
c.Set("<a href="https://www.php.cn/link/374cad868cb62202053d308252bc4040">https://www.php.cn/link/374cad868cb62202053d308252bc4040</a>", responseBytes, &gocache.Options{Expiration: 5 * time.Minute})
</p>

5. 注意事项与最佳实践

实现HTTP缓存时需关注以下几点:

  • 缓存Key设计:应包含URL、查询参数、请求方法,必要时加入请求头(如Accept)
  • 缓存有效期:根据业务设置合理TTL,避免脏数据
  • 缓存穿透:对不存在的资源也做标记(如空值缓存),防止频繁击穿
  • 并发控制:同一请求避免重复发起,可用singleflight优化
  • Content-Type处理:确保缓存的Body能正确还原为Response

基本上就这些。选择哪种方式取决于你的场景:简单单机用sync.Map,高并发用bigcache,分布式上Redis,快速集成选gocache。关键是把缓存逻辑封装好,不影响原有HTTP调用流程。

golang免费学习笔记(深入):立即使用
在学习笔记中,你将探索golang的核心概念和高级技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

479

5

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

556

5

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

956

5

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.05

731

5

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.05.21

1386

6

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

2025.06.09

3814

18

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

2025.06.10

1694

13

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

2025.06.17

3686

17

golang数组大全
golang数组大全

本专题整合了golang数组相关问题解决方法,想了解更多相关内容,请阅读下面的文章。

2025.06.20

4106

22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习