Mekanisme penimbal Redis
Mekanisme penimbal dalam Redis adalah untuk mengimbangi perbezaan kelajuan antara arahan penghantaran pelanggan dan arahan pemprosesan pelayan Jika pelanggan menulis terlalu cepat atau pelayan membaca terlalu perlahan, ini akan berlaku Ia akan membawa kepada limpahan penimbal Setelah penimbal melimpah, ia akan menyebabkan beberapa masalah prestasi Mari kita bincangkan secara terperinci di bawah.
Mekanisme penimbalan pelanggan
Redis memperuntukkan penimbal input dan penimbal output untuk setiap pelanggan Penampan input akan menyimpan sementara arahan permintaan pelanggan, dan utas utama Redis Perintah itu akan diperolehi daripada penimbal. Selepas Redis memproses arahan, hasilnya akan ditulis ke penimbal output dan dikembalikan kepada klien melalui penimbal output, seperti yang ditunjukkan di bawah
Mengatasi penimbal input limpahan
Limpahan penimbal input biasanya berlaku dalam dua situasi
Data ditulis terlalu cepat, atau data yang ditulis kepada bigkey mengisi daerah penimbal data.
Pelayan memproses data terlalu perlahan Secara amnya, urutan utama disekat dan tidak boleh bertindak balas kepada permintaan pelanggan seperti biasa.
Lihat maklumat penimbal input
Kita boleh menggunakan client list
untuk melihat maklumat khusus penimbal input
127.0.0.1:6379> client list id=13 addr=127.0.0.1:50484 fd=7 name= age=1136 idle=1 flags=N db=0 sub=0 psub=0 multi=-1 qbuf=26 qbuf-free=32742 obl=0 oll=0 omem=0 events=r cmd=client user=default id=14 addr=127.0.0.1:50486 fd=8 name= age=1114 idle=6 flags=N db=0 sub=0 psub=0 multi=-1 qbuf=0 qbuf-free=0 obl=0 oll=0 omem=0 events=r cmd=client user=default
Setiap kali pelanggan berada disambungkan, Akan ada satu lagi maklumat penimbal input Perintah di atas adalah hasil sambungan setempat saya kepada dua pelanggan Apabila kami melihat penimbal, kami memfokuskan pada dua parameter yang berkaitan dengan memori
- .
qbuf: penimbal telah digunakan Panjangnya (dalam bait, 0 bermakna tiada penimbal diperuntukkan).
qbuf-free: Baki ruang kosong dalam penimbal (dalam bait), qbuf=26 klien di atas, penimbal percuma qbuf-free=32742, kemudian jumlah yang diperuntukkan saiz memori Ia ialah 26+32742=32768 bait, iaitu 32KB.
Jika qbuf-free dalam maklumat penimbal input sangat kecil dan qbuf sangat besar, anda perlu memberi perhatian pada masa ini, penimbal input mungkin hampir melimpah masih Sebilangan besar permintaan ditulis kepada penimbal input Penyelesaian Redis adalah untuk menutup sambungan dengan pelanggan ini, jadi data perniagaan tidak akan dapat diakses secara normal.
Masalah lain ialah penimbal input wujud untuk setiap pelanggan Apabila jumlah memori penimbal input semua pelanggan melebihi konfigurasi memori maksimum, penghapusan memori akan berlaku dan beberapa data yang dihapuskan akan diakses semula perlu diperolehi daripada pangkalan data latar belakang, dan masa pemerolehan pastinya jauh lebih perlahan daripada bacaan langsung daripada Redis, jadi ini juga merupakan sebab kelewatan dalam Redis.
Cara menyelesaikan limpahan penimbal input
Intipati limpahan penimbal input ialah kapasiti penimbal tidak mencukupi, jadi idea pertama adalah untuk mengembangkan saiz penimbal input. Redis tidak memberikannya kepada kami Ubah suai konfigurasi saiz penimbal input Redis memerlukan penimbal input setiap pelanggan tidak boleh melebihi 1G. ! ! , sambungan pelanggan akan ditutup jika penimbal input pelanggan melebihi 1G, jadi ini tidak akan berfungsi.
Kemudian anda hanya boleh menghantar saiz data daripada klien dan kelajuan pemprosesan arahan oleh pelayan , pemprosesan arahan pada pelayan Kelajuan biasanya bergantung pada sama ada utas utama disekat Anda perlu cuba mengelakkan beberapa operasi menyekat seperti penulisan semula fail AOF, pemadaman nilai kunci, utas garpu, dll. Mengatasi limpahan penimbal keluaranUntuk pelayan, maklumat input klien biasanya tidak dapat diramalkan, tetapi maklumat output kebanyakannya boleh diramal Contohnya, arahan Set mengembalikan OK yang mudah. contoh lain ialah beberapa mesej ralat. Redis memperuntukkan 16KB ruang penimbal tetap untuk mesej pulangan berterusan ini, dengan kata lain, penimbal keluaran dibahagikan kepada dua bahagian ialah mesej pulangan berubah. Limpahan penimbal keluaran dibahagikan kepada tiga situasi- Nilai kunci keluaran dengan kapasiti besar seperti kunci besar.
- Pelanggan melaksanakan arahan Monitor untuk memantau pelaksanaan Redis.
- Tetapan penimbal adalah tidak munasabah.
127.0.0.1:6379> monitor OK 1652184977.609761 [0 127.0.0.1:50484] "get" "name" 1652185391.529292 [0 127.0.0.1:50484] "set" "test" "lisi" ......Menjalankan monitor akan sentiasa menempati penimbal output Maksudnya, semakin lama ia menduduki, semakin mudah untuk menyebabkan penimbal output melimpah Oleh itu, arahan Monitor hanya sesuai untuk nyahpepijat persekitaran dan tidak boleh dilaksanakan dalam pesanan. Tetapan penimbal output adalah tidak munasabahSaiz penimbal input tidak boleh ditetapkan, tetapi penimbal output boleh ditetapkan melalui item konfigurasi
kandungan ialah Saiz memori bagi dua bahagian client-output-buffer-limit
- penimbal Apabila saiz konfigurasi penimbal melebihi, pelayan akan menutup sambungan dengan klien.
持续写入的时间限制和持续写入的容量限制,当超过持续写入时间限制和容量限制,服务端也会强制关闭和客户端的连接。
客户端种类
在聊缓冲区配置时,我们需要先了解下客户端的种类,本文中强调的客户端并不是单纯指通过命令./redis-cli -c -h 127.0.0.1 -p 6379
去连接Redis服务器这类客户端称为常规客户端,我们还有通过消息订阅Redis频道的客户端,还有一种最为特殊的主从同步,从节点也是一个特殊的客户端称为从节点客户端。
配置项client-output-buffer-limit
也是针对这三种,给出了不一样的配置,如下所示
## 普通客户端配置 client-output-buffer-limit normal 0 0 0 ## 从节点客户端配置 client-output-buffer-limit replica 256mb 64mb 60 ## 消息订阅频道的客户端 client-output-buffer-limit pubsub 32mb 8mb 60 ######################配置解释###################### ## 第一个参数:代表分配给客户端的缓存大小,为0代表没有限制 ## 第二个参数:表示持续写入的最大内存,为0代表没有限制 ## 第三个参数:表示持续写入的最长时间,为0代表没有限制
普通客户端设置
普通客户端就是传输的一些普通的指令,一个指令发送完需要等待其返回后才会发送下一个指令,也就是说只要不是返回的bigkey数据,占用输出缓冲区的内存就极少,能够立即发送给客户端响应,所以一般正常客户端默认配置都是0,也就是不限制。
消息订阅频道客户端
当订阅频道产生消息后,会将消息通过输出缓冲区发送给客户端,这种属于非阻塞的方式,一瞬间可能有多个指令到达,所以需要指定缓冲区大小。
如何解决输出缓冲区溢出
到这里其实我们已经能够得到输出缓冲区溢出的解决方案了
bigkey应当避免使用。
Monitor命令只在调试的时候使用,不能应用到生产。
合理设置输出缓冲区上限、持续写入时间上限以及持续写入内存容量上限。
主从集群中的缓冲区
除了输入缓冲区和输出缓冲区外在主从集群场景下还存在两种缓冲区,我们称为复制缓冲区和复制积压缓冲区,这两个缓冲区的溢出和输入输出缓冲区稍有不同。
复制缓冲区
复制缓冲区这个名词看着很陌生,但是我们之前在聊主从同步时讲过,主从全量同步期间从节点会加载主节点的RDB文件,这时主节点同样还能写入数据,但是从节点在加载RDB文件没办法实时同步,所以Redis就为每一个从节点开辟了一片空间,用来存放主从全量同步期间产生的操作命令,这就是replication buffer,也就是复制缓冲区。
复制缓冲区溢出
复制缓冲区什么时候会溢出呢?
当从节点在加载RDB文件这个过程中如果存在大量的写操作就会造成复制缓冲区内存溢出。
从节点加载RDB文件的时间过长。
发生溢出后,主节点会关闭与从节点的连接,导致全量同步失败。
解决复制缓冲区溢出
控制主节点实例的大小,减小生成的RDB文件,这样就能减少从节点加载RDB文件的时间,减小复制缓冲区的压力。
从节点其本质就是主节点的特殊客户端,所以使用的是输出缓冲区(也就是指replication buffer),可以设置client-output-buffer-limit replica 256mb 64mb 60
扩大缓冲区大小。
注意:主节点上的复制缓冲区会为每一个从节点分配一个,那么从节点的数量过多即使每个从节点没有达到maxmemory,但累加的结果也会给主节点带来内存压力。
复制积压缓冲区
复制积压缓冲区溢出
主从集群在写操作时会将操作写入复制缓冲区和复制积压缓冲区中,一旦网络发送故障后恢复连接,在2.8版本之前主从节点会进行全量同步开销非常大,所以2.8版本后还是采用了增量同步,仅仅将网络断开这段时间的操作同步给从节点,所以在网络恢复连接后从节点会将自己的复制偏移量slave_repl_offset发送给主节点,主节点将自身的写入偏移量master_repl_offset和slave_repl_offset在复制积压缓冲区中做对比得到网络断连期间的操作。
复制积压缓冲区又叫repl_backlog_buffer,是一个环形缓冲区,同步示意图如下。
复制积压缓冲区溢出其实也就是因为复制积压缓冲区是一个有限环形结构,一般主节点写入偏移量要大于从节点的读取偏移量,但如果写入偏移量覆盖了从节点的读取偏移量这就引发了复制积压缓冲区溢出。
Untuk menyelesaikan limpahan penimbal tunggakan replikasi
Secara amnya, laraskan saiz parameter repl_backlog_size, kembangkan saiz penimbal tunggakan replikasi dan kurangkan pengimbangan tulis nod induk untuk menampung ofset baca bagi nod hamba.
Atas ialah kandungan terperinci Contoh analisis mekanisme penimbal Redis. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Redis是现在最热门的key-value数据库,Redis的最大特点是key-value存储所带来的简单和高性能;相较于MongoDB和Redis,晚一年发布的ES可能知名度要低一些,ES的特点是搜索,ES是围绕搜索设计的。

本篇文章给大家带来了关于redis的相关知识,其中主要介绍了关于redis的一些优势和特点,Redis 是一个开源的使用ANSI C语言编写、遵守 BSD 协议、支持网络、可基于内存、分布式存储数据库,下面一起来看一下,希望对大家有帮助。

本篇文章给大家带来了关于redis的相关知识,其中主要介绍了Redis Cluster集群收缩主从节点的相关问题,包括了Cluster集群收缩概念、将6390主节点从集群中收缩、验证数据迁移过程是否导致数据异常等,希望对大家有帮助。

本篇文章给大家带来了关于redis的相关知识,其中主要介绍了Redis实现排行榜及相同积分按时间排序,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,希望对大家有帮助。

本篇文章给大家带来了关于redis的相关知识,其中主要介绍了关于原子操作中命令原子性的相关问题,包括了处理并发的方案、编程模型、多IO线程以及单命令的相关内容,下面一起看一下,希望对大家有帮助。

本篇文章给大家带来了关于redis的相关知识,其中主要介绍了bitmap问题,Redis 为我们提供了位图这一数据结构,位图数据结构其实并不是一个全新的玩意,我们可以简单的认为就是个数组,只是里面的内容只能为0或1而已,希望对大家有帮助。

本篇文章给大家带来了关于redis的相关知识,其中主要介绍了Redis实现排行榜及相同积分按时间排序,本文通过实例代码给大家介绍的非常详细,下面一起来看一下,希望对大家有帮助。

本篇文章给大家带来了关于redis的相关知识,其中主要介绍了关于实现秒杀的相关内容,包括了秒杀逻辑、存在的链接超时、超卖和库存遗留的问题,下面一起来看一下,希望对大家有帮助。


Alat AI Hot

Undresser.AI Undress
Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover
Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool
Gambar buka pakaian secara percuma

Clothoff.io
Penyingkiran pakaian AI

AI Hentai Generator
Menjana ai hentai secara percuma.

Artikel Panas

Alat panas

Dreamweaver CS6
Alat pembangunan web visual

Hantar Studio 13.0.1
Persekitaran pembangunan bersepadu PHP yang berkuasa

Penyesuai Pelayan SAP NetWeaver untuk Eclipse
Integrasikan Eclipse dengan pelayan aplikasi SAP NetWeaver.

mPDF
mPDF ialah perpustakaan PHP yang boleh menjana fail PDF daripada HTML yang dikodkan UTF-8. Pengarang asal, Ian Back, menulis mPDF untuk mengeluarkan fail PDF "dengan cepat" dari tapak webnya dan mengendalikan bahasa yang berbeza. Ia lebih perlahan dan menghasilkan fail yang lebih besar apabila menggunakan fon Unicode daripada skrip asal seperti HTML2FPDF, tetapi menyokong gaya CSS dsb. dan mempunyai banyak peningkatan. Menyokong hampir semua bahasa, termasuk RTL (Arab dan Ibrani) dan CJK (Cina, Jepun dan Korea). Menyokong elemen peringkat blok bersarang (seperti P, DIV),

Muat turun versi mac editor Atom
Editor sumber terbuka yang paling popular
