Exemple détaillé de cluster Redis Cluster réduisant les nœuds maîtres et esclaves

Cet article vous apporte des connaissances pertinentes sur Redis, qui présente principalement les problèmes liés à la réduction des nœuds maîtres et esclaves du cluster Redis Cluster, y compris le concept de réduction du cluster de cluster, la réduction de 6390 nœuds maîtres du cluster et la vérification des données. . Si le processus de migration provoque des anomalies de données, etc. J'espère que cela sera utile à tout le monde.

Apprentissage recommandé : Tutoriel vidéo Redis

1.Concept de rétrécissement de cluster

Lorsque la capacité de charge du projet est trop élevée, il est nécessaire d'ajouter des nœuds pour augmenter la charge lorsque la pression du projet. n'est pas très élevé, j'espère également réduire le cluster et l'utiliser pour d'autres projets. Cela nécessite une réduction du cluster. L'opération de réduction du cluster est la même que l'expansion du cluster.

Lors de l'extension de la capacité, vous pouvez exécuter la commande une fois pour réussir la migration des emplacements. Lors de la réduction, vous devez l'exécuter autant de fois qu'il y a plusieurs nœuds maîtres. Par exemple, en excluant le nœud à mettre hors ligne, il y en a toujours. 3 nœuds maîtres, vous devez alors l'exécuter trois fois, le nombre d'emplacements de migration doit être divisé par 3 et chaque nœud doit être réparti uniformément.

En cas de réduction, vous devez d'abord renseigner le nombre d'emplacements à attribuer, puis indiquer à qui attribuer, et enfin indiquer où attribuer les emplacements. Généralement, le nombre d'emplacements doit être déterminé par le nombre d'emplacements. se trouvent sur l'emplacement de l'hôte qui sera hors ligne, puis divisez-le par le nombre de nœuds maîtres du cluster, de sorte que les emplacements attribués à chaque hôte soient les mêmes. Lorsque vous indiquez à qui attribuer, indiquez l'ID du premier. nœud maître pour la première fois, et remplissez l'ID pour la deuxième fois. L'ID du deuxième nœud maître, et enfin l'ID du nœud qui fournit l'emplacement, est le numéro d'ID du nœud hors ligne.

Lorsque le cluster réduit et agrandit les emplacements, cela n'affectera pas l'utilisation des données.

L'extrémité source du rétrécissement du cluster est le nœud maître qui se déconnecte, et l'extrémité cible est le nœud maître en ligne (le nœud qui lui est attribué).

Nous devons être clairs sur le fait que seul le nœud maître dispose d'emplacements, donc les emplacements du nœud maître doivent être alloués à d'autres nœuds maîtres. Lorsque les emplacements sont libérés, le nœud hôte peut se déconnecter.

Image de comparaison avant et après la réduction du cluster

Étapes de l'opération de réduction du cluster :

1. Exécutez la commande reshard pour disperser les emplacements du nœud maître qui doit se déconnecter.

2. Si vous avez plusieurs nœuds maîtres, vous devez exécuter la commande reshard plusieurs fois. Remplissez d'abord le nombre d'emplacements à diviser, puis indiquez de qui les diviser, et enfin où les diviser.

3. Lorsque la dispersion des slots est terminée et que le nœud maître à mettre hors ligne ne dispose d'aucune donnée, supprimez le nœud du cluster.

Informations sur le cluster

Le cluster actuel a quatre maîtres et quatre esclaves, un total de 8 nœuds. Nous devons changer le cluster en trois maîtres et trois esclaves, et réduire deux nœuds pour une utilisation par d'autres programmes.

2. Réduisez le nœud maître 6390 du cluster

2.1 Calculez le nombre d'emplacements qui doivent être alloués à chaque nœud

Vous pouvez voir qu'il y a 4096 emplacements sur le nœud 6390, supprimez le ceux qui doivent être mis hors ligne. Après 6 390 nœuds, nous avons encore 3 nœuds maîtres. Divisez 4 096 par 3 pour obtenir 1 365. Lors de l'allocation des emplacements, allouez 1 365 emplacements à chaque nœud pour le rendre égal.

2.2. Allouer 1365 emplacements aux 6380 nœuds au 192.168.81.210

Nous devons allouer 1365 emplacements des 6390 nœuds au 192.168.81.210 aux 6380 nœuds au 1. 92.168.81.210.

Renseignez simplement Quel est l'ID du nœud de réception en tant qu'ID de nœud 6380 de 192.168.81.210, qui fait référence à la personne à qui l'emplacement alloué sera attribué.

Ensuite, le nœud source remplit l'ID du nœud 6390 de 192.168.81.240, qui fait référence au nœud à partir duquel 1365 emplacements sont alloués. Après avoir rempli l'ID, lorsque vous appuyez sur Entrée, vous serez invité à partir de quel nœud. allouer des emplacements, car Seuls 6 390 emplacements doivent être alloués, alors remplissez le formulaire ici, indiquant que seul ce nœud a alloué 1 365 emplacements à d'autres nœuds.

[root@redis-1 /data/redis_cluster/redis-3.2.9/src]# ./redis-trib.rb reshard 192.168.81.210:6380
How many slots do you want to move (from 1 to 16384)? 1365				#分配出多少个槽位

What is the receiving node ID? 80e256579658eb256c5b710a3f82c439665794ba				#将槽位分给那个节点

Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1:6bee155f136f40e28e1f60c8ddec3b158cd8f8e8					#从哪个节点分出槽位
Source node #2:done

Do you want to proceed with the proposed reshard plan (yes/no)? yes			#输入yes继续

Ce qui suit est une capture d'écran du processus de réduction des nœuds.

Processus de migration des données.

La migration des slots a été réussie.

2.3. Allouez 1365 emplacements à 6380 nœuds au 192.168.81.220

[root@redis-1 /data/redis_cluster/redis-3.2.9/src]# ./redis-trib.rb reshard 192.168.81.210:6380
How many slots do you want to move (from 1 to 16384)? 1365				#分配出多少个槽位

What is the receiving node ID? 10dc7f3f9a753140a8494adbbe5a13d0026451a1				#将槽位分给那个节点

Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1:6bee155f136f40e28e1f60c8ddec3b158cd8f8e8					#从哪个节点分出槽位
Source node #2:done

Do you want to proceed with the proposed reshard plan (yes/no)? yes			#输入yes继续

Capture d'écran montrant le processus de réduction.

2.4.分配1365个槽位给192.168.81.230的6380节点

[root@redis-1 /data/redis_cluster/redis-3.2.9/src]# ./redis-trib.rb reshard 192.168.81.210:6380
How many slots do you want to move (from 1 to 16384)? 1366				#分配出多少个槽位

What is the receiving node ID? a4381138fdc142f18881b7b6ca8ae5b0d02a3228				#将槽位分给那个节点

Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1:6bee155f136f40e28e1f60c8ddec3b158cd8f8e8					#从哪个节点分出槽位
Source node #2:done

Do you want to proceed with the proposed reshard plan (yes/no)? yes			#输入yes继续

收缩过程截图展示。

当最后一个节点迁移完数据后，6390主节点槽位数变为0。

2.5.查看当前集群槽位分配

槽位及数据已经从6390即将下线的主机迁移完毕，可以看下当前集群三个主节点的槽位数。

可以非常清楚的看到，现在每个主节点的槽位数为5461。

如果觉得槽位重新分配后顺序不太满意，那么在执行一下reshard，把其它节点的槽位都分给192.168.81.210的6380上，这样一来，210的6380拥有的槽位就是0-16383，然后在将210的槽位一个节点分给5461个，分完之后，各节点的顺序就一致了。

3.验证数据迁移过程是否导致数据异常

多开几个窗口，一个执行数据槽位迁移，一个不断创建key，一个查看key的创建进度，一个查看key的数据。
持续测试，发现没有任何数据异常，全部显示ok。

4.将下线的主节点从集群中删除

4.1.删除节点

使用redis-trib删除一个节点，如果这个节点存在复制关系，有节点在复制当前节点或者当前节点复制别的节点的数据，redis-trib会自动处理复制关系，然后将节点删除，节点删除后会把对应的进程也停止运行。

删除节点之前必须确保该节点没有任何槽位和数据，否则会删除失败。

命令：./redis-trib.rb del-node 节点IP:端口 ID

[root@redis-1 /data/redis_cluster/redis-3.2.9/src]# ./redis-trib.rb del-node 192.168.81.240:6390 6bee155f136f40e28e1f60c8ddec3b158cd8f8e8
>>> Removing node 6bee155f136f40e28e1f60c8ddec3b158cd8f8e8 from cluster 192.168.81.240:6390
>>> Sending CLUSTER FORGET messages to the cluster...
>>> SHUTDOWN the node.

[root@redis-1 /data/redis_cluster/redis-3.2.9/src]# ./redis-trib.rb del-node 192.168.81.240:6391 f6b9320dfbc929ad5a31cdb149360b0fd8de2e60
>>> Removing node f6b9320dfbc929ad5a31cdb149360b0fd8de2e60 from cluster 192.168.81.240:6391
>>> Sending CLUSTER FORGET messages to the cluster...
>>> SHUTDOWN the node.

4.2.调整主从交叉复制

删掉192.168.81.240服务器上的两个redis节点后，192.168.81.210服务器上的6380就没有了复制关系，我们需要把192.168.81.230的6381节点复制192.168.81.210的6380节点。

[root@redis-1 ~]# redis-cli -h 192.168.81.230 -p 6381
192.168.81.230:6381> CLUSTER REPLICATE 80e256579658eb256c5b710a3f82c439665794ba
OK

4.3.当节点存在数据无法删除

[root@redis-1 /data/redis_cluster/redis-3.2.9/src]# ./redis-trib.rb del-node 192.168.81.220:6380 10dc7f3f9a753140a8494adbbe5a13d0026451a1
>>> Removing node 10dc7f3f9a753140a8494adbbe5a13d0026451a1 from cluster 192.168.81.220:6380
[ERR] Node 192.168.81.220:6380 is not empty! Reshard data away and try again.

5.将下线主机清空集群信息

redis-trib虽然能够将节点在集群中删除，但是无法将其的集群信息清空，如果集群信息还有保留，那么该接地那就无法加入其它集群。

在下线的redis节点上使用cluster reset删除集群信息即可。

192.168.81.240:6390> CLUSTER reset
OK

推荐学习：Redis视频教程

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!