recherche
Maisonbase de donnéestutoriel mysqlComment MySQL garantit-il l'ordre des messages ?

Permettez-moi de vous donner un exemple. Nous avons déjà construit un système de synchronisation mysql binlog, et la pression est toujours très élevée. Les données de synchronisation quotidiennes doivent atteindre des centaines de millions, ce qui signifie que les données sont toujours très élevées. synchronisé intact à partir d'une bibliothèque mysql. Accédez à une autre bibliothèque mysql (mysql -> mysql). Un point commun est que, par exemple, une équipe big data a besoin de synchroniser une bibliothèque mysql pour effectuer diverses opérations complexes sur les données du système métier de l'entreprise. binlog 同步的系统,压力还是非常大的,日同步数据要达到上亿,就是说数据从一个 mysql 库原封不动地同步到另一个 mysql 库里面去(mysql -> mysql)。常见的一点在于说比如大数据 team,就需要同步一个 mysql 库过来,对公司的业务系统的数据做各种复杂的操作。

你在 mysql 里增删改一条数据,对应出来了增删改 3 条 binlog 日志,接着这三条 binlog

Lorsque vous ajoutez, supprimez ou modifiez une donnée dans mysql, trois journaux binlog seront générés correspondant à l'ajout, la suppression et la modification. Puis ces trois journaux binlog. sera envoyé à MQ, puis consommé et exécuté dans l'ordre. Au moins, vous devez vous assurer que les gens arrivent dans l'ordre, n'est-ce pas ? Sinon, c'était à l'origine : ajouter, modifier, supprimer ; mais vous venez de changer l'ordre et de l'exécuter pour supprimer, modifier et ajouter ; n'est-ce pas complètement faux ?

À l'origine, lorsque ces données ont été synchronisées, les données auraient dû être supprimées à la fin ; mais en conséquence, vous vous êtes trompé de commande, et les données ont finalement été conservées, et la synchronisation des données s'est mal passée.

Regardons d'abord deux scénarios dans lesquels la commande sera en panne :
  • RabbitMQ : une file d'attente, plusieurs consommateurs. Par exemple, le producteur envoie trois éléments de données à RabbitMQ, dans l'ordre data1/data2/data3, et ce qui est placé dans une file d'attente mémoire de RabbitMQ. Trois consommateurs consomment l'un des trois éléments de données de MQ. Par conséquent, le consommateur 2 termine l'opération en premier et enregistre data2 dans la base de données, suivi de data1/data3. Ce n’est évidemment pas gâché.

Comment MySQL garantit-il lordre des messages ?


  • Kafka : Par exemple, nous avons créé un sujet avec trois partitions. Lorsque le producteur écrit, il peut en fait spécifier une clé. Par exemple, si nous spécifions un identifiant de commande comme clé, alors les données liées à cette commande seront définitivement distribuées sur la même partition, et les données de cette partition doivent y être. est un ordre.

    Lorsque le consommateur retire les données de la partition, celles-ci doivent être en ordre. À ce stade, la commande est toujours correcte et il n’y a aucune confusion. Ensuite, nous pouvons créer plusieurs threads dans le consommateur pour traiter les messages simultanément. Parce que si le consommateur consomme et traite dans un seul thread et que le traitement prend du temps, par exemple, il faut des dizaines de ms pour traiter un message, alors seules des dizaines de messages peuvent être traités en 1 seconde, ce qui est un débit trop faible. . Si plusieurs threads s'exécutent simultanément, l'ordre peut être perturbé.

Comment MySQL garantit-il lordre des messages ?

Solution


LapinMQ

Divisez plusieurs files d'attente, chaque file d'attente a un consommateur, ce qui est juste plus de files d'attente, ce qui est en effet un point gênant ; puis le distribue aux différents travailleurs sous-jacents pour le gérer.

Comment MySQL garantit-il lordre des messages ?

Kafka
  • Un sujet, une partition, un consommateur, une consommation interne monothread, le débit monothread est trop faible, généralement cela ne sera pas utilisé.
  • Écrivez N files d'attente mémoire, et les données avec la même clé iront dans la même file d'attente mémoire ; puis pour N threads, chaque thread consomme respectivement une file d'attente mémoire, afin que l'ordre puisse être garanti.

Comment MySQL garantit-il lordre des messages ?

🎜

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration
Cet article est reproduit dans:. en cas de violation, veuillez contacter admin@php.cn Supprimer
Rôle de MySQL: Bases de données dans les applications WebRôle de MySQL: Bases de données dans les applications WebApr 17, 2025 am 12:23 AM

Le rôle principal de MySQL dans les applications Web est de stocker et de gérer les données. 1.MySQL traite efficacement les informations utilisateur, les catalogues de produits, les enregistrements de transaction et autres données. 2. Grâce à SQL Query, les développeurs peuvent extraire des informations de la base de données pour générer du contenu dynamique. 3.MySQL fonctionne basé sur le modèle client-serveur pour assurer une vitesse de requête acceptable.

MySQL: Construire votre première base de donnéesMySQL: Construire votre première base de donnéesApr 17, 2025 am 12:22 AM

Les étapes pour construire une base de données MySQL incluent: 1. Créez une base de données et une table, 2. Insérer des données et 3. Conduisez des requêtes. Tout d'abord, utilisez les instructions CreateDatabase et CreateTable pour créer la base de données et la table, puis utilisez l'instruction InsertInto pour insérer les données, et enfin utilisez l'instruction SELECT pour interroger les données.

MySQL: une approche adaptée aux débutants du stockage de donnéesMySQL: une approche adaptée aux débutants du stockage de donnéesApr 17, 2025 am 12:21 AM

MySQL convient aux débutants car il est facile à utiliser et puissant. 1.MySQL est une base de données relationnelle et utilise SQL pour les opérations CRUD. 2. Il est simple à installer et nécessite la configuration du mot de passe de l'utilisateur racine. 3. Utilisez l'insertion, la mise à jour, la suppression et la sélection pour effectuer des opérations de données. 4. OrderBy, où et jointure peut être utilisé pour des requêtes complexes. 5. Le débogage nécessite de vérifier la syntaxe et d'utiliser Expliquez pour analyser la requête. 6. Les suggestions d'optimisation incluent l'utilisation d'index, le choix du bon type de données et de bonnes habitudes de programmation.

MySQL est-il adapté aux débutants? Évaluation de la courbe d'apprentissageMySQL est-il adapté aux débutants? Évaluation de la courbe d'apprentissageApr 17, 2025 am 12:19 AM

MySQL convient aux débutants car: 1) facile à installer et à configurer, 2) Riches Ressources d'apprentissage, 3) Syntaxe SQL intuitive, 4) Prise en charge de l'outil puissant. Néanmoins, les débutants doivent surmonter des défis tels que la conception de la base de données, l'optimisation des requêtes, la gestion de la sécurité et la sauvegarde des données.

SQL est-il un langage de programmation? Clarifier la terminologieSQL est-il un langage de programmation? Clarifier la terminologieApr 17, 2025 am 12:17 AM

Oui, sqlisaprogrammingNanguages ​​en matière de responsabilité de responsabilité.

Expliquez les propriétés acides (atomicité, cohérence, isolement, durabilité).Expliquez les propriétés acides (atomicité, cohérence, isolement, durabilité).Apr 16, 2025 am 12:20 AM

Les attributs acides comprennent l'atomicité, la cohérence, l'isolement et la durabilité, et sont la pierre angulaire de la conception de la base de données. 1. L'atomicité garantit que la transaction est complètement réussie ou complètement échouée. 2. La cohérence garantit que la base de données reste cohérente avant et après une transaction. 3. L'isolement garantit que les transactions n'interfèrent pas entre elles. 4. La persistance garantit que les données sont enregistrées en permanence après la soumission des transactions.

MySQL: Système de gestion de la base de données vs langage de programmationMySQL: Système de gestion de la base de données vs langage de programmationApr 16, 2025 am 12:19 AM

MySQL n'est pas seulement un système de gestion de base de données (SGBD) mais également étroitement lié aux langages de programmation. 1) En tant que SGBD, MySQL est utilisé pour stocker, organiser et récupérer des données et l'optimisation des index peut améliorer les performances de la requête. 2) La combinaison de SQL avec des langages de programmation, intégrés dans Python, en utilisant des outils ORM tels que SQLALCHEMY peut simplifier les opérations. 3) L'optimisation des performances comprend l'indexation, la requête, la mise en cache, la division des bibliothèques et des tableaux et la gestion des transactions.

MySQL: Gestion des données avec les commandes SQLMySQL: Gestion des données avec les commandes SQLApr 16, 2025 am 12:19 AM

MySQL utilise des commandes SQL pour gérer les données. 1. Les commandes de base incluent sélectionner, insérer, mettre à jour et supprimer. 2. L'utilisation avancée implique des fonctions de jointure, de sous-requête et d'agrégation. 3. Les erreurs courantes incluent les problèmes de syntaxe, de logique et de performances. 4. Les conseils d'optimisation incluent l'utilisation d'index, d'éviter la sélection * et l'utilisation de la limite.

See all articles

Outils d'IA chauds

Undresser.AI Undress

Undresser.AI Undress

Application basée sur l'IA pour créer des photos de nu réalistes

AI Clothes Remover

AI Clothes Remover

Outil d'IA en ligne pour supprimer les vêtements des photos.

Undress AI Tool

Undress AI Tool

Images de déshabillage gratuites

Clothoff.io

Clothoff.io

Dissolvant de vêtements AI

AI Hentai Generator

AI Hentai Generator

Générez AI Hentai gratuitement.

Article chaud

R.E.P.O. Crystals d'énergie expliqués et ce qu'ils font (cristal jaune)
1 Il y a quelques moisBy尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Meilleurs paramètres graphiques
1 Il y a quelques moisBy尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Comment réparer l'audio si vous n'entendez personne
1 Il y a quelques moisBy尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Commandes de chat et comment les utiliser
1 Il y a quelques moisBy尊渡假赌尊渡假赌尊渡假赌

Outils chauds

ZendStudio 13.5.1 Mac

ZendStudio 13.5.1 Mac

Puissant environnement de développement intégré PHP

Envoyer Studio 13.0.1

Envoyer Studio 13.0.1

Puissant environnement de développement intégré PHP

Version crackée d'EditPlus en chinois

Version crackée d'EditPlus en chinois

Petite taille, coloration syntaxique, ne prend pas en charge la fonction d'invite de code

Navigateur d'examen sécurisé

Navigateur d'examen sécurisé

Safe Exam Browser est un environnement de navigation sécurisé permettant de passer des examens en ligne en toute sécurité. Ce logiciel transforme n'importe quel ordinateur en poste de travail sécurisé. Il contrôle l'accès à n'importe quel utilitaire et empêche les étudiants d'utiliser des ressources non autorisées.

Dreamweaver CS6

Dreamweaver CS6

Outils de développement Web visuel