Optimisation des opérations de mise à jour massive des enregistrements
Problème :
Mise à jour d'une table massive de 120 millions d'enregistrements à l'aide d'un L'instruction UPDATE simple a échoué, même après avoir été exécutée pendant plusieurs heures.
Solution :
Au lieu de mettre à jour la table existante, utilisez une instruction SELECT pour remplir une nouvelle table avec les valeurs souhaitées. Cette approche améliore considérablement les performances et évite les goulots d'étranglement associés aux mises à jour directes.
Étapes pour les cas non simples :
-
Créez un Nouvelle table avec la structure souhaitée :
- Recréez la table originale sous un schéma différent avec le même index clusterisé, les mêmes colonnes d'identité, les mêmes colonnes calculées et la nouvelle colonne à mettre à jour.
- Excluez les déclencheurs, les contraintes de clé étrangère et d'autres éléments non essentiels.
-
Tester l'insert Opération :
- Insérer un petit sous-ensemble de lignes dans le nouveau tableau pour garantir l'exactitude.
-
Préparer l'insertion groupée :
- Définissez la base de données sur une journalisation groupée ou une récupération simple model.
- Tronquer la nouvelle table.
-
Effectuer l'insertion groupée :
- Insérer tout enregistrements de la table d'origine dans la nouvelle table en utilisant une seule instruction INSERT avec le TABLOCK indice.
-
Vérifier l'intégrité des données :
- Vérifiez le nouveau tableau pour confirmer la mise à jour réussie.
-
Recréer des contraintes et Déclencheurs :
- Recréez toutes les contraintes, index et déclencheurs non clusterisés dans la nouvelle table tout en conservant le schéma dans un lot séparé.
-
Changer de table :
- Déplacer la table d'origine à un schéma de sauvegarde et la nouvelle table au schéma souhaité.
- Effectuez toutes les opérations de mise à jour nécessaires pour réconcilier les modifications survenues au cours du processus de mise à jour.
Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!
Déclaration:Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn