Bagaimana untuk mengoptimumkan import data pukal menggunakan sisipan pukal MySQL

Cara menggunakan sisipan kumpulan MySQL untuk mengoptimumkan import data kumpulan besar

1 Pengenalan
Dalam pembangunan sebenar, kita selalunya perlu mengimport kumpulan besar data ke dalam pangkalan data MySQL. Kaedah penyisipan tradisional satu demi satu adalah tidak cekap dan memakan masa, yang akan menjejaskan prestasi sistem secara serius. Untuk meningkatkan kecekapan import data, kami boleh mengendalikan import kumpulan besar data dengan menggunakan strategi pengoptimuman sisipan kumpulan MySQL.

2. Gunakan kemahiran pengoptimuman sisipan kumpulan MySQL

1. Gunakan INSERT INTO...VALUES untuk memasukkan berbilang baris rekod
   Dalam MySQL, kita boleh menggunakan INSERT INTO...VALUES untuk memasukkan berbilang baris rekod. Kaedah ini boleh memasukkan berbilang baris rekod sekaligus dan bukannya memasukkannya satu demi satu.

Kod sampel adalah seperti berikut:

MASUKKAN KE DALAM nama_jadual (lajur1, lajur2, lajur3)
NILAI (nilai1, nilai2, nilai3),

   (value1, value2, value3),
   (value1, value2, value3),
   ...

2. Gunakan LOAD DATA INFILE menyediakan LOAD DATA INFILE untuk mengimport fail data
   Perintah INFILE, Data boleh diimport terus daripada fail ke dalam jadual pangkalan data. Berbanding dengan memasukkan data menggunakan INSERT INTO... VALUES, menggunakan LOAD DATA INFILE boleh mengimport kumpulan besar data dengan lebih cekap.

Kod sampel adalah seperti berikut:

MUAT DATA INFILE 'path/to/file.csv'
MASUK JADUAL table_name
MEDAN DITAMATKAN OLEH ','
TALIAN DITAMATKAN OLEH '
' sebaliknya

'; daripada INSERT INTO
3. Jika mungkin terdapat rekod pendua dalam data yang akan diimport, kami boleh menggunakan REPLACE INTO dan bukannya INSERT INTO, yang secara automatik akan memadam rekod lama dan memasukkan yang baru. Kaedah ini juga boleh meningkatkan kecekapan import data.
   

Kod sampel adalah seperti berikut:

GANTIKAN KEPADA nama_jadual (lajur1, lajur2, lajur3)

NILAI (nilai1, nilai2, nilai3),

   (value1, value2, value3),
   (value1, value2, value3),
   ...

Optimumkan pemprosesan transaksi import data,
4. sekali import data yang besar. anda boleh menganggap operasi Sisipan diproses dalam transaksi. Urus niaga akan memastikan semua operasi sisipan sama ada berjaya atau ditarik balik. Ini dapat memastikan integriti data dengan berkesan dan meningkatkan kecekapan operasi pemasukan.
   

Kod sampel adalah seperti berikut:

MULAKAN TRANSAKSI;

MASUKKAN KE DALAM nama_jadual (lajur1, lajur2, lajur3) NILAI (nilai1, nilai2, nilai3);
MASUKKAN KE DALAM nama_jadual (lajur1, lajur2, lajur3) NILAI value2, value3 );
...
COMMIT;

Tetapkan kekerapan penghantaran transaksi yang sesuai
5. Menetapkan kekerapan penghantaran transaksi yang sesuai juga boleh meningkatkan kecekapan import data pada tahap tertentu. Melakukan terlalu kerap akan meningkatkan overhed pemprosesan transaksi, manakala melakukan terlalu sedikit akan mengakibatkan pemprosesan transaksi mengambil masa terlalu lama.
   

Kod sampel adalah seperti berikut:

// Setiap kali 1000 rekod dimasukkan, lakukan transaksi

MULAKAN TRANSAKSI;
...
JIKA (INSERT_COUNT % 1000 = 0) THENF
ENDreee. ..

3. Ringkasan
Di atas memperkenalkan cara menggunakan strategi pengoptimuman sisipan batch MySQL untuk menangani masalah import data kelompok besar. Dalam aplikasi praktikal, kaedah yang sesuai boleh dipilih mengikut keperluan khusus, dengan itu meningkatkan kecekapan import data. Dengan menggunakan teknik pemasukan kelompok dengan betul, anda boleh mengurangkan beban pada pangkalan data dan meningkatkan prestasi sistem.

Atas ialah kandungan terperinci Bagaimana untuk mengoptimumkan import data pukal menggunakan sisipan pukal MySQL. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!