首頁  >  文章  >  後端開發  >  php如何快速匯入大量數據

php如何快速匯入大量數據

王林
王林原創
2019-09-21 17:58:513444瀏覽

php如何快速匯入大量數據

PHP快速匯入大量資料到資料庫的方法

第一種方法:使用insert into 插入,程式碼如下:

$params = array(‘value'=>'50′);

set_time_limit(0);

echo date(“H:i:s”);

for($i=0;$i<2000000;$i++){

$connect_mysql->insert($params);

};
echo date(“H:i:s”);

最後顯示為:23:25:05 01:32:05 也就是花了2個小時多!

第二種方法:使用交易提交,批次插入資料庫(每隔10W條提交下)最後顯示消耗的時間為:22:56:13 23:04:00 ,總共8分13秒  ,程式碼如下:

#
echo date(“H:i:s”);

$connect_mysql->query(‘BEGIN&#39;);

$params = array(‘value&#39;=>&#39;50′);

for($i=0;$i<2000000;$i++){

$connect_mysql->insert($params);

if($i%100000==0){

$connect_mysql->query(‘COMMIT&#39;);

$connect_mysql->query(‘BEGIN&#39;);

}

}

$connect_mysql->query(‘COMMIT&#39;);

echo date(“H:i:s”);

#第三種方法:使用最佳化SQL語句

將SQL語句進行拼接,使用insert into table () values  (),(),(),()然後再一次插入,如果字串太長,則需要設定下MYSQL,

在mysql命令列中執行:

set global max_allowed_packet =  2*1024*1024*10;

消耗時間為:11:24:06 11:25: 06;

插入200W條測試資料僅用了1分鐘!程式碼如下:

$sql= “insert into twenty_million (value) values”;

for($i=0;$i<2000000;$i++){

$sql.=”(&#39;50′),”;

};

$sql = substr($sql,0,strlen($sql)-1);

$connect_mysql->query($sql);

總結:在插入大批量資料時,第一種方法無疑是最糟糕的,而第二種方法在實際應用上就比較廣泛,第三種方法在插入測試資料或其他低要求時比較合適,速度確實快。

推薦教學:PHP影片教學

#

以上是php如何快速匯入大量數據的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn