首頁  >  文章  >  後端開發  >  對PHP中curl_multi相關函數的應用講解

對PHP中curl_multi相關函數的應用講解

巴扎黑
巴扎黑原創
2017-05-25 17:45:341320瀏覽

相信許多人對php手冊中語焉不詳的curl_multi一族的函數頭疼不已,它們文檔少,給的例子 更是簡單的讓你無從借鑒,我也曾經找了許多網頁,都沒見一個完整的應用例子。

curl_multi_add_handle

curl_multi_close

curl_multi_exec

curl_multi_getcontent

#curl_multi_info_

curl_multi_getcontent

#curl_multi_info_

##i_read_

#curl_multi_remove_handle

curl_multi_select

一般來說,想到要用這些函數時,目的顯然應該是要同時請求多個url,而不是一個依次請求,否則不如自己循環去調curl_exec好了。

步驟總結如下:


第一步:呼叫curl_multi_init
第二步:循環呼叫curl_multi_add_handle
這一步要注意的是,curl_multi_add_handle的第二個參數是由curl_init而來的子handle。
第三步:持續呼叫curl_multi_exec
第四步:根據需要循環呼叫curl_multi_getcontent取得結果
第五步:呼叫curl_multi_remove_handle,並為每個字handle呼叫curl_close

第六步:呼叫curl_multi_close

這裡有一個網上找的簡單例子,其作者稱為dirty的例子,(稍後我會說明為何dirty):

/*
Here's a quick and dirty example for curl-multi from PHP, tested on PHP 5.0.0RC1 CLI / FreeBSD 5.2.1
*/
$connomains = array(
"http://www.cnn.com/",
"http://www.canada.com/",
"http://www.yahoo.com/"
);
$mh = curl_multi_init();
foreach ($connomains as $i => $url) {
     $conn[$i]=curl_init($url);
      curl_setopt($conn[$i],CURLOPT_RETURNTRANSFER,1);
      curl_multi_add_handle ($mh,$conn[$i]);
}
do { $n=curl_multi_exec($mh,$active); } while ($active);
foreach ($connomains as $i => $url) {
      $res[$i]=curl_multi_getcontent($conn[$i]);
      curl_close($conn[$i]);
}
print_r($res);

整個使用過程差不多就是這樣,但是,這個簡單程式碼有個致命弱點,就是在do循環的那段,在整個url請求期間是個死循環,它會輕易導致CPU佔用100%。

現在我們來改進它,這裡要用到一個幾乎沒有任何文檔的函數curl_multi_select了,雖然C的curl函式庫對select有說明,但是,php裡的介面和用法確與C中有不同。

把上面do的那段改成下面這樣:

 do {
                        $mrc = curl_multi_exec($mh,$active);
                } while ($mrc == CURLM_CALL_MULTI_PERFORM);
                while ($active and $mrc == CURLM_OK) {
                        if (curl_multi_select($mh) != -1) {
                                do {
                                        $mrc = curl_multi_exec($mh, $active);
                                } while ($mrc == CURLM_CALL_MULTI_PERFORM);
                        }
                }

因為$active要等全部url資料接受完畢才變成false,所以這裡用到了curl_multi_exec的回傳值判斷是否還有數據,當有數據的時候就不停呼叫curl_multi_exec,暫時沒有數據就進入select階段,新數據一來就可以被喚醒繼續執行。這裡的好處就是CPU的無謂消耗沒有 了。

另外:還有一些細節的地方可能有時候要遇到:


控制每個請求的超時時間,在curl_multi_add_handle之前透過curl_setopt去做:

curl_setopt($ch , CURLOPT_TIMEOUT, $timeout);

判斷是否超時了或其他錯誤,在curl_multi_getcontent之前用:curl_error($conn[$i])###
class MultiCurl{
private $mch;
private $timeout;
private $urls;
private $chs;
private $errchs;
private $content;
public function __construct($urls, $timeout=300){
 $this->mch = curl_multi_init();
 $this->timeout =  $timeout;
 $this->urls = $urls;
 $this->chs = array();
 $this->errchs = array();
 $this->content = array();
}
public function ctlFlow(){
 $this->createhandle();
 $this->execurl();
 $this->chs = array();
 $this->errchs = array();
 echo "<pre class="brush:php;toolbar:false">";
 print_r($this->content);
 echo "
"; return $this->content; } private function createhandle(){ if(!empty($this->urls)){ foreach($this->urls as $k => $url){ $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); curl_setopt($ch, CURLOPT_TIMEOUT, $this->timeout); curl_multi_add_handle($this->mch, $ch); $this->chs[$k] = $ch; } } } private function execurl(){ do { $mrc = curl_multi_exec($this->mch,$active); } while ($mrc == CURLM_CALL_MULTI_PERFORM); while ($active && $mrc == CURLM_OK) { if (curl_multi_select($this->mch) != -1) { usleep(300); do { $mrc = curl_multi_exec($this->mch, $active); } while ($mrc == CURLM_CALL_MULTI_PERFORM); } } foreach($this->chs as $k => $c){ if (curl_error($c) == '') { $temp = curl_multi_getcontent($c); $count = 0; while(!$temp){ if($count > 3) break; usleep(100); $temp = curl_multi_getcontent($c); $count++; } $this->content[$k] = $temp; unset($this->chs[$k]); curl_multi_remove_handle($this->mch, $c); curl_close($c); } else { $this->errchs[$k] = $this->urls[$k]; } } } } $urlArr = array('baidu'=>'www.baidu.com', 'google'=>'www.google.com.hk', 'sogou'=>'www.sogou.com'); $mucurl = new MultiCurl($urlArr); $mucurl->ctlFlow();

以上是對PHP中curl_multi相關函數的應用講解的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn