首頁 >php教程 >PHP开发 >PHP curl實作抓取302跳轉後頁面的範例

PHP curl實作抓取302跳轉後頁面的範例

高洛峰
高洛峰原創
2017-01-03 17:43:342303瀏覽

PHP的CURL正常抓取頁面程式如下:

$url = 'http://www.baidu.com';
 
$ch = curl_init(); 
curl_setopt($ch, CURLOPT_URL, $url); 
curl_setopt($ch, CURLOPT_VERBOSE, true); 
curl_setopt($ch, CURLOPT_HEADER, true);
curl_setopt($ch, CURLOPT_NOBODY, true);
curl_setopt($ch, CURLOPT_CUSTOMREQUEST, 'GET');
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); 
curl_setopt($ch, CURLOPT_TIMEOUT, 20); 
curl_setopt($ch, CURLOPT_AUTOREFERER, true); 
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true); 
$ret = curl_exec($ch); 
$info = curl_getinfo($ch); 
curl_close($ch);


如果你抓取到的是302狀態,是因為再抓取的過程中,有的跳轉需要給下一個鏈接傳遞參數,而下一個鏈接同時也設定如果沒接收到對應的參數是為非法存取。

curl_setopt($curl, CURLOPT_CUSTOMREQUEST, 'GET');

顯示就應該正常了。

上面用來抓取功能,幾乎應該沒問題的。你可以查一下CURLOPT_CUSTOMREQUEST相關資料。

使用一個自訂的請求資訊來取代”GET”或”HEAD”作為HTTP請求。這對於執行”DELETE” 或其他更隱蔽的HTTP請求。有效值如”GET”,”POST”,”CONNECT”等等。也就是說,不要在這裡輸入整個HTTP請求。例如輸入”GET /index.html HTTP/1.0rnrn”是不正確的。

更多PHP curl實現抓取302跳轉後頁面的範例相關文章請關注PHP中文網!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn