php中curl、fsocket、file_get_content函數比較

最近做一個網頁小偷程式的時候才發現file_get_content已經完全無法滿足需求了。 我覺得，在讀取遠端內容時，file_get_content除了使用比curl便捷以外，其他都沒有curl好

抓取遠端內容，之前一直都在用file_get_content函數，其實早就知道有curl這麼一個好東西的存在，但是看了一眼後感覺使用頗有些複雜，沒有file_get_content那麼簡單，再就是需求也不大，所以沒有學習使用curl。

php中curl和file_get_content的一些比較 主要區別： curl支援很多協議，有FTP, FTPS, HTTP, HTTPS, GOPHER, TELNET, DICT, FILE以及LDAP，也就是說，它能做到很多file_get_content做不到的事情。 curl在php可以實現遠端取得與擷取內容；實現PHP網頁版的FTP上傳下載；實現模擬登陸；實現介面對接（API），資料傳輸；實現模擬Cookie；下載檔案斷點續傳等等，功能十分強大。 了解curl一些基本的使用後，才發現其實並不難，只不過記住裡面一些設定參數，難弄一點，但是我們記住幾個常用的就可以了。 開啟curl： 因為PHP預設是不支援curl功能的，所以如果要用curl的話，首先需要在php.ini中開啟該功能，即去掉;extension= php_curl.dll 前面的分號，然後保存後重啟apache/iis就好了。 基本語法：

$my_curl = curl_init(); //初始化一個curl物件
curl_setopt($my_curl, CURLOPT_URL, "http://bbs.it- home.org"); //設定你需要抓取的URL
curl_setopt($my_curl,CURLOPT_RETURNTRANSFER,1); //設定是將結果儲存到字串中還是輸出到螢幕上，1表示將結果儲存到字串
$str = curl_exec($curl); //執行請求
echo $str; //輸出抓取的結果
curl_close($curl); //關閉url請求

最近需要取得別人網站上的音樂資料。用了file_get_contents函數，但是總是會遇到取得失敗的問題，儘管按照手冊中的例子設定了逾時，可多數時候不會奏效：

$config['context'] = stream_context_create(array('http' => array('method' => "GET",
' timeout' => 5//這個超時時間不穩定，常常不奏效
)
));

這時候，看一下伺服器的連線池，會發現一堆類似的錯誤，讓我頭痛萬分： file_get_contents(http://***): failed to open stream… 現在改用了curl函式庫，寫了一個函數替換：

function curl_file_get_contents($durl){
$ch = curl_init();
curl_setopt($chL, CURt(UR
curl_setopt($ch, CURLOPT_TIMEOUT, 5);
curl_setopt($ch, CURLOPT_USERAGENT, _USERAGENT_);
curl_setopt($ch, CURURPT_REER_,top_*> RANSFER, 1) ;
$r = curl_exec($ch);
curl_close($ch);

複製程式碼

複製程式碼
• 如此，除了真正的網路問題外，沒再出現任何問題。 這是別人做過的關於curl和file_get_contents的測試： file_get_contents抓取google.com需用秒數： 2.31319094 2.30374217 2.21512604 3.30553889 2.30124092 curl使用的時間： 0.68719101 0.64675593 0.64326 0.81983113 0.63956594 差距很大？呵呵，從我使用的經驗來說，這兩個工具不只是速度有差異，穩定性也相差很大。 建議對網路資料抓取穩定性要求比較高的朋友使用上面的 curl_file_get_contents函數，不僅穩定速度快，還能假瀏覽器欺騙目標位址！
• 說到curl與file_get_contents的用法，之前的文章中多有提及，這裡推薦幾篇不錯的文章，大家做個參考：
PHP file_get_contents逾時處理的設定方法
php file_get_contents抓取Gzip網頁亂碼的解決方法
php中file_get_contents逾時問題的解決方法
PHP file_get_contents逾時的設定方法

php file_get_content相容性偵測的範例

方法1: 用file_get_contents 以get方式取得內容

$html = file_get_contents($url );echo $html;?> 複製程式碼

方法2: 用fopen開啟url, 以get方式取得內容

$fp = fopen($url, 'r');
stream_get_meta_data($fp);
while (!feof($fp)) {
$result .= fgets($fp, 1024);
}
echo "url body: $result";
fclose($fp);
?>

方法3：用file_get_contents函數,以post方式取得url

$data = array ('foo' => 'bar');
$data = http_build_query($data) ;
$opts = array (
'http' => array (
'method' => 'POST',
'header'=> "Content-type: application/x-www- form-urlencodedrn" .
"Content-Length: " . strlen($data) . "rn",
'content' => $data
)
);
$context = stream_context_create($opts);
$html = file_get_contents('http://localhost/e/admin/test.html', false, $context);
echo $html;
?>
?>

方法4：用fsockopen函數開啟url，以get方式取得完整的數據，包括header和body

function get_url ($url,$cookie=false)
{
$url = parse$cookie=false)
{
$url = parse$cookie(url) ;
$query = $url[path]."?".$url[query];
echo "Query:".$query;
$fp = fsockopen( $url[host], $ url[port]?$url[port]:80 , $errno, $errstr, 30);
if (!$fp) {
return false;
} else {
$request = "GET $query HTTP/1.1rn";
$request .= "Host: $url[host]rn";
$request .= "Connection: Closern";
if($cookie) $ request.="Cookie: $cookien";
$request.="rn";
fwrite($fp,$request);
while()) {
$result .= @fgets ($fp, 1024);
}
fclose($fp);
return $result;
}
}
//取得url的html部分，去掉header
function GetUrlHTML($url,$cookie=false)
{
$rowdata = get_url($url,$cookie);
if($rowdata)
{
$body= stristr ($rowdata,"rnrn");
$body=substr($body,4,strlen($body));
return $body;
}
return false;

複製程式碼

function HTTP_Post($URL,$data,$cookie, $referrer="")
{
/ / parsing the given URL
$URL_Info=parse_url($URL);
// Building referrer
if($referrer=="") // if not given use this script as referrer
$ referrer="111″;
// making string from $data
foreach($data as $key=>$value)
$values[]="$key=".urlencode($value) ;
$data_string=implode("&",$values);
// Find out which port is needed – if not given use standard (=80)
if(!isset($URL_Info[" port"]))
$URL_Info["port"]=80;
// building POST-request:
$request.="POST ".$URL_Info["path"]." HTTP/ 1.1n";
$request.="Host: ".$URL_Info["host"]."n";
$request.="Referer: $referern";
$request.=" Content-type: application/x-www-form-urlencodedn";
$request.="Content-length: ".strlen($data_string)."n";
$request.="Connection: closen ";
$request.="Cookie: $cookien";
$request.="n";
$request.=$data_string."n";
$request.="n";
$request.=$data_string."n";
$fp = fsockopen($ URL_Info["host"],$URL_Info["port"]);
fputs($fp, $request);
while(!feof($fp)) {
$result .= fgets( $fp, 1024);
}

?>



複製碼
複製程式碼


方法6:使用curl函式庫，使用curl函式庫之前，可能要先查看一下php.ini是否已經開啟了curl擴充