php代码
function spider($url, $spider = 'Blankspider', $port = 80, $timeout = 15) { $content= ''; $resolve = parse_url($url); $host = $resolve['host']; $path = empty($resolve['path']) ? '/' : $resolve['path'].(!empty($resolve['query']) ? '?'.$resolve['query'] : ''); if(empty($host)) { return 'Requested host name can\'t be empty'; } $fp = fsockopen($host, $port, $errno, $errstr, $timeout); if (!$fp) { return $errstr; } else { $fputs = "GET $path HTTP/1.1\r\n"; $fputs.= "Accept: */*\r\n"; $fputs.= "Host: $host\r\n"; $fputs.= "Spider: $spider\r\n"; $fputs.= "Connection: Close\r\n\r\n"; stream_set_blocking($fp, 1); stream_set_timeout($fp, $timeout); fputs($fp, $fputs); while(!feof($fp)) { if(($return = fgets($fp)) && ($return == "\r\n" || $return == "\n")) { break; } } while(!feof($fp)) { $content .= fgets($fp, 8192); } fclose($fp); return $content; } } function cron2spider($iptable, $sleep = 5) { set_time_limit(0); $i = 0; date_default_timezone_set('PRC'); if(!file_exists($iptable)) { return json_encode(array( 'status'=> 'error', 'description'=> 'iptable.conf file not exists')); } $file = file($iptable); if(empty($file)) { return json_encode(array( 'status'=> 'error', 'description'=> 'iptable.conf can\'t be empty')); } while($i< count($file)) { if(!file_exists('robots') || !is_writable('robots')) { return json_encode(array( 'status'=> 'error', 'description'=> 'directory doesn\'t exist or don\'t have write permissions')); } $dir = 'robots/'.preg_replace('/(http\:\/\/)|(\s)|(www\.)/', '', $file[$i]); if(!file_exists($dir)){ mkdir($dir); } file_put_contents($dir.'/'.date('Y.m.d.H.i.s', time()).'.txt', spider(preg_replace('/\s/', '', $file[$i]))); $i++; sleep($sleep); } return json_encode(array( 'status'=> 'ok', 'description'=> 'robots program execution success')); } echo cron2spider('iptable.conf');
陳述
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

AI Hentai Generator
免費產生 AI 無盡。

熱門文章
R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
3 週前By尊渡假赌尊渡假赌尊渡假赌
刺客信條陰影:貝殼謎語解決方案
2 週前ByDDD
R.E.P.O.如果您聽不到任何人,如何修復音頻
3 週前By尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解鎖Myrise中的所有內容
3 週前By尊渡假赌尊渡假赌尊渡假赌

熱工具

Dreamweaver Mac版
視覺化網頁開發工具

MantisBT
Mantis是一個易於部署的基於Web的缺陷追蹤工具,用於幫助產品缺陷追蹤。它需要PHP、MySQL和一個Web伺服器。請查看我們的演示和託管服務。

SAP NetWeaver Server Adapter for Eclipse
將Eclipse與SAP NetWeaver應用伺服器整合。

VSCode Windows 64位元 下載
微軟推出的免費、功能強大的一款IDE編輯器

PhpStorm Mac 版本
最新(2018.2.1 )專業的PHP整合開發工具