私が書いた phpQuery に基づく php 一般コレクション クラス

まだ余談ですが、これは私が以前に作成した PHP コレクション クラスであり、セレクターについて少し知っている限り、非常にシンプルで強力だと思います。任意のページを収集できます。https ページをサポートしているため、単純な収集には十分です。

 /**
 *一般リスト収集クラス
 *バージョン V1.3
 *作者: JAE
 *ブログ: http://blog.jaekj.com
*/
 require_once '../phpQuery/phpQuery/phpQuery.php';
 class QueryList{

 private $pageURL;
 private $regArr = array( );
 public $jsonArr = array();
 private $regRange;
 private $html;
 /**************************************************
 *パラメータ: ページアドレスセレクター配列ブロックセレクター
 * [セレクター配列] 説明: 形式 array("name"=>array("selector", "type"),....)
 * [型]説明: 値「text」、「html」、「attribute」
 *[ブロックセレクター]: まずルールに従っていくつかの大きなブロックを選択し、次にそれぞれのブロック内で関連する選択を行うことを指します
 ***** *** ****************************************/
 function QueryList($pageURL,$regArr=array(),$regRange='')
 {
 $this->pageURL = $pageURL;

 //能获取のためにhttps://
 $ch =curl_init();
curl_setopt($ch, CURLOPT_URL,$this->pageURL);
curl_setopt ($ch、CURLOPT_SSL_VERIFYPEER、false);
curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, false);
curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);
 $this->html =curl_exec($ch);
curl_close($ch);

 if(!empty($regArr))
 {

 $this->regArr = $regArr;
 $this- >regRange = $regRange;
 $this->getList();
 }

 }
 function setQuery($regArr,$regRange='')
 {
 $this->gt;jsonArr=array();
 $this->regArr = $regArr;
 $this->regRange = $regRange;
 $this->getList();
 }
 プライベート関数 getList()
 {

 $hobj = phpQuery::newDocumentHTML ($this->html);
 if(!empty($this->regRange))
 {
 $robj = pq($hobj)->find($this->regRange);

 $ i=0;
 foreach($robj as $item)
 {

 while(list($key,$reg_value)=each($this->regArr))
 {
 $iobj = pq($item)- >find($reg_value[0]);

 switch($reg_value[1])
 {
 case 'text':
 $this->jsonArr[$i][$key] = trim(pq($ iobj)->text());
break;
case 'html':
 $this->jsonArr[$i][$key] =rim(pq($iobj)->html());
break;
default:
 $this->jsonArr[$i][$key] = pq($iobj)->attr($reg_value[1]);
 Break;

 }
 }
 //重置数组指针
reset($this->regArr);
 $i++;
 }
 }
 else
 {
 while(list($key,$reg_value)=each($this->regArr))
 {
 $lobj = pq($hobj)->find($reg_value[0]);


 $i=0;
 foreach($lobj as $item)
 {
 switch($reg_value[1])
 {
 case 'text':
 $this->jsonArr[$i++][$key] = trim(pq($item)->text());
 Break;
 case 'html':
 $ this->jsonArr[$i++][$key] =rim(pq($item)->html());
break;
default:
 $this->jsonArr[$i++][$key] = pq($item)->attr($reg_value[1]);
 ブレーク;

 }


 }


 }
 }
 }
 function getJSON()
 {
 return json_encode($this->jsonArr);
 }

}

require 'Query/QueryList.class.php';


//OSCコード共有リスト、タイトルリンク作者を収集
$url = "http://www.oschina.net/ code /list";
$reg = array("title"=>array(".code_title a:eq(0)","text"),"url"=>array(".code_title a:eq( 0 )","href"),"author"=>array("img","title"));
$rang = ".code_list li";
$hj = new QueryList($url,$reg, $ rang);
$arr = $hj->jsonArr;
print_r($arr);
//現在のページの右側にある TOP40 のアクティブな投稿者の画像も収集し、JSON データを取得したい場合は、このように書くことができます
$reg = array("portrait"=>array(".hot_top img","src"));
$hj->setQuery($reg);
$json = $hj-> ;getJSON();
echo $ json . "";

//OSC コンテンツ ページ content
$url = "http://www.oschina.net/code/snippet_186288_23816";
$reg = array("title"= >array(".QTitle h1","text"),"con"=>array(".Content","html"));
$hj = new QueryList($url ,$reg);
$ arr = $hj->jsonArr;
print_r($arr);

//非常に多くの例を挙げましたが、コレクションに使用するのは非常に便利です

 /**
 *Baidu と Google 検索 API は私自身が作成しました
 *バージョン V2.0
 *著者: JAE
 *ブログ: http://blog.jaekj.com
 **/
require_once 'QueryList_class.php';
 class Searcher
 {
 private $searcher;
 private $key;
 private $num;
 private $page ;
 private $regArr ;
 private $regRange ;
 private $regZnum;
 public $jsonArr;
 //パラメータ 搜索引擎 検索关键字 返される結果条数 第几页
 function Searcher($searcher,$key,$num ,$page)
 {
 if($searcher=='baidu')
 {
 $this->regArr = array("title"=>array("h3.ta,#ting_singlesong_box a","text" ),"tCon"=>array("div.c-abstract,font:slice(0,2),div#weibo,table tr:eq(0),div.c-abstract-size p:eq(0 ),div.vd_sitcom_new_tinfo","text"),"url"=>array("h3.ta,#ting_singlesong_box a","href"));
 $this->regRange = 'table.result,table .result-op';
 $this->regZnum=array("zNum"=>array("span.nums","text"));
 }
 else if($searcher=='google')
 {
 $this->regArr = array("title"=>array("h3.r a","text"),"tCon"=>array("span.st","text"), "url"=>array("h3.r a","href"));
 $this->regRange = 'li.g';
 $this->regZnum=array("zNum"=> array("div#resultStats","text"));
 }
 $this->searcher = $searcher;
 $this->key = $key;
 $this->num = $num;
 $this->page = $page-1;
 $this->getList();
 }
 プライベート関数 getList()
 {
 $s = urlencode($this->key);
 $num = $this->num;
 $start = $this->num*$this->page;
 if($this->searcher=='baidu')
 {
 $url = "http:/ /www.baidu.com/s?pn=$start&rn=$num&wd=$s";
 $reg_znum='/[d,]+/';
 }
 else if($this->searcher==' google')
 {
 $url="https://www.google.com.hk/search?filter=0&lr=&newwindow=1&safe=images&hl=ja&as_qdr=all&num=$num&start=$start&q=$s";
 $ reg_znum='/([d,]+) result(s)?/';
 }
 $searcherObj = new QueryList($url,$this->regArr,$this->regRange);
 for($ i=0;$ijsonArr);$i++)
 {
 if($this->searcher=='baidu')
 {
 $searcherObj->jsonArr[$i] ['url'] = $this->getBaiduRealURL($searcherObj->jsonArr[$i]['url']);
 }
 else if($this->searcher=='google')
 {
 $searcherObj->jsonArr[$i]['url'] = $this->getGoogleRealURL($searcherObj->jsonArr[$i]['url']);
 }
 }
 $this-> ;jsonArr = $searcherObj->jsonArr ;

 //获取总共结果条数

 $searcherObj->setQuery($this->regZnum);
 $zNum = $searcherObj->jsonArr[0][ 'zNum'];
 preg_match($reg_znum,$zNum,$arr)?$zNum=$arr[0]:$zNum=0;
 $zNum = (int)str_replace(',','',$zNum );
 //计算总页数
 $zPage = ceil($zNum/$this->num);
 $this->jsonArr=array('num'=>$this->num,' page'=>((int)$this->page+1),'zNum'=>$zNum,'zPage'=>$zPage,"s"=>"$this->key ",'other'=>array('author'=>'JAE','QQ'=>'734708094','blog'=>'http://blog.jaekj.com'),'データ'=>$this->jsonArr);


 }
 function getJSON()
 {
 return json_encode($this->jsonArr);
 }
 private function getBaiduRealURL($url)
 {
 //百度跳转の真正地址
 $header = get_headers ($url,1);
 if (strpos($header[0],'301') || strpos($header[0],'302'))
 {
 if(is_array($header['Location' ]))
 {
 //return $header['Location'][count($header['Location'])-1];
 return $header['Location'][0];
 }
 else
 {
 return $header['Location'];
 }
 }
 else
 {
 return $url;
 }
 }
 プライベート関数 getGoogleRealURL($url)
 {
 $reg_url = '/q=( .+)&/U';
 return preg_match($reg_url,$url,$arr)?urldecode($arr[1]):$url;

 }
 }
// $hj = new Searcher('google ','oschina',20,2);
 // print_r( $hj->jsonArr);
//效果演示地址
//http://blog.jaekj.com//jae/demo/searcher/ Searcher_class.php?searcher=baidu&s=jaekj&num=20&page=1