>  기사  >  백엔드 개발  >  PHP를 사용하여 Douban 영화 리뷰를 크롤링하는 방법에 대한 튜토리얼

PHP를 사용하여 Douban 영화 리뷰를 크롤링하는 방법에 대한 튜토리얼

PHPz
PHPz원래의
2023-06-14 17:06:591426검색

영화 시장의 지속적인 확장과 발전에 따라 영화에 대한 사람들의 수요도 점점 더 높아지고 있습니다. 영화 평가에 관해서는 항상 Douban Film Critics가 더 권위 있고 대중적인 선택이었습니다. 때로는 Douban 영화 리뷰에 대한 정보를 얻기 위해 크롤러 기술을 사용해야 하는 Douban 영화 리뷰에 대한 특정 분석 및 처리도 수행해야 합니다. 이 기사에서는 참고용으로 PHP를 사용하여 Douban 영화 리뷰를 크롤링하는 방법에 대한 튜토리얼을 소개합니다.

  1. 두반 영화의 페이지 주소 가져오기

두반 영화 리뷰를 크롤링하기 전에 먼저 두반 영화의 페이지 주소를 가져와야 합니다. 영화의 페이지 주소는 검색 엔진을 통해 얻거나 Douban Movies의 영화 목록 인터페이스에 직접 액세스하여 얻을 수 있습니다. 예를 들어, 영화 "쇼생크 탈출"의 페이지 주소를 얻으려면 Douban Movies의 영화 목록 인터페이스에서 검색하거나 브라우저에 영화의 페이지 주소를 직접 입력할 수 있습니다: https:/ /movie.douban.com/subject/1292052/.

  1. PHP를 사용하여 Douban 영화 페이지에 액세스하고 페이지 콘텐츠를 얻습니다.

PHP는 웹 페이지 액세스 및 데이터 수집을 위한 cURL 라이브러리를 제공합니다. 다음은 Douban Movies 페이지에 액세스하여 페이지 내용을 가져오는 PHP 코드 예제입니다.

$url = 'https://movie.douban.com/subject/1292052/';
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
$html = curl_exec($ch);
curl_close($ch);
echo $html;

코드에서 Douban Movies의 페이지 주소를 먼저 정의한 다음, 컬_init() 함수를 사용하여 cURL 개체를 초기화합니다. . 그런 다음, cur_setopt() 함수를 사용하여 컬 객체의 매개변수를 설정합니다. 여기서 CURLOPT_URL은 액세스된 URL 주소를 설정하고 CURLOPT_RETURNTRANSFER는 반환 결과를 문자열로 설정합니다. 그런 다음 컬_exec() 함수를 사용하여 cURL 크롤링 작업을 수행하고 결과를 $html 변수에 할당합니다. 마지막으로 cur_close() 함수를 사용하여 cURL 세션을 닫고 관련 리소스를 해제한 후 $html 변수의 값을 출력합니다.

위 코드를 실행하여 Douban 영화 페이지의 HTML 콘텐츠를 출력합니다.

  1. Douban 영화 리뷰 페이지의 HTML 콘텐츠를 구문 분석합니다

페이지의 HTML 콘텐츠를 얻은 후 PHP를 사용하여 HTML 콘텐츠를 구문 분석하고 Douban 영화 리뷰 정보를 추출해야 합니다.

PHP에서는 SimpleXML 확장을 사용하여 XML 또는 HTML 데이터를 구문 분석할 수 있습니다. 다음은 Douban 영화 리뷰 페이지의 HTML 콘텐츠를 구문 분석하고 영화 리뷰의 평점 및 리뷰 내용을 추출하는 데 사용되는 PHP 코드 예제입니다.

$url = 'https://movie.douban.com/subject/1292052/';
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
$html = curl_exec($ch);
curl_close($ch);

// 使用 SimpleXML 解析 HTML 内容
$xml = simplexml_load_string($html);
$ratings = array();
$comments = array();

// 获取影评评分和评论内容
foreach ($xml->xpath('//div[@class="comment-item"]') as $comment) {
    $rating = $comment->div[2]->span[2]->text();
    $comment_content = $comment->div[2]->p->text();
    $ratings[] = (string)$rating;
    $comments[] = (string)$comment_content;
}

print_r($ratings);
print_r($comments);

코드에서 Douban 영화의 페이지 주소가 먼저 정의되고, 그런 다음 컬을 사용하여 페이지에 액세스하고 HTML 콘텐츠를 가져오는 작업을 수행합니다.

다음으로 simplexml_load_string() 함수를 사용하여 HTML 콘텐츠를 SimpleXML 객체로 구문 분석합니다. 그런 다음 xpath() 함수와 XPath 쿼리 문을 사용하여 페이지의 모든 영화 리뷰 정보를 얻고, foreach 문을 사용하여 각 영화 리뷰를 탐색하고 평점과 댓글 내용을 가져옵니다. 마지막으로 평점과 의견을 각각 $atings 및 $comments 배열에 저장하고 이 두 배열의 내용을 출력합니다.

두반 영화 리뷰 페이지의 모든 영화 리뷰 정보를 파싱하려면 위 코드를 실행하세요.

  1. 영화 리뷰 정보 출력

다음으로, 획득한 영화 리뷰 정보를 출력합니다. HTML과 CSS를 사용하여 출력 내용을 아름답게 만들 수 있습니다. 다음은 Douban 영화 리뷰 페이지의 영화 리뷰 정보를 미화하고 출력하는 PHP 코드 예제입니다.

$url = 'https://movie.douban.com/subject/1292052/';
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
$html = curl_exec($ch);
curl_close($ch);

// 使用 SimpleXML 解析 HTML 内容
$xml = simplexml_load_string($html);
$ratings = array();
$comments = array();

// 获取影评评分和评论内容
foreach ($xml->xpath('//div[@class="comment-item"]') as $comment) {
    $rating = $comment->div[2]->span[2]->text();
    $comment_content = $comment->div[2]->p->text();
    $ratings[] = (string)$rating;
    $comments[] = (string)$comment_content;
}

// 输出美化的影评信息
echo '<style>table, th, td {border: 1px solid black; border-collapse: collapse;} th, td {padding: 5px;}</style>';
echo '<table><tr><th>评分</th><th>评论内容</th></tr>';
for ($i = 0; $i < count($ratings); $i++) {
    echo '<tr><td>' . $ratings[$i] . '</td><td>' . $comments[$i] . '</td></tr>';
}
echo '</table>';

코드에서 먼저 컬을 사용하여 Douban 영화 페이지의 HTML 콘텐츠를 얻은 다음 SimpleXML을 사용하여 HTML 콘텐츠를 작성하고 영화 리뷰의 평점을 얻습니다.

다음으로 HTML과 CSS를 사용하여 표 스타일 추가, 표 헤더 및 표 내용 설정, for 루프를 사용하여 각 영화 리뷰를 순회하고 평점과 설명을 출력하는 등 출력 내용을 아름답게 만듭니다.

위 코드를 실행하면 아름답게 꾸며진 두반 영화 리뷰 페이지의 영화 리뷰 정보가 출력됩니다.

요약하자면, 이 기사에서는 PHP를 사용하여 Douban 영화 리뷰를 크롤링하는 방법에 대한 튜토리얼을 소개합니다. 학습을 통해 독자는 PHP 및 cURL 기술을 사용하여 웹 페이지에 액세스하고 데이터를 캡처하는 방법은 물론 SimpleXML 확장을 사용하여 HTML 콘텐츠를 구문 분석하고 출력을 아름답게 만드는 방법을 배울 수 있습니다.

위 내용은 PHP를 사용하여 Douban 영화 리뷰를 크롤링하는 방법에 대한 튜토리얼의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

성명:
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.