cari
Rumahpembangunan bahagian belakangtutorial phpphp远程抓取网站图片并保存

php远程抓取网站图片并保存

Mar 29, 2018 pm 04:22 PM
phpsimpangambar

本篇文章给大家分享了关于PHP抓取网站图片并且保存的代码,该例子详细的介绍了抓取图片并保存到本地的方法,有需要的朋友可以参考一下

例子,php抓取网站数据的代码。
 

代码示例:

<?php  
/** 
 * 一个用于抓取图片的类 
 * 
 * @package default 
 * @author  WuJunwei 
 */  
class download_image   
{  
      
    public $save_path;  //抓取图片的保存地址  
  
    //抓取图片的大小限制(单位:字节) 只抓比size比这个限制大的图片  
    public $img_size=0;   
  
    //定义一个静态数组,用于记录曾经抓取过的的超链接地址,避免重复抓取         
    public static $a_url_arr=array();     
      
    /** 
     * @param String $save_path    抓取图片的保存地址 
     * @param Int    $img_size     抓取图片的保存地址 
     */  
    public function __construct($save_path,$img_size)  
    {  
        $this->save_path=$save_path;  
        $this->img_size=$img_size;  
    }      
      
    /** 
     * 递归下载抓取首页及其子页面图片的方法  ( recursive 递归) 
     * 
     * @param   String  $capture_url  用于抓取图片的网址 
     *  
     */  
    public function recursive_download_images($capture_url)  
    {  
        if (!in_array($capture_url,self::$a_url_arr))   //没抓取过  
        {                           
            self::$a_url_arr[]=$capture_url;   //计入静态数组  
        } else   //抓取过,直接退出函数  
        {  
            return;  
        }          
          
        $this->download_current_page_images($capture_url);  //下载当前页面的所有图片  
          
        //用@屏蔽掉因为抓取地址无法读取导致的warning错误  
        $content=@file_get_contents($capture_url);   
          
        //匹配a标签href属性中?之前部分的正则  
        $a_pattern = "|<a[^>]+href=[&#39;\" ]?([^ &#39;\"?]+)[&#39;\" >]|U";     
        preg_match_all($a_pattern, $content, $a_out, PREG_SET_ORDER);  
          
        $tmp_arr=array();  //定义一个数组,用于存放当前循环下抓取图片的超链接地址  
        foreach ($a_out as $k => $v)   
        {  
            /** 
             * 去除超链接中的 空&#39;&#39;,&#39;#&#39;,&#39;/&#39;和重复值   
             * 1: 超链接地址的值 不能等于当前抓取页面的url, 否则会陷入死循环 
             * 2: 超链接为&#39;&#39;或&#39;#&#39;,&#39;/&#39;也是本页面,这样也会陷入死循环,   
             * 3: 有时一个超连接地址在一个网页中会重复出现多次,如果不去除,会对一个子页面进行重复下载) 
             */  
            if ( $v[1] && !in_array($v[1],self::$a_url_arr) &&!in_array($v[1],array(&#39;#&#39;,&#39;/&#39;,$capture_url) ) )   
            {  
                $tmp_arr[]=$v[1];  
            }  
        }  
    
        foreach ($tmp_arr as $k => $v)   
        {              
            //超链接路径地址  
            if ( strpos($v, &#39;http://&#39;)!==false ) //如果url包含http://,可以直接访问  
            {  
                $a_url = $v;  
            }else   //否则证明是相对地址, 需要重新拼凑超链接的访问地址  
            {  
                $domain_url = substr($capture_url, 0,strpos($capture_url, &#39;/&#39;,8)+1);  
                $a_url=$domain_url.$v;  
            }  
  
            $this->recursive_download_images($a_url);  
  
        } 
    }   
    /** 
     * 下载当前网页下的所有图片  
     * 
     * @param   String  $capture_url  用于抓取图片的网页地址 
     * @return  Array   当前网页上所有图片img标签url地址的一个数组 
     */  
    public function download_current_page_images($capture_url)  
    {  
        $content=@file_get_contents($capture_url);   //屏蔽warning错误  
  
        //匹配img标签src属性中?之前部分的正则  
        $img_pattern = "|<img[^>]+src=[&#39;\" ]?([^ &#39;\"?]+)[&#39;\" >]|U";     
        preg_match_all($img_pattern, $content, $img_out, PREG_SET_ORDER);  
  
        $photo_num = count($img_out);  
        //匹配到的图片数量  
        echo &#39;<h1>&#39;.$capture_url . "共找到 " . $photo_num . " 张图片</h1>";  
        foreach ($img_out as $k => $v)   
        {  
            $this->save_one_img($capture_url,$v[1]);  
        }  
    }
  
    /** 
     * 保存单个图片的方法  
     * 
     * @param String $capture_url   用于抓取图片的网页地址 
     * @param String $img_url       需要保存的图片的url 
     *  
     */  
    public function save_one_img($capture_url,$img_url)  
    {          
        //图片路径地址  
        if ( strpos($img_url, &#39;http://&#39;)!==false )   
        {  
            // $img_url = $img_url;  
        }else     
        {  
            $domain_url = substr($capture_url, 0,strpos($capture_url, &#39;/&#39;,8)+1);  
            $img_url=$domain_url.$img_url;  
        }             
        $pathinfo = pathinfo($img_url);    //获取图片路径信息          
        $pic_name=$pathinfo[&#39;basename&#39;];   //获取图片的名字  
        if (file_exists($this->save_path.$pic_name))  //如果图片存在,证明已经被抓取过,退出函数  
        {  
            echo $img_url . &#39;<span style="color:red;margin-left:80px">该图片已经抓取过!</span><br/>&#39;;   
            return;  
        }                  
        //将图片内容读入一个字符串  
        $img_data = @file_get_contents($img_url);   //屏蔽掉因为图片地址无法读取导致的warning错误  
        if ( strlen($img_data) > $this->img_size )   //下载size比限制大的图片  
        {  
            $img_size = file_put_contents($this->save_path . $pic_name, $img_data);  
            if ($img_size)  
            {  
                echo $img_url . &#39;<span style="color:green;margin-left:80px">图片保存成功!</span><br/>&#39;;  
            } else  
            {  
                echo $img_url . &#39;<span style="color:red;margin-left:80px">图片保存失败!</span><br/>&#39;;  
            }  
        } else  
        {  
            echo $img_url . &#39;<span style="color:red;margin-left:80px">图片读取失败!</span><br/>&#39;;  
        }   
    }   
} // END  
  
set_time_limit(120);     //设置脚本的最大执行时间  根据情况设置   
$download_img=new download_image(&#39;E:/images/&#39;,0);   //实例化下载图片对象  
$download_img->recursive_download_images(&#39;http://www.jbxue.com/&#39;); //递归抓取图片方法  
//$download_img->download_current_page_images($_POST[&#39;capture_url&#39;]); //只抓取当前页面图片方法  
?>

相关推荐:

从某网站抓取图片并自动下载到文件夹内

PHP抓取图片的具体实现方法_PHP教程

使用PHP的Snoopy类抓取图片_PHP教程

Atas ialah kandungan terperinci php远程抓取网站图片并保存. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn
PHP dalam Tindakan: Contoh dan aplikasi dunia nyataPHP dalam Tindakan: Contoh dan aplikasi dunia nyataApr 14, 2025 am 12:19 AM

PHP digunakan secara meluas dalam e-dagang, sistem pengurusan kandungan dan pembangunan API. 1) e-dagang: Digunakan untuk fungsi keranjang belanja dan pemprosesan pembayaran. 2) Sistem Pengurusan Kandungan: Digunakan untuk penjanaan kandungan dinamik dan pengurusan pengguna. 3) Pembangunan API: Digunakan untuk Pembangunan API RESTful dan Keselamatan API. Melalui pengoptimuman prestasi dan amalan terbaik, kecekapan dan pemeliharaan aplikasi PHP bertambah baik.

PHP: Membuat kandungan web interaktif dengan mudahPHP: Membuat kandungan web interaktif dengan mudahApr 14, 2025 am 12:15 AM

PHP menjadikannya mudah untuk membuat kandungan web interaktif. 1) Secara dinamik menjana kandungan dengan memasukkan HTML dan paparkannya dalam masa nyata berdasarkan input pengguna atau data pangkalan data. 2) Penyerahan borang proses dan menjana output dinamik untuk memastikan bahawa htmlspecialchars digunakan untuk mencegah XSS. 3) Gunakan MySQL untuk membuat sistem pendaftaran pengguna, dan gunakan kata laluan dan preprocessing untuk meningkatkan keselamatan. Menguasai teknik ini akan meningkatkan kecekapan pembangunan web.

PHP dan Python: Membandingkan dua bahasa pengaturcaraan yang popularPHP dan Python: Membandingkan dua bahasa pengaturcaraan yang popularApr 14, 2025 am 12:13 AM

PHP dan Python masing -masing mempunyai kelebihan mereka sendiri, dan memilih mengikut keperluan projek. 1.PHP sesuai untuk pembangunan web, terutamanya untuk pembangunan pesat dan penyelenggaraan laman web. 2. Python sesuai untuk sains data, pembelajaran mesin dan kecerdasan buatan, dengan sintaks ringkas dan sesuai untuk pemula.

Relevannya PHP: Adakah ia masih hidup?Relevannya PHP: Adakah ia masih hidup?Apr 14, 2025 am 12:12 AM

PHP masih dinamik dan masih menduduki kedudukan penting dalam bidang pengaturcaraan moden. 1) kesederhanaan PHP dan sokongan komuniti yang kuat menjadikannya digunakan secara meluas dalam pembangunan web; 2) fleksibiliti dan kestabilannya menjadikannya cemerlang dalam mengendalikan borang web, operasi pangkalan data dan pemprosesan fail; 3) PHP sentiasa berkembang dan mengoptimumkan, sesuai untuk pemula dan pemaju yang berpengalaman.

Status Semasa PHP: Lihat trend pembangunan webStatus Semasa PHP: Lihat trend pembangunan webApr 13, 2025 am 12:20 AM

PHP tetap penting dalam pembangunan web moden, terutamanya dalam pengurusan kandungan dan platform e-dagang. 1) PHP mempunyai ekosistem yang kaya dan sokongan rangka kerja yang kuat, seperti Laravel dan Symfony. 2) Pengoptimuman prestasi boleh dicapai melalui OPCACHE dan NGINX. 3) Php8.0 memperkenalkan pengkompil JIT untuk meningkatkan prestasi. 4) Aplikasi awan asli dikerahkan melalui Docker dan Kubernet untuk meningkatkan fleksibiliti dan skalabiliti.

PHP vs Bahasa Lain: PerbandinganPHP vs Bahasa Lain: PerbandinganApr 13, 2025 am 12:19 AM

PHP sesuai untuk pembangunan web, terutamanya dalam pembangunan pesat dan memproses kandungan dinamik, tetapi tidak baik pada sains data dan aplikasi peringkat perusahaan. Berbanding dengan Python, PHP mempunyai lebih banyak kelebihan dalam pembangunan web, tetapi tidak sebaik python dalam bidang sains data; Berbanding dengan Java, PHP melakukan lebih buruk dalam aplikasi peringkat perusahaan, tetapi lebih fleksibel dalam pembangunan web; Berbanding dengan JavaScript, PHP lebih ringkas dalam pembangunan back-end, tetapi tidak sebaik JavaScript dalam pembangunan front-end.

PHP vs Python: Ciri dan Fungsi TerasPHP vs Python: Ciri dan Fungsi TerasApr 13, 2025 am 12:16 AM

PHP dan Python masing -masing mempunyai kelebihan sendiri dan sesuai untuk senario yang berbeza. 1.PHP sesuai untuk pembangunan web dan menyediakan pelayan web terbina dalam dan perpustakaan fungsi yang kaya. 2. Python sesuai untuk sains data dan pembelajaran mesin, dengan sintaks ringkas dan perpustakaan standard yang kuat. Apabila memilih, ia harus diputuskan berdasarkan keperluan projek.

PHP: Bahasa utama untuk pembangunan webPHP: Bahasa utama untuk pembangunan webApr 13, 2025 am 12:08 AM

PHP adalah bahasa skrip yang digunakan secara meluas di sisi pelayan, terutamanya sesuai untuk pembangunan web. 1.PHP boleh membenamkan HTML, memproses permintaan dan respons HTTP, dan menyokong pelbagai pangkalan data. 2.PHP digunakan untuk menjana kandungan web dinamik, data borang proses, pangkalan data akses, dan lain -lain, dengan sokongan komuniti yang kuat dan sumber sumber terbuka. 3. PHP adalah bahasa yang ditafsirkan, dan proses pelaksanaan termasuk analisis leksikal, analisis tatabahasa, penyusunan dan pelaksanaan. 4.Php boleh digabungkan dengan MySQL untuk aplikasi lanjutan seperti sistem pendaftaran pengguna. 5. Apabila debugging php, anda boleh menggunakan fungsi seperti error_reporting () dan var_dump (). 6. Mengoptimumkan kod PHP untuk menggunakan mekanisme caching, mengoptimumkan pertanyaan pangkalan data dan menggunakan fungsi terbina dalam. 7

See all articles

Alat AI Hot

Undresser.AI Undress

Undresser.AI Undress

Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover

AI Clothes Remover

Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool

Undress AI Tool

Gambar buka pakaian secara percuma

Clothoff.io

Clothoff.io

Penyingkiran pakaian AI

AI Hentai Generator

AI Hentai Generator

Menjana ai hentai secara percuma.

Artikel Panas

R.E.P.O. Kristal tenaga dijelaskan dan apa yang mereka lakukan (kristal kuning)
3 minggu yang laluBy尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Tetapan grafik terbaik
3 minggu yang laluBy尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Cara Memperbaiki Audio Jika anda tidak dapat mendengar sesiapa
3 minggu yang laluBy尊渡假赌尊渡假赌尊渡假赌
WWE 2K25: Cara Membuka Segala -galanya Di Myrise
4 minggu yang laluBy尊渡假赌尊渡假赌尊渡假赌

Alat panas

Dreamweaver CS6

Dreamweaver CS6

Alat pembangunan web visual

MantisBT

MantisBT

Mantis ialah alat pengesan kecacatan berasaskan web yang mudah digunakan yang direka untuk membantu dalam pengesanan kecacatan produk. Ia memerlukan PHP, MySQL dan pelayan web. Lihat perkhidmatan demo dan pengehosan kami.

DVWA

DVWA

Damn Vulnerable Web App (DVWA) ialah aplikasi web PHP/MySQL yang sangat terdedah. Matlamat utamanya adalah untuk menjadi bantuan bagi profesional keselamatan untuk menguji kemahiran dan alatan mereka dalam persekitaran undang-undang, untuk membantu pembangun web lebih memahami proses mengamankan aplikasi web, dan untuk membantu guru/pelajar mengajar/belajar dalam persekitaran bilik darjah Aplikasi web keselamatan. Matlamat DVWA adalah untuk mempraktikkan beberapa kelemahan web yang paling biasa melalui antara muka yang mudah dan mudah, dengan pelbagai tahap kesukaran. Sila ambil perhatian bahawa perisian ini

MinGW - GNU Minimalis untuk Windows

MinGW - GNU Minimalis untuk Windows

Projek ini dalam proses untuk dipindahkan ke osdn.net/projects/mingw, anda boleh terus mengikuti kami di sana. MinGW: Port Windows asli bagi GNU Compiler Collection (GCC), perpustakaan import yang boleh diedarkan secara bebas dan fail pengepala untuk membina aplikasi Windows asli termasuk sambungan kepada masa jalan MSVC untuk menyokong fungsi C99. Semua perisian MinGW boleh dijalankan pada platform Windows 64-bit.

SecLists

SecLists

SecLists ialah rakan penguji keselamatan muktamad. Ia ialah koleksi pelbagai jenis senarai yang kerap digunakan semasa penilaian keselamatan, semuanya di satu tempat. SecLists membantu menjadikan ujian keselamatan lebih cekap dan produktif dengan menyediakan semua senarai yang mungkin diperlukan oleh penguji keselamatan dengan mudah. Jenis senarai termasuk nama pengguna, kata laluan, URL, muatan kabur, corak data sensitif, cangkerang web dan banyak lagi. Penguji hanya boleh menarik repositori ini ke mesin ujian baharu dan dia akan mempunyai akses kepada setiap jenis senarai yang dia perlukan.