搜索
首页后端开发php教程php远程抓取网站图片并保存

php远程抓取网站图片并保存

Mar 29, 2018 pm 04:22 PM
php保持图片

本篇文章给大家分享了关于PHP抓取网站图片并且保存的代码,该例子详细的介绍了抓取图片并保存到本地的方法,有需要的朋友可以参考一下

例子,php抓取网站数据的代码。
 

代码示例:

<?php  
/** 
 * 一个用于抓取图片的类 
 * 
 * @package default 
 * @author  WuJunwei 
 */  
class download_image   
{  
      
    public $save_path;  //抓取图片的保存地址  
  
    //抓取图片的大小限制(单位:字节) 只抓比size比这个限制大的图片  
    public $img_size=0;   
  
    //定义一个静态数组,用于记录曾经抓取过的的超链接地址,避免重复抓取         
    public static $a_url_arr=array();     
      
    /** 
     * @param String $save_path    抓取图片的保存地址 
     * @param Int    $img_size     抓取图片的保存地址 
     */  
    public function __construct($save_path,$img_size)  
    {  
        $this->save_path=$save_path;  
        $this->img_size=$img_size;  
    }      
      
    /** 
     * 递归下载抓取首页及其子页面图片的方法  ( recursive 递归) 
     * 
     * @param   String  $capture_url  用于抓取图片的网址 
     *  
     */  
    public function recursive_download_images($capture_url)  
    {  
        if (!in_array($capture_url,self::$a_url_arr))   //没抓取过  
        {                           
            self::$a_url_arr[]=$capture_url;   //计入静态数组  
        } else   //抓取过,直接退出函数  
        {  
            return;  
        }          
          
        $this->download_current_page_images($capture_url);  //下载当前页面的所有图片  
          
        //用@屏蔽掉因为抓取地址无法读取导致的warning错误  
        $content=@file_get_contents($capture_url);   
          
        //匹配a标签href属性中?之前部分的正则  
        $a_pattern = "|<a[^>]+href=[&#39;\" ]?([^ &#39;\"?]+)[&#39;\" >]|U";     
        preg_match_all($a_pattern, $content, $a_out, PREG_SET_ORDER);  
          
        $tmp_arr=array();  //定义一个数组,用于存放当前循环下抓取图片的超链接地址  
        foreach ($a_out as $k => $v)   
        {  
            /** 
             * 去除超链接中的 空&#39;&#39;,&#39;#&#39;,&#39;/&#39;和重复值   
             * 1: 超链接地址的值 不能等于当前抓取页面的url, 否则会陷入死循环 
             * 2: 超链接为&#39;&#39;或&#39;#&#39;,&#39;/&#39;也是本页面,这样也会陷入死循环,   
             * 3: 有时一个超连接地址在一个网页中会重复出现多次,如果不去除,会对一个子页面进行重复下载) 
             */  
            if ( $v[1] && !in_array($v[1],self::$a_url_arr) &&!in_array($v[1],array(&#39;#&#39;,&#39;/&#39;,$capture_url) ) )   
            {  
                $tmp_arr[]=$v[1];  
            }  
        }  
    
        foreach ($tmp_arr as $k => $v)   
        {              
            //超链接路径地址  
            if ( strpos($v, &#39;http://&#39;)!==false ) //如果url包含http://,可以直接访问  
            {  
                $a_url = $v;  
            }else   //否则证明是相对地址, 需要重新拼凑超链接的访问地址  
            {  
                $domain_url = substr($capture_url, 0,strpos($capture_url, &#39;/&#39;,8)+1);  
                $a_url=$domain_url.$v;  
            }  
  
            $this->recursive_download_images($a_url);  
  
        } 
    }   
    /** 
     * 下载当前网页下的所有图片  
     * 
     * @param   String  $capture_url  用于抓取图片的网页地址 
     * @return  Array   当前网页上所有图片img标签url地址的一个数组 
     */  
    public function download_current_page_images($capture_url)  
    {  
        $content=@file_get_contents($capture_url);   //屏蔽warning错误  
  
        //匹配img标签src属性中?之前部分的正则  
        $img_pattern = "|<img[^>]+src=[&#39;\" ]?([^ &#39;\"?]+)[&#39;\" >]|U";     
        preg_match_all($img_pattern, $content, $img_out, PREG_SET_ORDER);  
  
        $photo_num = count($img_out);  
        //匹配到的图片数量  
        echo &#39;<h1>&#39;.$capture_url . "共找到 " . $photo_num . " 张图片</h1>";  
        foreach ($img_out as $k => $v)   
        {  
            $this->save_one_img($capture_url,$v[1]);  
        }  
    }
  
    /** 
     * 保存单个图片的方法  
     * 
     * @param String $capture_url   用于抓取图片的网页地址 
     * @param String $img_url       需要保存的图片的url 
     *  
     */  
    public function save_one_img($capture_url,$img_url)  
    {          
        //图片路径地址  
        if ( strpos($img_url, &#39;http://&#39;)!==false )   
        {  
            // $img_url = $img_url;  
        }else     
        {  
            $domain_url = substr($capture_url, 0,strpos($capture_url, &#39;/&#39;,8)+1);  
            $img_url=$domain_url.$img_url;  
        }             
        $pathinfo = pathinfo($img_url);    //获取图片路径信息          
        $pic_name=$pathinfo[&#39;basename&#39;];   //获取图片的名字  
        if (file_exists($this->save_path.$pic_name))  //如果图片存在,证明已经被抓取过,退出函数  
        {  
            echo $img_url . &#39;<span style="color:red;margin-left:80px">该图片已经抓取过!</span><br/>&#39;;   
            return;  
        }                  
        //将图片内容读入一个字符串  
        $img_data = @file_get_contents($img_url);   //屏蔽掉因为图片地址无法读取导致的warning错误  
        if ( strlen($img_data) > $this->img_size )   //下载size比限制大的图片  
        {  
            $img_size = file_put_contents($this->save_path . $pic_name, $img_data);  
            if ($img_size)  
            {  
                echo $img_url . &#39;<span style="color:green;margin-left:80px">图片保存成功!</span><br/>&#39;;  
            } else  
            {  
                echo $img_url . &#39;<span style="color:red;margin-left:80px">图片保存失败!</span><br/>&#39;;  
            }  
        } else  
        {  
            echo $img_url . &#39;<span style="color:red;margin-left:80px">图片读取失败!</span><br/>&#39;;  
        }   
    }   
} // END  
  
set_time_limit(120);     //设置脚本的最大执行时间  根据情况设置   
$download_img=new download_image(&#39;E:/images/&#39;,0);   //实例化下载图片对象  
$download_img->recursive_download_images(&#39;http://www.jbxue.com/&#39;); //递归抓取图片方法  
//$download_img->download_current_page_images($_POST[&#39;capture_url&#39;]); //只抓取当前页面图片方法  
?>

相关推荐:

从某网站抓取图片并自动下载到文件夹内

PHP抓取图片的具体实现方法_PHP教程

使用PHP的Snoopy类抓取图片_PHP教程

以上是php远程抓取网站图片并保存的详细内容。更多信息请关注PHP中文网其他相关文章!

声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
PHP的目的:构建动态网站PHP的目的:构建动态网站Apr 15, 2025 am 12:18 AM

PHP用于构建动态网站,其核心功能包括:1.生成动态内容,通过与数据库对接实时生成网页;2.处理用户交互和表单提交,验证输入并响应操作;3.管理会话和用户认证,提供个性化体验;4.优化性能和遵循最佳实践,提升网站效率和安全性。

PHP:处理数据库和服务器端逻辑PHP:处理数据库和服务器端逻辑Apr 15, 2025 am 12:15 AM

PHP在数据库操作和服务器端逻辑处理中使用MySQLi和PDO扩展进行数据库交互,并通过会话管理等功能处理服务器端逻辑。1)使用MySQLi或PDO连接数据库,执行SQL查询。2)通过会话管理等功能处理HTTP请求和用户状态。3)使用事务确保数据库操作的原子性。4)防止SQL注入,使用异常处理和关闭连接来调试。5)通过索引和缓存优化性能,编写可读性高的代码并进行错误处理。

您如何防止PHP中的SQL注入? (准备的陈述,PDO)您如何防止PHP中的SQL注入? (准备的陈述,PDO)Apr 15, 2025 am 12:15 AM

在PHP中使用预处理语句和PDO可以有效防范SQL注入攻击。1)使用PDO连接数据库并设置错误模式。2)通过prepare方法创建预处理语句,使用占位符和execute方法传递数据。3)处理查询结果并确保代码的安全性和性能。

PHP和Python:代码示例和比较PHP和Python:代码示例和比较Apr 15, 2025 am 12:07 AM

PHP和Python各有优劣,选择取决于项目需求和个人偏好。1.PHP适合快速开发和维护大型Web应用。2.Python在数据科学和机器学习领域占据主导地位。

PHP行动:现实世界中的示例和应用程序PHP行动:现实世界中的示例和应用程序Apr 14, 2025 am 12:19 AM

PHP在电子商务、内容管理系统和API开发中广泛应用。1)电子商务:用于购物车功能和支付处理。2)内容管理系统:用于动态内容生成和用户管理。3)API开发:用于RESTfulAPI开发和API安全性。通过性能优化和最佳实践,PHP应用的效率和可维护性得以提升。

PHP:轻松创建交互式Web内容PHP:轻松创建交互式Web内容Apr 14, 2025 am 12:15 AM

PHP可以轻松创建互动网页内容。1)通过嵌入HTML动态生成内容,根据用户输入或数据库数据实时展示。2)处理表单提交并生成动态输出,确保使用htmlspecialchars防XSS。3)结合MySQL创建用户注册系统,使用password_hash和预处理语句增强安全性。掌握这些技巧将提升Web开发效率。

PHP和Python:比较两种流行的编程语言PHP和Python:比较两种流行的编程语言Apr 14, 2025 am 12:13 AM

PHP和Python各有优势,选择依据项目需求。1.PHP适合web开发,尤其快速开发和维护网站。2.Python适用于数据科学、机器学习和人工智能,语法简洁,适合初学者。

PHP的持久相关性:它还活着吗?PHP的持久相关性:它还活着吗?Apr 14, 2025 am 12:12 AM

PHP仍然具有活力,其在现代编程领域中依然占据重要地位。1)PHP的简单易学和强大社区支持使其在Web开发中广泛应用;2)其灵活性和稳定性使其在处理Web表单、数据库操作和文件处理等方面表现出色;3)PHP不断进化和优化,适用于初学者和经验丰富的开发者。

See all articles

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
4 周前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳图形设置
4 周前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您听不到任何人,如何修复音频
4 周前By尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解锁Myrise中的所有内容
1 个月前By尊渡假赌尊渡假赌尊渡假赌

热工具

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

Atom编辑器mac版下载

Atom编辑器mac版下载

最流行的的开源编辑器

VSCode Windows 64位 下载

VSCode Windows 64位 下载

微软推出的免费、功能强大的一款IDE编辑器

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

DVWA

DVWA

Damn Vulnerable Web App (DVWA) 是一个PHP/MySQL的Web应用程序,非常容易受到攻击。它的主要目标是成为安全专业人员在合法环境中测试自己的技能和工具的辅助工具,帮助Web开发人员更好地理解保护Web应用程序的过程,并帮助教师/学生在课堂环境中教授/学习Web应用程序安全。DVWA的目标是通过简单直接的界面练习一些最常见的Web漏洞,难度各不相同。请注意,该软件中