Home >php教程 >php手册 >linux下php实现多线程

linux下php实现多线程

WBOY
WBOYOriginal
2016-06-13 10:51:01803browse

今天遇到个问题,写了个程序从网上抓了150000个图片的地址,存到了txt文档中,每行存了一个图片的地址。现在想将图片下载下来,保存到本机,但是下载的速度不是很快,所以用到了php在linux下面实现多线程,首先将txt文件拆成了10个大小相等的文件,每个文件存储了15000条图片的地址,同时开启10个进行运行保存图片的程序,这样的时间可能就只是原来的1/10。下面将程序贴出来 ,大家指导一下有没有更好的方法。

 
 
01
71     function for_save_img($num)
02
 72     {
03
 73         for($i = 0; $i 04
 74         {
05
 75             system("/usr/local/bin/php index.php crawl save_img {$i} & > /tmp/null");
06
 76         }
07
 77     }
08
 78
09
 79     function save_img($num)
10
 80     {
11
 81         static $i = 0;
12
 82         //把文件读成一个数组
13
 83         $img_urllists = ROOTDIRPATH . "/static/image_{$num}.txt";
14
 84         $arr_img_url = file($img_urllists);
15
 85         foreach($arr_img_url as $imageurl)
16
 86         {
17
 87             $imageurl = trim($imageurl);
18
 88             echo $imageurl;
19
 89             $this->benchmark->mark("code_start");
20
 90             //存图片
21
 91             $final_imageurl = "http://www.****.com/upload/UploadFile/" . $imageurl;
22
 92             $img_open = file_get_contents($final_imageurl);
23
 93             $ret = file_put_contents(ROOTDIRPATH . '/static/uploadimg/' . $imageurl, $img_open);
24
 94             if($ret)
25
 95             {
26
 96                 echo "Success......";
27
 97             }
28
 98             $this->benchmark->mark('code_end');
29
 99
30
100             echo $this->benchmark->elapsed_time('code_start', 'code_end');
31
101         }
32
102     }
33
 
34
 
35
该程序为ci框架下  在linux的shell下 网站的根目录运行   php index.php crawl for_save_img
36
大家有好的建议欢迎提出 虚心接受
作者:岳冠群

Statement:
The content of this article is voluntarily contributed by netizens, and the copyright belongs to the original author. This site does not assume corresponding legal responsibility. If you find any content suspected of plagiarism or infringement, please contact admin@php.cn