首页  >  文章  >  后端开发  >  PHP读取文件速度怎样优化

PHP读取文件速度怎样优化

不言
不言原创
2018-05-19 10:10:582646浏览

各位前辈好,  
小弟要读取一个大的log文件到该有一百六十万行  
请问小弟改如何优化读文件的速度呢 ?  
因为小弟要读取然后写进数据库。  
小弟现在使用的fopen,fget这样来读。  
请前辈赐教。  
谢谢。

回复讨论(解决方案)

fgets 读一行  
如果还嫌慢,那就:  
fread 读一块(2048 或 更大)  
读后按行切割  
处理时保留最后一个不处理, 与下一次读取的内容连接后再处理

最快的方法是使用 loadfile in 指令直接加载到临时表,然后再处理

前辈能给代码示范吗?  
非常感谢。  

$fn = &#39;文件名&#39;;$fp = fopen($fn, &#39;r&#39;);$last = &#39;&#39;;while(! feof($fp)) {  $a = preg_split("/[\r\n]+/", $last . frenad($fp, 2048));  for($i=0; $i<count($a)-1; $i++) {     对数据的处理  }  $last = $a[$i];}if($last) 对数据的处理

使用fread读取一块可以提升速度。  

谢谢前辈帮助。

声明:
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn