關於數據導出超時的問題
- WBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWB原創
- 2016-08-15 16:49:571396瀏覽
實際工作中，我們常常匯出報表的需求，當匯出資料量過大的時候，常常會遇到逾時和記憶體溢位的問題。
解決方案一
超時可用: set_time_limit(0) 解決。
記憶體溢位可用: ini_set('memory_limit', '自訂記憶體')。
解決方案二
優化程序，利用資料庫或檔案來快取中間結果。
解決方案三
利用Ajax分多次請求，寫入文件，下載文件，效果如上圖（效果圖為gif，無法上傳，請用下面鏈接查看）。
（方案三）提供一個Demo
設計思路
1. 我們將其拆成100次請求，請求成功，進度條前進1%。
2. 每次請求都需要寫入文件，然後對文件進行追加寫入。
3. 當檔案寫入完畢後，顯示下載按鈕 ，點選下載即可。
功能點
1. 兩種進度條樣式。
2. Jquery Ajax。
3. 資料寫入CSV。
4. 下載檔案。
頁面樣式：Bootstrap。
程式碼如下：<?php <br />
/**<br>
* 匯出CSV檔案<br>
* @param array $data 資料<br>
* @param array $header_data 首行資料<br>
* @param string $file_name 檔案名稱<br>
* @param int $type 地
* @return string<br>
*/<br>
function _export_csv($data = [], $header_data = [], $file_name = '', $type = 0)<br>
{<br>
$fp = fopen($file_name, 'a+');<br>
if (($type != 1) && !empty($header_data)) {<br>
foreach ($header_data as $key => $value) {<br>
$header_data[$key] = iconv('utf-8', 'gbk', $value);<br>
}<br>
fputcsv($fp, $header_data);<br>
}<br>
$num = 0;<br>
//每隔$limit行，以刷新輸出buffer，不要太大，不要太小<br>
$limit = 100000;<br>
//逐行取出數據，且不浪費記憶體<br>
$count = count($data);<br>
if ($count > 0) {<br>
for ($i = 0; $i
$num++;<br>
//刷新輸出buffer，以防止因資料過多而造成問題<br>
if ($limit == $num) {<br>
ob_flush();<br>
flush();<br>
$num = 0;<br>
}<br>
$row = $data[$i];<br>
foreach ($row as $key => $value) {<br> $row[$key] = iconv('utf-8', 'gbk', $value);<br>
}<br>
fputcsv($fp, $row);<br>
}<br>
}<br>
fclose($fp);<br>
}<br>
<br>
/**<br>
* 下載檔案<br>
* @param string $file_url 檔案位址<br>
* @return string<br>
*/<br>
函數_download_file($file_url='')<br>
{<br>
if (!isset($file_url) || trim($file_url)=='') {<br>
die('檔案 URL 為空白。');<br>
}<br>
如果 (!file_exists($file_url)) {<br>
die('文件不存在。');<br>
}<br>
$file_name = 'down_'.date('YmdHis', time());<br>
$file_type = fopen($file_url,'r'); //開啟檔案<br>
//輸入檔案標籤<br>
header(“內容類型：應用程式/八位元組流”);<br>
header("接受範圍：位元組");<br>
header("接受長度：".filesize($file_url));<br>
header("內容處置：附件；檔案名稱=".$file_name);<br>
//輸出檔案內容<br>
echo fread($file_type, filesize($file_url));<br>
fclose($file_type);<br>
}<br>
<br>
//以後是邏輯程式碼，大家可以依照自己的需求進行編寫。 <br>
$path='文件的絕對地址'; //路徑是擱置文件的絕對位址。 <br>
if (isset($_POST['start'])) {<br>
// 每個單獨的請求，以確保檔案名稱為唯一的，因為後面要繼續進行追加。 <br>
$file_name = 'demo.csv';<br>
//取得數據，並依照自己的業務邏輯，到資料庫取得資料。 <br>
$data = [];<br>
$header_data=['執行時間','隨機數']; //首行數據，表頭<br>
//類比資料如下：<br>
對於（$i=0；$i
$data[$i]['time'] = date('Y-m-d H:i:s', time());<br>
$data[$i]['num'] = mt_rand(1000,9999);<br>
}<br>
$type = ($_POST['start'] !='0') ? 1 : 0 ;<br>
//開始將資料寫入檔案<br>
_export_csv($data, $header_data, $path.$file_name, $type);<br>
//假設第100次寫入完畢，那麼就可以進行下載檔案囉。 <br>
//可以先获取需要导出的总量，然后根据实际情况进行拆分数据，每次获取成功，进度条会显示进度。<br>
if ($_POST['start'] == 100) {<br>
die(json_encode(['code' => 'ok', 'file_path' => '/index.php?op=down&f='.$file_name]));<br>
} else {<br>
die(json_encode(['code' => 'no']));<br>
}<br>
}<br>
<br>
//简单的导出逻辑，可根据实际情况，进行开发。<br>
if (($_GET['op'] == 'down') && !empty($_GET['f'])) {<br>
_download_file($path.$_GET['f']);<br>
exit;<br>
}<br>
?><br>
<!DOCTYPE html><br>
<html lang="zh-CN"><br>
<head><br>
<meta charset="utf-8"><br>
<meta http-equiv="X-UA-Compatible" content="IE=edge"><br>
<meta name="viewport" content="width=device-width, initial-scale=1"><br>
<meta name="description" content="Demo"><br>
<meta name="keywords" content=""><br>
<!-- 新 Bootstrap 核心 CSS 文件 --><br>
<link rel="stylesheet" href="//cdn.bootcss.com/bootstrap/3.3.5/css/bootstrap.min.css"><br>
<!-- jQuery --><br>
<script src="//cdn.bootcss.com/jquery/1.11.3/jquery.min.js"></script><br>
<!-- Title --><br>
<title>Demo</title><br>
</head><br>
<body><br>
<div class="container"><br>
<div class="row"><br>
<div class="col-lg-12" style="margin-top:20px"><br>
<a id="export_file" href="javascript:void(0);" class="btn btn-primary btn-lg active" role="button">导出CSV文件</a><br>
<a id="download_file" style="display:none;" href="javascript:void(0);" class="btn btn-default btn-lg active" role="button">下载文件</a><br>
</div><br>
</div><br>
<br>
<div id="process_one" class="row" style="display:none"><br>
<div class="col-lg-12" style="margin-top:20px"><br>
<div class="progress"><br>
<div id="progress-bar-one" class="progress-bar progress-bar-striped active" role="progressbar" aria-valuemin="0" aria-valuemax="100" style="width: 0%"><br>
</div><br>
</div><br>
</div><br>
</div><br>
<br>
<div id="process_two" class="row" style="display:none"><br>
<div class="col-lg-12" style="margin-top:20px"><br>
<div class="progress"><br>
<div id="progress-bar-two" class="progress-bar" role="progressbar" aria-valuemin="0" aria-valuemax="100" style="width: 0%;"><br>
60%<br>
</div><br>
</div><br>
</div><br>
</div><br>
</div><br>
<script><br />
$(document).ready(function () {<br />
//匯出CSV檔案<br />
$("#export_file").click(function(){<br />
_get_data(0);<br />
});<br />
<br />
//以取得資料的方法<br />
function _get_data(start)<br />
{<br />
$.ajax({<br />
type: "POST",<br />
url : 'index.php',<br />
data: {<br />
'start』 : start<br />
},<br />
async: true,<br />
dataType: "json",<br />
beforeSend: function () {<br />
$("#download_file").css('display', 'none');<br />');<br />');<br />');<br />');<br />');<br />');<br />');<br />');<br />');<br />');
$("#process_one").show();<br /> $("#process_one").show();🎜
$("#process_two").show();🎜
},🎜
success: function (result) {🎜
if (result.code == 'ok'))
地$file("#download_$file").show();🎜
$ );
會
} else {🎜 開始使用式++；<br />
_以資料(開始);
地$("#progress-$bar-two").html(
}<br />
},<br />
且為 函數（）{<br />
Alert("伺服器錯誤/");<br />~");<br />~
}<br />
});<br />
}<br />
});<br />
</腳本><br />
</身體><br />
</script>