实际工作中,我们经常导出报表的需求,当导出数据量过大的时候,经常会遇到超时和内存溢出的问题。
解决方案一
超时可用: set_time_limit(0) 解决。
内存溢出可用: ini_set('memory_limit', '自定义内存')。
解决方案二
优化程序,利用数据库或文件来缓存中间结果。
解决方案三
利用Ajax分多次请求,写入文件,下载文件,效果如上图(效果图为gif,无法上传,请用下面链接查看)。
(方案三)为大家提供一个Demo
设计思路
1. 我们将其拆成100次请求,请求成功,进度条前进1%。
2. 每次请求都需要写入文件,然后对文件进行追加写入。
3. 当文件写入完毕后,显示下载按钮 ,点击下载即可。
功能点
1. 两种进度条样式。
2. Jquery Ajax。
3. 数据写入CSV。
4. 下载文件。
页面样式:Bootstrap。
代码如下:<?php <br />
/**<br>
* 导出CSV文件<br>
* @param array $data 数据<br>
* @param array $header_data 首行数据<br>
* @param string $file_name 文件名称<br>
* @param int $type 类别<br>
* @return string<br>
*/<br>
function _export_csv($data = [], $header_data = [], $file_name = '', $type = 0)<br>
{<br>
$fp = fopen($file_name, 'a+');<br>
if (($type != 1) && !empty($header_data)) {<br>
foreach ($header_data as $key => $value) {<br>
$header_data[$key] = iconv('utf-8', 'gbk', $value);<br>
}<br>
fputcsv($fp, $header_data);<br>
}<br>
$num = 0;<br>
//每隔$limit行,刷新一下输出buffer,不要太大,也不要太小<br>
$limit = 100000;<br>
//逐行取出数据,不浪费内存<br>
$count = count($data);<br>
if ($count > 0) {<br>
for ($i = 0; $i
$num++;<br>
//刷新一下输出buffer,防止由于数据过多造成问题<br>
if ($limit == $num) {<br>
ob_flush();<br>
flush();<br>
$num = 0;<br>
}<br>
$row = $data[$i];<br>
foreach ($row as $key => $value) {<br>
$row[$key] = iconv('utf-8', 'gbk', $value);<br>
}<br>
fputcsv($fp, $row);<br>
}<br>
}<br>
fclose($fp);<br>
}<br>
<br>
/**<br>
* 下载文件<br>
* @param string $file_url 文件地址<br>
* @return string<br>
*/<br>
function _download_file ($file_url = '')<br>
{<br>
if (!isset($file_url) || trim($file_url)=='') {<br>
die('File URL is empty.');<br>
}<br>
if (!file_exists($file_url)) {<br>
die('File does not exist.');<br>
}<br>
$file_name = 'down_'.date('YmdHis', time());<br>
$file_type = fopen($file_url,'r'); //打开文件<br>
//输入文件标签<br>
header("Content-type: application/octet-stream");<br>
header("Accept-Ranges: bytes");<br>
header("Accept-Length: ".filesize($file_url));<br>
header("Content-Disposition: attachment; filename=".$file_name);<br>
//输出文件内容<br>
echo fread($file_type, filesize($file_url));<br>
fclose($file_type);<br>
}<br>
<br>
//以后是逻辑代码,大家可以根据自己的需求进行编写。<br>
$path = '文件的绝对地址'; //path 是存放文件的绝对地址。<br>
if (isset($_POST['start'])) {<br>
//每一个单独的请求,要保证文件名是唯一的,因为后面要继续进行追加。<br>
$file_name = 'demo.csv';<br>
//获取数据,根据自己的业务逻辑,去数据库获取数据。<br>
$data = [];<br>
$header_data = ['执行时间', '随机数']; //首行数据,表头<br>
//模拟数据如下:<br>
for ($i=0; $i
$data[$i]['time'] = date('Y-m-d H:i:s', time());<br>
$data[$i]['num'] = mt_rand(1000,9999);<br>
}<br>
$type = ($_POST['start'] != '0') ? 1 : 0 ;<br>
//开始将数据写入到文件中<br>
_export_csv($data, $header_data, $path.$file_name, $type);<br>
//假设第100次 写入完毕,那么就可以进行下载文件啦。<br>
//可以先获取需要导出的总量,然后根据实际情况进行拆分数据,每次获取成功,进度条会显示进度。<br>
if ($_POST['start'] == 100) {<br>
die(json_encode(['code' => 'ok', 'file_path' => '/index.php?op=down&f='.$file_name]));<br>
} else {<br>
die(json_encode(['code' => 'no']));<br>
}<br>
}<br>
<br>
//简单的导出逻辑,可根据实际情况,进行开发。<br>
if (($_GET['op'] == 'down') && !empty($_GET['f'])) {<br>
_download_file($path.$_GET['f']);<br>
exit;<br>
}<br>
?><br>
nbsp;html><br>
<br>
<br>
<meta>
<br>
<meta>
<br>
<meta>
<br>
<meta>
<br>
<meta>
<br>
<!-- 新 Bootstrap 核心 CSS 文件 --><br>
<link>
<br>
<!-- jQuery --><br>
<script></script><br>
<!-- Title --><br>
<title>Demo</title>
<br>
<br>
<br>
<div>
<br>
<div>
<br>
<div>
<br>
<a>导出CSV文件</a><br>
<a>下载文件</a><br>
</div>
<br>
</div>
<br>
<br>
<div>
<br>
<div>
<br>
<div>
<br>
<div>
<br>
</div>
<br>
</div>
<br>
</div>
<br>
</div>
<br>
<br>
<div>
<br>
<div>
<br>
<div>
<br>
<div>
<br>
60%<br>
</div>
<br>
</div>
<br>
</div>
<br>
</div>
<br>
</div>
<br>
<script><br />
$(document).ready(function () {<br />
//导出CSV文件<br />
$("#export_file").click(function(){<br />
_get_data(0);<br />
});<br />
<br />
//获取数据的方法<br />
function _get_data(start)<br />
{<br />
$.ajax({<br />
type: "POST",<br />
url : 'index.php',<br />
data: {<br />
'start' : start<br />
},<br />
async: true,<br />
dataType: "json",<br />
beforeSend: function () {<br />
$("#download_file").css('display', 'none');<br />
$("#process_one").show();<br />
$("#process_two").show();<br />
},<br />
success: function (result) {<br />
if (result.code == 'ok') {<br />
$("#download_file").show();<br />
$("#download_file").attr("href", result.file_path);<br />
$("#process_one").css('display', 'none');<br />
$("#process_two").css('display', 'none');<br />
} else {<br />
start ++;<br />
_get_data(start);<br />
$("#progress-bar-one").css("width", start+'%');<br />
$("#progress-bar-two").css("width", start+'%');<br />
$("#progress-bar-two").html(start+'%');<br />
}<br />
},<br />
error: function() {<br />
alert("Server Error~");<br />
}<br />
});<br />
}<br />
});<br />
</script><br>
<br>
温馨提示:
Demo 仅供参考,具体开发,请根据需求,严谨处理。
Thanks ~
来源:http://mp.weixin.qq.com/s?__biz=MjM5NDM4MDIwNw==&mid=2448834649&idx=1&sn=3be1ef996a9fcf3f4082decd6434a048#rd
更多【干货分享】,请关注我的个人订阅号。