本篇文章主要介紹了幾種基於PHP讀取大檔案的方法，主要有3種方法。有興趣的朋友可以參考一下。
讀取大檔案一直是一個頭痛的問題，我們像使用php開發讀取小檔案可以直接使用各種函數實現，但一到大文章就會發現常用的方法是無法正常使用或時間太長太卡了，下面我們就一起來看看關於php讀取大檔案問題解決方法，希望例子能幫助到各位。
場景：PHP讀取超大文件，例如1G的日誌文件，我這裡使用的是400M的access.log文件
1、使用file直接讀取
<?php
$starttime=microtime_float();
ini_set('memory_limit', '-1');
$file = 'testfile.txt';
$data = file($file);
$line = $data[count($data) - 1000];
$endtime=microtime_float();
echo count($data),"<br/>";
echo $endtime-$starttime;
function microtime_float(){
list($usec, $sec) = explode(" ", microtime());
return ((float)$usec + (float)$sec);
}
?>運行結果：10127784 行 共使用了，7.8764359951s
我的電腦是3G內存，此方法不是推薦使用，因為需要把檔案全部載入記憶體
2、使用linux指令 tail
<?php
$starttime=microtime_float();
$file = 'testfile.txt';
$file = escapeshellarg($file); // 对命令行参数进行安全转义
$line = `tail -n 100 $file`;
echo $line,"<br/>";
$endtime=microtime_float();
echo $endtime-$starttime;
function microtime_float(){
list($usec, $sec) = explode(" ", microtime());
return ((float)$usec + (float)$sec);
}
//end在運行結果：只使用了幾毫秒、輕鬆搞定、這種方法不能在windows下使用
3、使用fseek函數
這種方式是最為普遍的方式，它不需要將文件的內容全部讀入內容，因為PHP是C寫的，所以實現的時候也類似C讀取文件，透過指標的移動，所以效率是相當有效率的。在使用fseek對檔案進行操作時，也有多種不同的方法，效率可能也是略有差別的，
#下面是常用的幾種方法
<?php
$starttime=microtime_float();
$file = 'testfile.txt';
$fp = fopen($file, "r+");
$line = 100;
$pos = -2;
$t =$data="";
while ($line > 0)
{
while ($t != "\n") //换行符
{
fseek($fp, $pos, SEEK_END);//移动指针
$t = fgetc($fp);//获取一个字符
$pos--;//向前偏移
}
$t = "";
$data = fgets($fp);//获取当前行的数据
$line--;
}
fclose($fp);
echo $data,"<br/>";
$endtime=microtime_float();
echo $endtime-$starttime;
function microtime_float(){
list($usec, $sec) = explode(" ", microtime());
return ((float)$usec + (float)$sec);
}
?><?php
$starttime=microtime_float();
$file = 'testfile.txt';
$fp = fopen($file, "r");
$num = 10;
$chunk = 4096;//4K的块
$fs = sprintf("%u", filesize($file));
$readData='';
$max = (intval($fs) == PHP_INT_MAX) ? PHP_INT_MAX : $fs;
for($len = 0; $len < $max; $len += $chunk){
$seekSize = ($max - $len > $chunk) ? $chunk : $max - $len;
fseek($fp, ($len + $seekSize) * -1, SEEK_END);
$readData = fread($fp, $seekSize) . $readData;
if (substr_count($readData, "\n") >= $num + 1) {
$ns=substr_count($readData, "\n")-$num+2;
preg_match('/(.*?\n){'.$ns.'}/',$readData,$match);
$data = $match[1];
break;
}
}
fclose($fp);
echo $data,"<br/>";
$endtime=microtime_float();
echo $endtime-$starttime;
function microtime_float(){
list($usec, $sec) = explode(" ", microtime());
return ((float)$usec + (float)$sec);
}
?>#
<?php
$file = fopen("testfile.txt","r");
while(!feof($file))
{
echo fgets($file);
}
fclose($file);<?php
try{
foreach( new SplFileObject('testfile.txt') as $line)
echo $line.'<br />';
}catch (Exception $e){
echo $e->getMessage();
}##
以上是PHP讀取大檔案的幾個方法的詳細內容。更多資訊請關注PHP中文網其他相關文章！
