《PHP實(shí)例：PHP讀取大文件的幾種方法介紹》要點(diǎn)：
本文介紹了PHP實(shí)例：PHP讀取大文件的幾種方法介紹，希望對(duì)您有用。如果有疑問(wèn)，可以聯(lián)系我們。
讀取大文件一直是一個(gè)頭痛的問(wèn)題,我們像使用php開(kāi)發(fā)讀取小文件可以直接使用各種函數(shù)實(shí)現(xiàn),但一到大文章就會(huì)發(fā)現(xiàn)常用的方法是無(wú)法正常使用或時(shí)間太長(zhǎng)太卡了,下面我們就一起來(lái)看看關(guān)于php讀取大文件問(wèn)題解決辦法,希望例子能幫助到各位.
PHP實(shí)戰(zhàn)
場(chǎng)景：PHP讀取超大文件,例如1G的日志文件,我這里使用的是400M的access.log文件PHP實(shí)戰(zhàn)
1、使用file直接讀取
PHP實(shí)戰(zhàn)
<?php
$starttime=microtime_float();
ini_set('memory_limit', '-1');
$file = 'testfile.txt';
$data = file($file);
$line = $data[count($data) - 1000];
$endtime=microtime_float();
echo count($data),"<br/>";
echo $endtime-$starttime;
function microtime_float(){
list($usec, $sec) = explode(" ", microtime());
return ((float)$usec + (float)$sec);
}
?>
運(yùn)行結(jié)果：10127784 行?? 共使用了,7.8764359951s
PHP實(shí)戰(zhàn)
我的電腦是3G內(nèi)存,此方法不是推薦使用,因?yàn)樾枰盐募枯d入內(nèi)存PHP實(shí)戰(zhàn)
2、使用linux命令? tail
PHP實(shí)戰(zhàn)
<?php
$starttime=microtime_float();
$file = 'testfile.txt';
$file = escapeshellarg($file); // 對(duì)命令行參數(shù)進(jìn)行安全轉(zhuǎn)義
$line = `tail -n 100 $file`;
echo $line,"<br/>";
$endtime=microtime_float();
echo $endtime-$starttime;
function microtime_float(){
list($usec, $sec) = explode(" ", microtime());
return ((float)$usec + (float)$sec);
}
//end
運(yùn)行結(jié)果：只使用了幾毫秒、輕松搞定、這種方法不能在windows下使用PHP實(shí)戰(zhàn)
3、使用fseek函數(shù)PHP實(shí)戰(zhàn)
這種方式是最為普遍的方式,它不需要將文件的內(nèi)容全部讀入內(nèi)容,因?yàn)镻HP是C寫(xiě)的,所以實(shí)現(xiàn)的時(shí)候也類(lèi)似C讀取文件,通過(guò)指針的移動(dòng),所以效率是相當(dāng)高效的.在使用fseek來(lái)對(duì)文件進(jìn)行操作時(shí),也有多種不同的方法,效率可能也是略有差別的,PHP實(shí)戰(zhàn)
下面是常用的幾種方法
PHP實(shí)戰(zhàn)
方法一：使用fopen打開(kāi)文件(從文件指針資源句柄)
PHP實(shí)戰(zhàn)
<?php
$starttime=microtime_float();
$file = 'testfile.txt';
$fp = fopen($file, "r+");
$line = 100;
$pos = -2;
$t =$data="";
while ($line > 0)
{
while ($t != "\n") //換行符
{
fseek($fp, $pos, SEEK_END);//移動(dòng)指針
$t = fgetc($fp);//獲取一個(gè)字符
$pos--;//向前偏移
}
$t = "";
$data = fgets($fp);//獲取當(dāng)前行的數(shù)據(jù)
$line--;
}
fclose($fp);
echo $data,"<br/>";
$endtime=microtime_float();
echo $endtime-$starttime;
function microtime_float(){
list($usec, $sec) = explode(" ", microtime());
return ((float)$usec + (float)$sec);
}
?>
運(yùn)行結(jié)果：0.338493108749PHP實(shí)戰(zhàn)
方法二：一塊一塊的讀取PHP實(shí)戰(zhàn)
<?php
$starttime=microtime_float();
$file = 'testfile.txt';
$fp = fopen($file, "r");
$num = 10;
$chunk = 4096;//4K的塊
$fs = sprintf("%u", filesize($file));
$readData='';
$max = (intval($fs) == PHP_INT_MAX) ? PHP_INT_MAX : $fs;
for($len = 0; $len < $max; $len += $chunk){
$seekSize = ($max - $len > $chunk) ? $chunk : $max - $len;
fseek($fp, ($len + $seekSize) * -1, SEEK_END);
$readData = fread($fp, $seekSize) . $readData;
if (substr_count($readData, "\n") >= $num + 1) {
$ns=substr_count($readData, "\n")-$num+2;
preg_match('/(.*?\n){'.$ns.'}/',$readData,$match);
$data = $match[1];
break;
}
}
fclose($fp);
echo $data,"<br/>";
$endtime=microtime_float();
echo $endtime-$starttime;
function microtime_float(){
list($usec, $sec) = explode(" ", microtime());
return ((float)$usec + (float)$sec);
}
?>
運(yùn)行時(shí)間：0.00199198722839
PHP實(shí)戰(zhàn)
使用fgets函數(shù),一行一行讀取PHP實(shí)戰(zhàn)
<?php
$file = fopen("testfile.txt","r");
while(!feof($file))
{
echo fgets($file);
}
fclose($file);
spl庫(kù)函數(shù)PHP實(shí)戰(zhàn)
<?php
try{
foreach( new SplFileObject('testfile.txt') as $line)
echo $line.'<br />';
}catch (Exception $e){
echo $e->getMessage();
}
另外網(wǎng)上有很多按照塊讀取文件的,有興趣的讀者可以試試,我試了沒(méi)成功,好像必須含有換行符“\n”才可以.PHP實(shí)戰(zhàn)
以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持維易PHP.PHP實(shí)戰(zhàn)
轉(zhuǎn)載請(qǐng)注明本頁(yè)網(wǎng)址：
http://www.fzlkiss.com/jiaocheng/2938.html
