PHP读取超大文件的最后几行

时间:2021-12-30 20:12:49

当一个文件,特别是Linux系统日志大于2个G时,1000多万条数据,如果用file打开返回所有行的数组,系统会直接卡死或者内存爆满。

这时,我们可以用文件指针fseek来定位、fgetc来获取换行符和fgets来获取整行,配合就可以完美的快速获取最后N行


<span style="font-family:Microsoft YaHei;font-size:14px;">/*
获取大文件最后N行方法
原理:
首先通过fseek找到文件的最后一位EOF,然后找最后一行的起始位置,取这一行的数据,再找次一行的起始位置, 再取这一行的位置,依次类推,直到找到了$num行。
*/

$file="F:\access_log";
//$file="log.txt";

var_dump(tail($file,10));

function tail($file,$num){
    $fp = fopen($file,"r");
    $pos = -2;
    $eof = "";
    $head = false;   //当总行数小于Num时,判断是否到第一行了
    $lines = array();
    while($num>0){
        while($eof != "\n"){
            if(fseek($fp, $pos, SEEK_END)==0){    //fseek成功返回0,失败返回-1
                $eof = fgetc($fp);
                $pos--;
            }else{                               //当到达第一行,行首时,设置$pos失败
                fseek($fp,0,SEEK_SET);
                $head = true;                   //到达文件头部,开关打开
                break;
            }
            
        }
        array_unshift($lines,fgets($fp));
        if($head){ break; }                 //这一句,只能放上一句后,因为到文件头后,把第一行读取出来再跳出整个循环
        $eof = "";
        $num--;
    }
    fclose($fp);
    return $lines;
}









?></span>