php快速获取超大文件行数的方法

<?php

$start = microtime(TRUE);
$filesize = filesize('SHUIPING_YANG.log');
$fp = fopen('SHUIPING_YANG.log', 'r');
$getfp = fopen('SHUIPING_YANG.log', 'r');

$lines = 0;
$line = 0;

//获取文件的一行内容,注意:需要php5才支持该函数;
//第一种方法,可以设置定界符"\r \t \n",注意设置定界符的时候要用双引号!
while (stream_get_line($fp, $filesize,"\n")) {
	$line++;
}
fclose($fp); //关闭文件

while (fgets($getfp)) {
	$lines++;
}
fclose($getfp); //关闭文件

printf("stream_get_line函数所取得的文件行数为:%s", $line);
echo '<br>';
printf("fgets函数所取得的文件行数为:%s", $lines) ;

echo '<br>';
$end = microtime(TRUE);
echo '耗时' . $deltime = $end - $start;


//第二种方法
/*获取大文件最后N行方法
原理:
首先通过fseek找到文件的最后一位EOF,然后找最后一行的起始位置,取这一行的数据,再找次一行的起始位置, 再取这一行的位置,依次类推,直到找到了$num行。
 */

$file = "F:\access_log";
var_dump(tail($file, 10));

function tail($file, $num) {
	$fp = fopen($file, "r");
	$pos = -2;
	$eof = "";
	$head = false; //当总行数小于Num时,判断是否到第一行了
	$lines = array();
	while ($num > 0) {
		while ($eof != "\n") {
			if (fseek($fp, $pos, SEEK_END) == 0) {
				//fseek成功返回0,失败返回-1
				$eof = fgetc($fp);
				$pos--;
			} else {
				//当到达第一行,行首时,设置$pos失败
				fseek($fp, 0, SEEK_SET);
				$head = true; //到达文件头部,开关打开
				break;
			}
		}
		array_unshift($lines, fgets($fp));
		if ($head) {break;} //这一句,只能放上一句后,因为到文件头后,把第一行读取出来再跳出整个循环
		$eof = "";
		$num--;
	}
	fclose($fp);
	return $lines;
}
?>

以上例子输出结果为:
stream_get_line函数所取得的文件行数为:272717
fgets函数所取得的文件行数为:272717
耗时0.727095

看到了吧?速度还是蛮快的,两种方法加起来耗时还不到一秒,文件一共有27万多行!!!!

读取大文件内容:


function getbigfile() {
    $file_path = "D:/wamp/www/test/input.txt";
    $handle = fopen($file_path, "r+");
    if ($handle) {
        while (!feof($handle)) {
            $buffer = fgets($handle, 8000);
            echo $buffer;
        }
        fclose($handle);
    }
}
 
//getbigfile();
//die;
 
//返回文件从X行到Y行的内容
function getFileLine($file_path,$starline=1,$endline=5,$open_mode = "rb+"){
    $fp = new SplFileObject($file_path, $open_mode);
    $fp->seek($starline - 1);  // 转到第N行, seek方法参数从0开始计数
    for($i=0;$i<=$endline;$i++){
        $content[] = $fp->current(); //current()获取当前行内容
        $fp->next(); // 下一行
    }
    return $content;
}
$file_path = "D:/wamp/www/test/input.txt";

  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

SHUIPING_YANG

你的鼓励是我创作的最大动力。

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值