龙行博客

走路看风景,经历看人生,岁月留痕迹,人生留轨迹,17的历史,18的豪情,时间的匆忙,人生的风景,放开心胸往前走,成功再远行,放开理想往前走,梦想再行动。
现在位置:首页 > 编程语言 > PHP > php高效统计txt大文件行数函数

php高效统计txt大文件行数函数

龙行    PHP    2019-5-18    63    0评论    本文已被百度收录点击查看详情

php中提供了专门的file函数来读取文件,通过file函数可以一次性获取一个txt文件的行数:

<?php
$line = count(file($filepath));
echo $line;
?>

但是file函数不适用于大文件,执行缓慢并且会造成严重的内存问题。


网上还有一种通过fopen函数以及while逐行统计的代码,如下:

<?php
line = 0 ;
$fp = fopen($filepath , 'r') or die("open file failure!");
if($fp){
while(stream_get_line($fp,8192,"\n")){
   $line++;
}
fclose($fp);
}
echo $line;
?>

这种方法在读取大文件行数时,同样面临着效率太慢的问题。


经过实践,我们采用以下方法可以超高效率的读取txt大文件行数,并且内存占用也很低

<?php
function count_line($file){
  $fp=fopen($file, "r");
  $i=0;
  while(!feof($fp)) {
   //每次读取2M
   if($data=fread($fp,1024*1024*2)){
   //计算读取到的行数
   $num=substr_count($data,"\n");
   $i+=$num;
  }
}
fclose($fp);
return $i;
}
?>

通过多行统计,每次读取N个字节,然后再统计读取的行数累加。


测试情况,文件大小 3.14 GB


第1次:line: 13214810 , time:56.2779 s;


第2次:line: 13214810 , time:49.6678 s;

评论一下 分享本文 赞助站长

赞助站长X

扫码赞助站长
联系站长
龙行博客
  • 版权申明:此文如未标注转载均为本站原创,自由转载请表明出处《龙行博客》。
  • 本文网址:https://www.liaotaoo.cn/222.html
  • 上篇文章:Thinkphp5.1怎么获取模块名控制器名方法名
  • 下篇文章:php检测IP是否在IP段范围内封装类
  • php
挤眼 亲亲 咆哮 开心 想想 可怜 糗大了 委屈 哈哈 小声点 右哼哼 左哼哼 疑问 坏笑 赚钱啦 悲伤 耍酷 勾引 厉害 握手 耶 嘻嘻 害羞 鼓掌 馋嘴 抓狂 抱抱 围观 威武 给力
提交评论

清空信息
关闭评论
快捷导航
联系博主
在线壁纸
给我留言
光羽影视
音乐欣赏
返回顶部