php大文件切割和合并

最新推荐文章于 2024-01-07 09:41:35 发布

爱代码也爱生活

最新推荐文章于 2024-01-07 09:41:35 发布

阅读量6.6k

点赞数

分类专栏： php

本文链接：https://blog.csdn.net/nuli888/article/details/52120874

版权

本文介绍如何使用PHP高效地处理大文件，包括详细解析切割代码split.php和合并代码merge.php的实现过程，适合需要处理大量数据的开发者参考。

摘要由CSDN通过智能技术生成

分割代码

split.php

<?php  
$i    = 0;                               	//分割的块编号  
$fp   = fopen("hadoop.sql","rb");     	 	//要分割的文件  
$file = fopen("split_hash.txt","a");     	//记录分割的信息的文本文件，实际生产环境存在redis更合适 
while(!feof($fp)){  
        $handle = fopen("hadoop.{$i}.sql","wb");  
        fwrite($handle,fread($fp,5242880));//切割的块大小 5m
        fwrite($file,"hadoop.{$i}.sql\r\n");  
        fclose($handle);  
        unset($handle);  
        $i++;  
}  
fclose ($fp);  
fclose ($file);  
echo "ok";

合并代码

merge.php

<?php
$hash = file_get_contents("split_hash.txt"); //读取分割文件的信息
$list = explode("\r\n",$hash);
$fp = fopen("hadoop2.sql","ab"); 	    //合并后的文件名
foreach($list as $value){
	if(!empty($value)) {
		$handle = fopen($value,"rb");
		fwrite($fp,fread($handle,filesize($value)));
		fclose($handle);
		unset($handle);
	}
}
fclose($fp);
echo "ok";