php导出对数据进行压缩,php导出数据到多个csv并打包压缩

这段代码展示了如何使用PHP处理大量数据,不压缩直接下载和导出为CSV文件,以及如何将数据导出为多个文件并压缩成ZIP包。通过设置内存限制和超时时间,确保了大文件处理的可行性。同时,文件以分页形式生成,避免一次性加载所有数据导致内存溢出。
摘要由CSDN通过智能技术生成

1.不压缩直接下载

// 测试php导出大量数据到csv

public function actionExportData()

{

// 设置不超时

set_time_limit(0);

// 设置最大可用内存

ini_set('memory_limit', '1024M');

// 设置第一列名标题名称

$columns = ['id', 'username', 'email'];

header('Content-Description: File Transfer');

header('Content-Type: application/vnd.ms-excel');

header('Content-Disposition: attachment; filename="导出数据-'.date('Y-m-d', time()).'.csv"');

header('Expires: 0');

header('Cache-Control: must-revalidate');

header('Pragma: public');

// 打开output流

$fp = fopen('php://output', 'a');

// 把变量从UTF-8转成GBK编码

mb_convert_variables('GBK', 'UTF-8', $columns);

// 将数据格式化为CSV格式并写入到output流中

fputcsv($fp, $columns);

foreach (User::find()->select('id, username, email')->where(['status' => 10])->batch(100) as $items) {

foreach ($items as $item) {

$rowData = [

'id' => $item->id,

'username' => $item->username ?: '',

'email' => $item->email ?: '',

];

mb_convert_variables('GBK', 'UTF-8', $rowData);

fputcsv($fp, $rowData);

}

// 刷新输出缓冲区

ob_flush();

flush();

}

fclose($fp);

exit();

}

2.导出成多个文件并打包成zip文件

public function actionZip()

{

// 设置不超时

set_time_limit(0);

// 设置最大可用内存

ini_set('memory_limit', '1024M');

// 设置第一列名标题名称

$columns = ['id', 'username', 'email'];

// 下面以分页形式导出

// 总记录数

$countUser = User::find()->where(['status' => 10])->count();

// 总页数

$pages = ceil($countUser / 200);

$fileArr = [];

for ($i = 0; $i < $pages; $i++) {

if ($i == 0) {

// 打开一个临时文件

$filename = dirname(__DIR__) . '/components/page' . $i . '.csv';

$fileArr[] = $filename;

// 打开一个文件句柄

$fp = fopen($filename, 'w');

// 把变量从UTF-8转成GBK编码

mb_convert_variables('GBK', 'UTF-8', $columns);

fputcsv($fp, $columns);

}

$users = User::find()

->select('id, username, email')

->where(['status' => 10])

->asArray()

->limit(200)

->offset($i * 200)

->all();

foreach ($users as $user) {

mb_convert_variables('GBK', 'UTF-8', $user);

fputcsv($fp, $user);

}

// 刷新输出缓冲区

//ob_flush();

//flush();

// 当已经输出5页的数据时再新建一个文件

if ($i != 0 && $i % 10 == 0) {

// 关闭当前文件

fclose($fp);

// 重新打开一个新文件

// 打开一个临时文件

$filename = dirname(__DIR__) . '/components/page' . $i . '.csv';

$fileArr[] = $filename;

// 打开一个文件句柄

$fp = fopen($filename, 'w');

// 把变量从UTF-8转成GBK编码

mb_convert_variables('GBK', 'UTF-8', $columns);

fputcsv($fp, $columns);

}

if ($i == ($pages - 1)) {

// 如果是最后一页,执行完就关闭文件

fclose($fp);

}

}

// 压缩打包

$zip = new \ZipArchive();

$zipName = dirname(__DIR__) . '/components/' . time() . '.zip';

$zip->open($zipName, \ZipArchive::CREATE);

foreach ($fileArr as $file) {

$zip->addFile($file, basename($file));

}

$zip->close();

foreach ($fileArr as $file) {

unlink($file);

}

header('Content-disposition: attachment; filename=' . basename($zipName));

header("Content-Type: application/zip");

header("Content-Transfer-Encoding: binary");

header('Content-Length: ' . filesize($zipName));

readfile($zipName);

@unlink($zipName);

}

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值