PHP 百万数据导出生成压缩包下载

最新推荐文章于 2024-08-21 18:58:05 发布

调调大人

最新推荐文章于 2024-08-21 18:58:05 发布

阅读量257

点赞数

文章标签： excel

本文链接：https://blog.csdn.net/dddaren/article/details/108804071

版权

本文介绍了如何使用PHP处理大量数据，通过分批查询避免内存溢出，将数据导出为多个CSV文件，最后再将CSV文件打包成ZIP进行下载，有效解决了大数据量导出的问题。

摘要由CSDN通过智能技术生成

1.分批查数据，防止数据库内存溢出
2.生成多个csv文件
3.zip打包下载

//分批打包下载excel
    //导出说明:因为EXCEL单表只能显示104W数据，同时使用PHPEXCEL容易因为数据量太大而导致占用内存过大，
    //因此，数据的输出用csv文件的格式输出，但是csv文件用EXCEL软件读取同样会存在只能显示104W的情况，所以将数据分割保存在多个csv文件中，并且最后压缩成zip文件提供下载
    function putCsv(array $head, $data, $mark = 'attack_ip_info', $fileName = "test.csv")
    {
   
        set_time_limit(0);
        $sqlCount = $data->count();
        // 输出Excel文件头，可把user.csv换成你要的文件名
        header('Content-Type: application/vnd.ms-excel;charset=utf-8');
        header('Content-Disposition: attachment;filename="' . $fileName . '"');
        header('Cache-Control: max-age=0');

        $sqlLimit = 100000;//每次只从数据库取100000条以防变量缓存太大
        // 每隔$limit行，刷新一下输出buffer，不要太大，也不要太小
        $limit = 100000