laravel fastexcel 和 generators(生成器)异步导出大文件

fastexcel 和 generators(生成器)异步导出大文件

Generators 于多年前在 PHP 5 中引入。「生成器」函数很像普通函数,只是它不返回一个确定值,而是「生成器」yields 值,以便你根据需求生成需要迭代的值。

此类函数的目标之一是 延迟迭代 数据而不构建数组。因此,在处理大型数据集时可以节约内存

「生成器」允许你在 foreach 代码块中编写代码来遍历一组数据,而无需在内存中构建数组。因为那样可能会导致超出内存限制,或需要大量的处理时间才能生成。

//假定现在有一个 User 模型,数据库中有 10M+ 条,你想在代码中迭代它们,除了调用 User::all(), 你也可以使用「生成器」:

User::cursor() // 运行查询时是一个接一个地取出用户数据。它仅仅是使用加载一个用户所需的内存 N 次。

  

FastExcel 在内部使用生成器时是一行一行地创建,因此不会消耗额外的内存。这会是一个耗时操作,因此请确保不会触到 max_execution_time 限制 (你可以使用队列、 任何的异步技术、增加最大执行时间、甚至是从 CLI 执行)。尽管这样,仍然要注意,不要因一个导出操作耗尽你的服务器所有的内存。

因此,借助「生成器」,你现在可以在 Laravel 项目中使用几行代码将成千上万个模型数据导出到 XLSX,CSV 和 ODS 文件中。

composer require rap2hpoutre/fast-excel

$file = 'order.csv';
(new FastExcel(SubOrder::where($where)->cursor()))
->export($file, function ($order) {
                    return [
                    '订单号' => $order['sub_order_no'] . "\t",
                ];
});

 

posted @ 2021-02-23 17:46  飞翔的贺兰猪  阅读(354)  评论(0编辑  收藏  举报