HQY 一个和谐有爱的空间

Spout简介

使用phpExcel在读取体积较大的excel文件时，会提示Fatal error: Allowed memory size of的错误，提示内存不够。可以使用Spout来解决。

Spout 是一个 PHP 库，用于以快速且可扩展的方式读取和写入电子表格文件（CSV、XLSX 和 ODS）。它能够处理非常大的文件，同时保持非常低的内存使用率（小于 3MB）。
官方网站：
https://opensource.box.com/spout/
github地址：
https://github.com/box/spout

安装方法

通过composer或手动引入。
通过composer：

composer require box/spout

手动引入：

require_once '[PATH/TO]/src/Spout/Autoloader/autoload.php';

DEMO

1. use Box\Spout\Reader\Common\Creator\ReaderEntityFactory;

3. $filePath = '/path/to/file.xlsx';

4. $reader = ReaderEntityFactory::createReaderFromFile($filePath);

6. $reader->open($filePath);

8. foreach ($reader->getSheetIterator() as $sheet) {

9.    //只取第一个sheet

10.    if($sheet->getIndex()>0) continue;

11.    foreach ($sheet->getRowIterator() as $row) {

12.        // do stuff with the row

13.        $cells = $row->getCells();

14.        $tmp = [];

15.        foreach ($cells as $k=>$cell){

16.            $value = $cell->getValue();

17.            if(strlen($value)>0) $tmp[$k+1] = $value;

18.        }

19.        var_dump($tmp);die;

20.    }

21. }

23. $reader->close();

另一种办法

将xlsx文件转为csv文件，使用PHP的原生函数如fgetcsv()来读取,这通常是处理非常大的数据集的最快方法。使用 fgetcsv() 函数是读取大型 CSV 文件的一个非常高效的方法，因为它允许你逐行处理文件，而不需要一次性将整个文件加载到内存中。

以下是一个使用 fgetcsv() 读取大型 CSV 文件的例子：

1. <?php

3. function readLargeCsv($filename, $delimiter = ',') {

4.    // 检查文件是否存在

5.    if (!file_exists($filename) || !is_readable($filename)) {

6.        return false;

7.    }

9.    // 打开文件

10.    $handle = fopen($filename, 'r');

11.    if ($handle === false) {

12.        return false;

13.    }

15.    // 设置一个计数器来跟踪处理的行数

16.    $row = 0;

18.    // 读取文件头（假设第一行是列名）

19.    $header = fgetcsv($handle, 0, $delimiter);

20.    if ($header === false) {

21.        fclose($handle);

22.        return false;

23.    }

24.    $row++;

26.    // 逐行读取文件内容

27.    while (($data = fgetcsv($handle, 0, $delimiter)) !== false) {

28.        $row++;

30.        // 使用 $header 和 $data 创建关联数组

31.        $rowData = array_combine($header, $data);

33.        // 在这里处理每一行的数据

34.        // 例如，你可以将数据插入数据库，或者进行一些计算

35.        processRow($rowData, $row);

37.        // 可选：每处理 1000 行后，输出一个进度指示

38.        if ($row % 1000 === 0) {

39.            echo "Processed $row rows\n";

40.            // 可选：刷新输出缓冲

41.            flush();

42.            ob_flush();

43.        }

44.    }

46.    // 关闭文件

47.    fclose($handle);

49.    return $row; // 返回处理的总行数

50. }

52. function processRow($rowData, $rowNumber) {

53.    // 在这里处理每一行的数据

54.    // 这只是一个示例，你需要根据你的具体需求来实现这个函数

55.    echo "Processing row $rowNumber: " . json_encode($rowData) . "\n";

56. }

58. // 使用示例

59. $filename = 'path/to/your/large_file.csv';

60. $totalRows = readLargeCsv($filename);

62. if ($totalRows === false) {

63.    echo "An error occurred while reading the file.\n";

64. } else {

65.    echo "Total rows processed: $totalRows\n";

66. }

推荐本站淘宝优惠价购买喜欢的宝贝:

本文链接：https://sg.hqyman.cn/post/9591.html 非本站原创文章欢迎转载，原创文章需保留本站地址！

休息一下~~