php phpspreadsheet 导入百万数据

在PHP中，使用`phpspreadsheet`库处理大量数据，如导入百万级别的数据，需要注意性能优化。`phpspreadsheet`是一个强大的Excel操作库，但它不是专门为大数据量设计的。以下是处理大文件的一些步骤和注意事项：

1. **分块读取**：由于内存限制，一次性加载整个文件可能会导致内存溢出。可以采用循环逐行读取的方式，每次只处理一部分数据。

use PhpOffice\PhpSpreadsheet\IOFactory;
use PhpOffice\PhpSpreadsheet\Reader\Xlsx;

$reader = new Xlsx();
$spreadsheet = $reader->load('large_file.xlsx', null, true); // 第三个参数true表示分块读取

foreach ($spreadsheet->getActiveSheet()->getRowIterator() as $row) {
    $data[] = $row->getCellIterator()->toArray(); // 存储每一行的数据
}

2. **数据库存储**：如果数据量非常大，不适合存放在内存中，可以选择将数据插入到数据库，每读取完一块就插入一次，例如使用PDO连接MySQL：

// 假设已配置好数据库连接
foreach ($data as $chunk) {
    $pdoStatement = $pdo->prepare('INSERT INTO table (column1, column2) VALUES (?, ?)');
    foreach ($chunk as $row) {
        $pdoStatement->execute([$row['col1'], $row['col2']]);
    }
}

3. **错误处理**：对可能出现的I/O错误、解析错误等进行适当的异常捕获，并记录日志，以便于调试。

4. **并发处理**：如果有服务器资源，可以考虑利用多线程或多进程技术加速处理速度，比如使用`pthreads`或`Symfony Process`。

5. **进度追踪**：为了提供用户反馈，可以显示导入进度，让用户知道当前导入到了哪一步。