node.js 多进程处理多个文件

在 Node.js 中，可以使用多进程来处理多个文件，以提高程序的并发性和处理能力。实现方式可以通过 `child_process` 模块创建多个子进程，每个子进程负责处理一个文件。

例如，可以使用以下代码来创建多个子进程处理多个文件：

const { fork } = require('child_process');

const files = ['file1.txt', 'file2.txt', 'file3.txt'];

for (const file of files) {
  const child = fork('fileProcessor.js', [file]);
  
  child.on('message', (result) => {
    console.log(`Processed ${file}: ${result}`);
  });
}

在这个例子中，我们定义了一个文件数组 `files`，其中包含要处理的多个文件名。然后，我们使用 `fork()` 方法创建多个子进程，每个子进程通过传递不同的文件名作为参数来处理不同的文件。在子进程中处理完文件后，通过 `process.send()` 方法将结果发送给主进程。主进程监听 `message` 事件来接收子进程发送的结果，并打印处理结果。

在子进程中，可以使用以下代码来读取文件并处理数据：

const fs = require('fs');
const path = require('path');

const filePath = process.argv[2]; // 获取传递的文件名参数

fs.readFile(path.join(__dirname, filePath), 'utf8', (err, data) => {
  if (err) {
    process.send('Error');
    return;
  }
  
  const result = processData(data); // 处理数据
  
  process.send(result); // 将处理结果发送给主进程
});

在这个例子中，我们使用 `process.argv[2]` 方法获取传递的文件名参数，并使用 Node.js 的 `fs` 模块读取文件数据。然后，我们通过 `process.send()` 方法将处理结果发送给主进程。

需要注意的是，在多进程处理多个文件时，需要考虑进程的数量和文件的大小。如果子进程数量过多或者文件过大，可能会导致系统资源不足，从而影响程序的性能和稳定性。因此，需要根据实际情况选择合适的进程数量和文件处理方式。