nodejs爬取网站列表数据在爬取详情数据代码

一般来说，在爬取网站列表数据的代码中，你需要获取到每个列表项的链接，然后再通过这个链接去爬取详情数据。可以使用像 `request` 或 `axios` 这样的 Node.js HTTP 客户端，或者使用像 `cheerio` 或 `puppeteer` 这样的 HTML 解析库，来实现这个过程。

下面是一个示例代码，用于爬取一个虚构的网站中的商品列表和商品详情：

const request = require('request');
const cheerio = require('cheerio');

// 爬取商品列表
request('http://example.com/products', (error, response, body) => {
  if (error) {
    console.error(error);
    return;
  }

  const $ = cheerio.load(body);
  const productLinks = [];

  // 获取每个商品链接
  $('a.product-link').each((i, el) => {
    const link = $(el).attr('href');
    productLinks.push(link);
  });

  // 爬取每个商品的详情
  productLinks.forEach(link => {
    request(`http://example.com${link}`, (error, response, body) => {
      if (error) {
        console.error(error);
        return;
      }

      const $ = cheerio.load(body);
      const productName = $('h1.product-name').text();
      const productDescription = $('div.product-description').text();

      console.log(`商品名称：${productName}`);
      console.log(`商品描述：${productDescription}`);
    });
  });
});

在这个示例中，我们首先使用 `request` 库来请求商品列表页面，然后使用 `cheerio` 库解析 HTML 并获取每个商品的链接。接着，我们遍历每个链接，使用 `request` 库再次请求该链接，然后解析 HTML 并提取商品名称和描述信息。最后，我们将这些信息打印输出到控制台。