php laravel fabpot/goutte 实现简单爬虫

使用 Laravel 框架和 Fabien Potencier 开发的 Goutte 库可以轻松实现简单的爬虫。以下是实现步骤：

1. 安装 Goutte

使用 Composer 安装 Goutte：

composer require fabpot/goutte

2. 创建控制器

在 Laravel 项目中创建一个控制器，用于处理爬取数据的逻辑。可以使用 Artisan 命令创建控制器：

php artisan make:controller WebScraperController

3. 编写代码

在控制器中引入 Goutte：

use Goutte\Client;

在控制器的方法中可以使用 Goutte 创建一个客户端，然后使用该客户端访问指定的 URL，并使用 CSS 选择器获取需要的数据：

public function scrape()
{
    $client = new Client();

    $crawler = $client->request('GET', 'https://www.example.com');

    $data = $crawler->filter('h1')->text();

    return $data;
}

以上代码会访问 https://www.example.com，然后使用 CSS 选择器获取页面中的所有 h1 元素的文本内容，并返回数据。

4. 路由设置

在 Laravel 项目中设置路由，将请求映射到刚刚创建的控制器方法：

Route::get('/scrape', 'WebScraperController@scrape');

现在可以访问 /scrape 路由，即可调用 WebScraperController 的 scrape 方法进行数据爬取。

注意：在实际应用中，需要遵守网站的爬虫协议，避免滥用和侵犯他人权益。