python 爬取财经新闻_python爬取路透社财经新闻
时间: 2023-07-05 07:35:22 浏览: 354
爬取新闻网站新闻列表的python程序
好的,你可以使用 Python 的 requests 库和 BeautifulSoup 库来爬取路透社的财经新闻。以下是一个简单的示例代码:
```python
import requests
from bs4 import BeautifulSoup
url = 'https://www.reuters.com/finance'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
news_list = soup.select('.feature')
for news in news_list:
title = news.select_one('.story-title').text.strip()
link = news.select_one('.story-title a')['href']
print(title)
print(link)
```
这段代码会输出路透社财经新闻页面上的标题和链接。你可以根据自己的需求,进一步解析新闻详情页面,获取更详细的信息。需要注意的是,爬取网站的数据要遵守网站的规定和法律法规,不要进行不当的行为。
阅读全文