通过相对xpath爬取内容的python代码

以下是一个通过相对xpath爬取内容的Python代码示例：

import requests
from lxml import etree

url = 'https://www.example.com'
response = requests.get(url)
html = etree.HTML(response.text)

# 通过相对xpath获取标题
title = html.xpath('//h1/text()')[0]
print(title)

# 通过相对xpath获取所有链接
links = html.xpath('//a/@href')
print(links)

希望这个代码示例能够帮助你！

相关问题

python中通过xpath爬取图片中xpath如何使用

在Python中使用XPath来爬取图片，首先需要使用XPath选择器来选择图片所在的HTML元素，然后通过该元素的属性获取图片的URL。

下面是一个示例代码，演示如何使用XPath来爬取图片：

import requests
from lxml import etree

# 发送请求获取页面内容
url = "https://example.com"
response = requests.get(url)
html = response.text

# 使用XPath选择器解析页面内容
tree = etree.HTML(html)

# 使用XPath选择图片元素并获取图片URL
img_elements = tree.xpath("//img")
for img_element in img_elements:
    img_url = img_element.get("src")
    print(img_url)

在上面的代码中，我们先发送一个请求获取页面内容，然后使用lxml库中的etree模块创建一个XPath选择器对象来解析页面内容。接着，我们使用XPath选择器的`xpath`方法选择所有的`<img>`标签，并循环遍历每个`<img>`标签，通过`get`方法获取`src`属性即可获得图片的URL。

python的xpath爬取

Python可以使用第三方库`lxml`来进行xpath解析。下面是一个简单的例子，演示如何使用xpath来爬取网页数据：

import requests
from lxml import etree

url = "https://www.example.com"
response = requests.get(url)
html = etree.HTML(response.content)
result = html.xpath('//div[@class="content"]/p/text()')
print(result)

这个例子中，我们首先使用`requests`库来请求网页数据，然后使用`etree`模块中的`HTML`函数将网页数据转换成可以进行xpath解析的格式。接着，我们使用xpath表达式`//div[@class="content"]/p/text()`来选取网页中所有`class`属性为`content`的`div`元素下的所有`p`元素的文本内容。最后，我们输出结果。

需要注意的是，xpath表达式可以根据具体的网页结构进行调整，以上只是一个简单的例子，实际应用中需要根据具体情况进行调整。