Python爬取网站的title代码

在Python中，你可以使用requests库来发送HTTP请求获取网页内容，然后BeautifulSoup库解析HTML文档提取网页标题。以下是一个简单的示例：

import requests
from bs4 import BeautifulSoup

def get_title(url):
    # 发送GET请求
    response = requests.get(url)

    # 检查请求是否成功
    if response.status_code == 200:
        # 解析响应文本为BeautifulSoup对象
        soup = BeautifulSoup(response.text, 'html.parser')
        
        # 获取网页标题
        title = soup.title.string
        
        return title
    else:
        print(f"请求失败，状态码: {response.status_code}")
        return None

# 使用函数
url_to_crawl = "https://www.example.com"
title = get_title(url_to_crawl)
if title:
    print(f"网页标题: {title}")

相关问题

Python爬取知乎网站代码

Python爬取知乎网站通常涉及网络请求库如`requests`和解析HTML内容的库如`BeautifulSoup`或`lxml`。以下是一个简单的示例，展示如何用Python爬取知乎文章标题：

import requests
from bs4 import BeautifulSoup

# 定义目标URL
url = "https://www.zhihu.com/topic/19550876/top-answers"

# 发送GET请求获取网页内容
response = requests.get(url)

# 检查请求是否成功
if response.status_code == 200:
    # 解析HTML
    soup = BeautifulSoup(response.text, 'html.parser')
    
    # 找到包含文章标题的部分（这里假设是h2标签）
    article_titles = soup.find_all('h2', class_='QuestionItem-title')

    for title in article_titles:
        print(title.get_text())  # 输出文章标题
else:
    print("请求失败，状态码:", response.status_code)

python爬取电影网站代码

以下是一个简单的 Python 代码示例，用于从电影网站上爬取电影信息：

import requests
from bs4 import BeautifulSoup

# 电影网站的 URL
url = "https://www.example.com/movies"

# 发送 HTTP 请求
response = requests.get(url)

# 使用 BeautifulSoup 解析 HTML 内容
soup = BeautifulSoup(response.content, "html.parser")

# 获取电影列表
movies = soup.find_all("div", class_="movie")

# 循环遍历电影列表并输出电影信息
for movie in movies:
    title = movie.find("h2", class_="title").text.strip()
    rating = movie.find("span", class_="rating").text.strip()
    summary = movie.find("p", class_="summary").text.strip()

    print("Title:", title)
    print("Rating:", rating)
    print("Summary:", summary)
    print("--------------------")

需要注意的是，网站的 HTML 结构可能会经常更改，因此需要根据实际情况进行调整。另外，爬取网站数据时需要注意法律法规和网站的使用协议。