python爬虫写入数据库_Python爬虫数据写入操作

好的，这是一个很常见的问题。Python爬虫获取到数据后，可以将数据写入到数据库中。一般来说，我们可以使用Python中的第三方库来实现数据库的连接和操作，比如`pymysql`、`sqlite3`、`psycopg2`等。

以下是一个使用`pymysql`库将数据写入MySQL数据库的示例代码：

import pymysql

# 连接数据库
conn = pymysql.connect(host='localhost', port=3306, user='root', password='123456', db='test')

# 获取游标
cursor = conn.cursor()

# 插入数据
sql = "INSERT INTO user(name, age) VALUES (%s, %s)"
try:
    cursor.execute(sql, ('Tom', 20))
    conn.commit()
except Exception as e:
    print(e)
    conn.rollback()

# 关闭连接
cursor.close()
conn.close()

这段代码中，我们先使用`pymysql`库的`connect`函数连接数据库，然后使用`cursor`方法获取游标进行数据操作。接着，我们通过`execute`方法执行插入数据的SQL语句，并用`commit`方法提交事务。如果插入数据的过程中出现异常，我们使用`rollback`方法回滚事务，最后关闭游标和数据库连接。

当然，具体的数据库连接和操作方法因不同的数据库而异，但大体相似。