python duckdb查询结果导出PARQUET

Python 中的 DuckDB 是一个快速、嵌入式、零配置的 SQL 引擎，它支持实时分析数据并可以在内存中运行。如果你想要将 DuckDB 的查询结果导出为 PARQUET 格式，你可以借助 Python 的 pandas 库，因为 DuckDB 支持与 pandas 的集成。

以下是一个简单的步骤：

1. 首先，安装必要的库，如果还没安装的话：

pip install duckdb pandas

2. 使用 `duckdb.connect` 连接到数据库（这里假设你有一个本地文件或内存中的数据）：

import duckdb

# 如果数据在内存中
conn = duckdb.connect(database="::")

# 如果数据在文件中
# conn = duckdb.connect('file:///path/to/your/dataset.db')

3. 执行 SQL 查询获取数据：

query = "SELECT * FROM your_table"  # 替换为你的实际表名和查询
df = conn.execute(query)

4. 将 DataFrame 转换为 PARQUET 文件：

df.to_parquet("output.parquet", engine='pyarrow')  # 输出文件路径

这样，查询结果就会保存为 PARQUET 格式的文件了。如果你的数据非常大，可能会用到 DuckDB 的流处理功能 (`read_sql_query` 或 `read_csv` 等方法) 来避免一次性加载所有数据到内存中。