利用pandas向一个csv文件追加写入数据的实现示例 - CSDN文库

125 浏览量更新于2023-03-16 1 收藏 30KB PDF 举报

身份认证购VIP最低享 7 折!

领优惠券(最高得80元）

资源详情

资源推荐

利用利用pandas向一个向一个csv文件追加写入数据的实现示例文件追加写入数据的实现示例

我们越来越多的使用pandas进行数据处理，有时需要向一个已经存在的csv文件写入数据，传统的方法之前我也有些过，向

txt，excel文件写入数据，传送门：Python将二维列表（list）的数据输出（TXT，Excel）

pandas to_csv()只能在新文件写数据？当然不是！

pandas to_csv() 是可以向已经存在的具有相同结构的csv文件增加dataframe数据。

df.to_csv('my_csv.csv', mode='a', header=False)

to_csv()方法mode默认为w，我们加上mode=’a’，便可以追加写入数据。

pandas读写文件，处理数据的效率太高了，所以我们尽量使用pandas的进行输出。

下面让我们来看一下示例

# -*- coding:utf-8 -*-

import os

import time

import pandas as pd

from multiprocessing import Pool

def merge(filename):

return pd.read_csv('./fun_data/'+filename)

if __name__ == "__main__":

file_list = os.listdir('./fun_data')

e1 = time.time()

pool = Pool(20)

result = pool.map(merge,file_list)

pool.close()

pool.join()

e2 = time.time()

print(e2 - e1)

for i in result:

i.to_csv('./static.csv',mode='a',encoding='utf-8',header=False,index=False)

e3 = time.time()

print(e3-e2)

您可能感兴趣的文章您可能感兴趣的文章:pandas将numpy数组写入到csv的实例

本内容试读结束，登录后可阅读更多

下载后可阅读完整内容，剩余0页未读，立即下载

weixin_38690017

粉丝: 5
资源: 923

会员权益专享

图片转文字

全年可省5，000元立即开通

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈