python 表格数量5000个,表格名称000001.SZ,000022.SZ,一个表格数据3000个,使用pandans计算,mysql遍历每个表格,表格要加反引号根据trade_date降序排列,对net_mf_amount列的前一天的数据减去今天的数据放在a列,如果之前计算过则跳过,把a列的值前一天的数据减去今天的数据放在b列,如果之前计算过则跳过,数据保存不使用replace,并且保存a和b列
时间: 2023-12-25 13:03:04 浏览: 129
好的,这是一个稍微修改过的任务,需要用到pandas计算和MySQL遍历。以下是一个基本的实现思路,你可以参考:
1. 遍历所有表格,对于每个表格
2. 查询net_mf_amount列的数据,按照trade_date降序排列,并加上反引号
3. 对查询结果进行pandas计算,得到a列的值
4. 判断是否之前已经计算过,如果已经计算过,则跳过
5. 将a列的值前一天的数据减去今天的数据放在b列
6. 保存a和b列的值
7. 继续处理下一个表格,直到处理完所有表格
下面是一些参考代码:
```python
import pandas as pd
import mysql.connector
# 连接到MySQL数据库
cnx = mysql.connector.connect(user='root', password='password',
host='localhost', database='mydatabase')
# 遍历所有表格
for i in range(1, 5001):
# 查询表格
symbol = f"00000{i:02d}.SZ"
query = f"SELECT trade_date, net_mf_amount FROM `{symbol}` ORDER BY trade_date DESC"
# 查询数据
data = pd.read_sql(query, cnx)
# 计算a列的值
data['a'] = data['net_mf_amount'].diff(periods=1)
# 判断是否已经计算过
if 'b' in data.columns:
continue
# 计算b列的值
data['b'] = data['a'].diff(periods=1)
# 保存a和b列的值
query = f"ALTER TABLE `{symbol}` ADD COLUMN `a` FLOAT, ADD COLUMN `b` FLOAT"
cursor = cnx.cursor()
cursor.execute(query)
cnx.commit()
data[['a', 'b']].to_sql(symbol, cnx, if_exists='append', index=False)
# 关闭连接
cnx.close()
```
注意,以上代码仅作为参考,具体实现需要根据实际情况进行调整。同时,这个任务可能需要较长时间完成,需要耐心等待。
阅读全文