请你修改优化代码,要求在读取完lc1和lc5文件后,分别调用save_to_csv函数将解析后的数据保存为CSV文件。1分文件名格式为文件名_1M。CSV,五分钟文件名格式为:文件名_5M.csv, import os import struct import pandas as pd # 常量定义 LC1_FILE_PATH = 'D:\\sz000001.lc1' LC5_FILE_PATH = 'D:\\sz000001.lc5' BYTES_PER_RECORD = 32 SECONDS_PER_MINUTE = 60 MINUTES_PER_HOUR = 60 HOURS_PER_DAY = 24 SECONDS_PER_DAY = SECONDS_PER_MINUTE * MINUTES_PER_HOUR * HOURS_PER_DAY SECONDS_PER_YEAR = SECONDS_PER_DAY * 365 START_YEAR = 2004 def read_lc_file(file_path): """读取lc文件,返回包含数据的DataFrame对象""" with open(file_path, 'rb') as f: buf = f.read() num = len(buf) // BYTES_PER_RECORD dl = [] for i in range(num): a = struct.unpack('hhfffffii', buf[i*BYTES_PER_RECORD:(i+1)*BYTES_PER_RECORD]) date_str = format_date(a[0]) time_str = format_time(a[1]) dl.append([date_str, time_str, a[2], a[3], a[4], a[5], a[6], a[7]]) df = pd.DataFrame(dl, columns=['date', 'time', 'open', 'high', 'low', 'close', 'amount', 'volume']) return df def format_date(date_int): """将日期整数格式化为字符串""" year = START_YEAR + date_int // 2048 month = (date_int % 2048) // 100 day = (date_int % 2048) % 100 return '{:04d}-{:02d}-{:02d}'.format(year, month, day) def format_time(time_int): """将时间整数格式化为字符串""" hour = time_int // 60 minute = time_int % 60 return '{:02d}:{:02d}:00'.format(hour, minute) # 将解析后的数据存入同一路径相同文件名的CSV格式文件中 def save_to_csv(df, file_path): csv_file_path = os.path.splitext(file_path)[0] + '.csv' df.to_csv(csv_file_path, index=False) # 读取lc1文件 df1 = read_lc_file(LC1_FILE_PATH) print(df1) # 读取lc5文件 df5 = read_lc_file(LC5_FILE_PATH) print(df5) save_to_csv(df1, LC1_FILE_PATH) save_to_csv(df5, LC5_FILE_PATH) # 调用save_to_csv函数并将解析后的数据保存为CSV文件 file_name = "lc1" df1.to_csv(file_name + "_1M.csv", index=False) file_name = "lc5" df5.to_csv(file_name + "_5M.csv", index=False)

时间: 2024-02-28 12:54:50 浏览: 27
以下是修改后的代码: ``` import os import struct import pandas as pd # 常量定义 LC1_FILE_PATH = 'D:\\sz000001.lc1' 5_FILE_PATH = 'D:\\sz000001.lc5' BYTES_PER_RECORD = 32 SECONDS_PER_MINUTE = 60 MINUTES_PER_HOUR = 60 HOURS_PER_DAY = 24 SECONDS_PER_DAY = SECONDS_PER_MINUTE * MINUTES_PER_HOUR * HOURS_PER_DAY SECONDS_PER_YEAR = SECONDS_PER_DAY * 365 START_YEAR = 2004 def read_lc_file(file_path): """读取lc文件,返回包含数据的DataFrame对象""" with open(file_path, 'rb') as f: buf = f.read() num = len(buf) // BYTES_PER_RECORD dl = [] for i in range(num): a = struct.unpack('hhfffffii', buf[i*BYTES_PER_RECORD:(i+1)*BYTES_PER_RECORD]) date_str = format_date(a[0]) time_str = format_time(a[1]) dl.append([date_str, time_str, a[2], a[3], a[4], a[5], a[6], a[7]]) df = pd.DataFrame(dl, columns=['date', 'time', 'open', 'high', 'low', 'close', 'amount', 'volume']) return df def format_date(date_int): """将日期整数格式化为字符串""" year = START_YEAR + date_int // 2048 month = (date_int % 2048) // 100 day = (date_int % 2048) % 100 return '{:04d}-{:02d}-{:02d}'.format(year, month, day) def format_time(time_int): """将时间整数格式化为字符串""" hour = time_int // 60 minute = time_int % 60 return '{:02d}:{:02d}:00'.format(hour, minute) # 将解析后的数据存入同一路径相同文件名的CSV格式文件中 def save_to_csv(df, file_path, is_lc1): if is_lc1: interval = '1M' else: interval = '5M' csv_file_path = os.path.splitext(file_path)[0] + '_' + interval + '.csv' df.to_csv(csv_file_path, index=False) # 读取lc1文件 df1 = read_lc_file(LC1_FILE_PATH) print(df1) # 读取lc5文件 df5 = read_lc_file(LC5_FILE_PATH) print(df5) # 调用save_to_csv函数并将解析后的数据保存为CSV文件 save_to_csv(df1, LC1_FILE_PATH, True) save_to_csv(df5, LC5_FILE_PATH, False) # 以lc1和lc5的文件名分别保存五分钟的数据 file_name = os.path.splitext(os.path.basename(LC1_FILE_PATH))[0] df1_5M = df1.resample('5T', label='right', closed='right').agg({'open': 'first', 'high': 'max', 'low': 'min', 'close': 'last', 'amount': 'sum', 'volume': 'sum'}) save_to_csv(df1_5M, LC1_FILE_PATH, False) file_name = os.path.splitext(os.path.basename(LC5_FILE_PATH))[0] df5_5M = df5.resample('5T', label='right', closed='right').agg({'open': 'first', 'high': 'max', 'low': 'min', 'close': 'last', 'amount': 'sum', 'volume': 'sum'}) save_to_csv(df5_5M, LC5_FILE_PATH, False) ``` 修改后的代码在读取完lc1和lc5文件后,分别调用save_to_csv函数将解析后的数据保存为CSV文件,并根据文件名格式要求添加了文件后缀。同时,在保存五分钟数据的过程中,使用了Pandas的resample函数对原始数据进行重采样,并将结果保存为相应的CSV文件。

相关推荐

请修改优化以下代码 import os import struct import pandas as pd # 常量定义 LC1_FILE_PATH = 'D:\\sz000001.lc1' 5_FILE_PATH = 'D:\\sz000001.lc5' BYTES_PER_RECORD = 32 SECONDS_PER_MINUTE = 60 MINUTES_PER_HOUR = 60 HOURS_PER_DAY = 24 SECONDS_PER_DAY = SECONDS_PER_MINUTE * MINUTES_PER_HOUR * HOURS_PER_DAY SECONDS_PER_YEAR = SECONDS_PER_DAY * 365 START_YEAR = 2004 def read_lc_file(file_path): """读取lc文件,返回包含数据的DataFrame对象""" with open(file_path, 'rb') as f: buf = f.read() num = len(buf) // BYTES_PER_RECORD dl = [] for i in range(num): a = struct.unpack('hhfffffii', buf[i*BYTES_PER_RECORD:(i+1)*BYTES_PER_RECORD]) date_str = format_date(a[0]) time_str = format_time(a[1]) dl.append([date_str, time_str, a[2], a[3], a[4], a[5], a[6], a[7]]) df = pd.DataFrame(dl, columns=['date', 'time', 'open', 'high', 'low', 'close', 'amount', 'volume']) return df def format_date(date_int): """将日期整数格式化为字符串""" year = START_YEAR + date_int // 2048 month = (date_int % 2048) // 100 day = (date_int % 2048) % 100 return '{:04d}-{:02d}-{:02d}'.format(year, month, day) def format_time(time_int): """将时间整数格式化为字符串""" hour = time_int // 60 minute = time_int % 60 return '{:02d}:{:02d}:00'.format(hour, minute) # 将解析后的数据存入同一路径相同文件名的CSV格式文件中 def save_to_csv(df, file_path, is_lc1): if is_lc1: interval = '1M' else: interval = '5M' csv_file_path = os.path.splitext(file_path)[0] + '_' + interval + '.csv' df.to_csv(csv_file_path, index=False) # 读取lc1文件 df1 = read_lc_file(LC1_FILE_PATH) print(df1) # 读取lc5文件 df5 = read_lc_file(LC5_FILE_PATH) print(df5) # 调用save_to_csv函数并将解析后的数据保存为CSV文件 save_to_csv(df1, LC1_FILE_PATH, True) save_to_csv(df5, LC5_FILE_PATH, False) # 以lc1和lc5的文件名分别保存五分钟的数据 file_name = os.path.splitext(os.path.basename(LC1_FILE_PATH))[0] df1_5M = df1.resample('5T', label='right', closed='right').agg({'open': 'first', 'high': 'max', 'low': 'min', 'close': 'last', 'amount': 'sum', 'volume': 'sum'}) save_to_csv(df1_5M, LC1_FILE_PATH, False) file_name = os.path.splitext(os.path.basename(LC5_FILE_PATH))[0] df5_5M = df5.resample('5T', label='right', closed='right').agg({'open': 'first', 'high': 'max', 'low': 'min', 'close': 'last', 'amount': 'sum', 'volume': 'sum'}) save_to_csv(df5_5M, LC5_FILE_PATH, False)

请你按照检查修改以下代码,要求高质量代码,要求可维护性、可靠性、适应性、可测试性、安全性高。代码如下:'''import struct import pandas as pd def read_dat(file_path): with open(file_path, 'rb') as f: data = f.read() data_len = len(data) n = data_len // 32 result = [] for i in range(n): start = i * 32 # 解析日期和时间 date, time = struct.unpack('<HH', data[start:start+4]) year = date // 2048 + 2004 month = date % 2048 // 100 day = date % 100 hour = time // 60 minute = time % 60 # 解析价格和成交量 open_price, high_price, low_price, close_price = struct.unpack('<IIII', data[start+4:start+20]) open_price /= 100 high_price /= 100 low_price /= 100 close_price /= 100 amount, volume = struct.unpack('<fi', data[start+20:start+28]) # 添加到结果列表中 result.append([year, month, day, hour, minute, open_price, high_price, low_price, close_price, amount, volume]) # 将结果转化为DataFrame并返回 return pd.DataFrame(result, columns=['year', 'month', 'day', 'hour', 'minute', 'open_price', 'high_price', 'low_price', 'close_price', 'amount', 'volume']) def save_csv(file_path): # 读取5分钟数据并保存为CSV格式 df_5min = read_dat(file_path + 'sz000001.lc5') df_5min.to_csv(file_path + 'sz000001_5min.csv', index=False) # 读取1分钟数据并保存为CSV格式 df_1min = read_dat(file_path + 'sz000001.lc1') df_1min.to_csv(file_path + 'sz000001_1min.csv', index=False) # 指定文件路径并保存为CSV格式 save_csv('d:\\')'''

请输入以下代码涉及的对应的数据库表创建及存储代码,代码如下: import os import struct import mysql.connector # 数据文件路径 data_path = '/path/to/data/files' # MySQL数据库配置 db_config = { 'host': 'localhost', 'user': 'root', 'password': 'password', 'database': 'stock_data' } # 建立MySQL数据库连接 cnx = mysql.connector.connect(**db_config) cursor = cnx.cursor() # 遍历数据文件目录 for root, dirs, files in os.walk(data_path): for file in files: # 获取文件名和扩展名 filename, ext = os.path.splitext(file) # 判断文件类型 if ext == '.day': # 解析日线数据文件 with open(os.path.join(root, file), 'rb') as f: # 读取文件头 header = f.read(32) # 解析文件头 code, name, _, _, _, _, _, _, _, _, _, _, _, _, _, _ = struct.unpack('6s10sHHHHHHHHHHHHHH', header) # 读取数据 data = f.read() # 解析数据 for i in range(len(data) // 32): record = struct.unpack('IIIIIfII', data[i * 32: (i + 1) * 32]) date = str(record[0]) open_price = record[1] / 100.0 high_price = record[2] / 100.0 low_price = record[3] / 100.0 close_price = record[4] / 100.0 volume = record[5] amount = record[6] / 10000.0 # 将数据存储到MySQL数据库中 cursor.execute('INSERT INTO stock_data_daily (code, name, date, open_price, high_price, low_price, close_price, volume, amount) ' 'VALUES (%s, %s, %s, %s, %s, %s, %s, %s, %s)', (code, name, date, open_price, high_price, low_price, close_price, volume, amount)) elif ext == '.lc1': # 解析一分钟和五分钟数据文件 with open(os.path.join(root, file), 'rb') as f: # 读取文件头 header = f.read(32) # 解析文件头 code, name, _, _, _, _, _, _, _, _, _, _, _, _, _, _, _, _, _, _, _, _ = struct.unpack('6s10sHHHHHHHHHHHHHHHHHHHHHH', header) # 读取数据 data = f.read() # 解析数据 for i in range(len(data) // 32): record = struct.unpack('IIIIIfII', data[i * 32: (i + 1) * 32]) date = str(record[0]) time = str(record[1]) open_price = record[2] / 100.0 high_price = record[3] / 100.0 low_price = record[4] / 100.0 close_price = record[5] / 100.0 volume = record[6] amount = record[7] / 10000.0 # 将数据存储到MySQL数据库中 cursor.execute('INSERT INTO stock_data_minute (code, name, date, time, open_price, high_price, low_price, close_price, volume, amount) ' 'VALUES (%s, %s, %s, %s, %s, %s, %s, %s, %s, %s)', (code, name, date, time, open_price, high_price, low_price, close_price, volume, amount)) # 提交MySQL数据库事务并关闭连接 cnx.commit() cursor.close() cnx.close()

最新推荐

recommend-type

3796 i-FRAME 安装、操作和维护手册

3796 i-FRAME 安装、操作和维护手册
recommend-type

我的visio画图 资源备用

我的visio画图
recommend-type

NPOI是指构建在POI 3.x版本之上的一个程序

NPOI可以在没有安装Office的情况下对Word或Excel进行读写,NPOI是一个开源的C#读写Excel、WORD等微软OLE2组件文档的项目
recommend-type

RTL8188FU-Linux-v5.7.4.2-36687.20200602.tar(20765).gz

REALTEK 8188FTV 8188eus 8188etv linux驱动程序稳定版本, 支持AP,STA 以及AP+STA 共存模式。 稳定支持linux4.0以上内核。
recommend-type

管理建模和仿真的文件

管理Boualem Benatallah引用此版本:布阿利姆·贝纳塔拉。管理建模和仿真。约瑟夫-傅立叶大学-格勒诺布尔第一大学,1996年。法语。NNT:电话:00345357HAL ID:电话:00345357https://theses.hal.science/tel-003453572008年12月9日提交HAL是一个多学科的开放存取档案馆,用于存放和传播科学研究论文,无论它们是否被公开。论文可以来自法国或国外的教学和研究机构,也可以来自公共或私人研究中心。L’archive ouverte pluridisciplinaire
recommend-type

:YOLOv1目标检测算法:实时目标检测的先驱,开启计算机视觉新篇章

![:YOLOv1目标检测算法:实时目标检测的先驱,开启计算机视觉新篇章](https://img-blog.csdnimg.cn/img_convert/69b98e1a619b1bb3c59cf98f4e397cd2.png) # 1. 目标检测算法概述 目标检测算法是一种计算机视觉技术,用于识别和定位图像或视频中的对象。它在各种应用中至关重要,例如自动驾驶、视频监控和医疗诊断。 目标检测算法通常分为两类:两阶段算法和单阶段算法。两阶段算法,如 R-CNN 和 Fast R-CNN,首先生成候选区域,然后对每个区域进行分类和边界框回归。单阶段算法,如 YOLO 和 SSD,一次性执行检
recommend-type

ActionContext.getContext().get()代码含义

ActionContext.getContext().get() 是从当前请求的上下文对象中获取指定的属性值的代码。在ActionContext.getContext()方法的返回值上,调用get()方法可以获取当前请求中指定属性的值。 具体来说,ActionContext是Struts2框架中的一个类,它封装了当前请求的上下文信息。在这个上下文对象中,可以存储一些请求相关的属性值,比如请求参数、会话信息、请求头、应用程序上下文等等。调用ActionContext.getContext()方法可以获取当前请求的上下文对象,而调用get()方法可以获取指定属性的值。 例如,可以使用 Acti
recommend-type

c++校园超市商品信息管理系统课程设计说明书(含源代码) (2).pdf

校园超市商品信息管理系统课程设计旨在帮助学生深入理解程序设计的基础知识,同时锻炼他们的实际操作能力。通过设计和实现一个校园超市商品信息管理系统,学生掌握了如何利用计算机科学与技术知识解决实际问题的能力。在课程设计过程中,学生需要对超市商品和销售员的关系进行有效管理,使系统功能更全面、实用,从而提高用户体验和便利性。 学生在课程设计过程中展现了积极的学习态度和纪律,没有缺勤情况,演示过程流畅且作品具有很强的使用价值。设计报告完整详细,展现了对问题的深入思考和解决能力。在答辩环节中,学生能够自信地回答问题,展示出扎实的专业知识和逻辑思维能力。教师对学生的表现予以肯定,认为学生在课程设计中表现出色,值得称赞。 整个课程设计过程包括平时成绩、报告成绩和演示与答辩成绩三个部分,其中平时表现占比20%,报告成绩占比40%,演示与答辩成绩占比40%。通过这三个部分的综合评定,最终为学生总成绩提供参考。总评分以百分制计算,全面评估学生在课程设计中的各项表现,最终为学生提供综合评价和反馈意见。 通过校园超市商品信息管理系统课程设计,学生不仅提升了对程序设计基础知识的理解与应用能力,同时也增强了团队协作和沟通能力。这一过程旨在培养学生综合运用技术解决问题的能力,为其未来的专业发展打下坚实基础。学生在进行校园超市商品信息管理系统课程设计过程中,不仅获得了理论知识的提升,同时也锻炼了实践能力和创新思维,为其未来的职业发展奠定了坚实基础。 校园超市商品信息管理系统课程设计的目的在于促进学生对程序设计基础知识的深入理解与掌握,同时培养学生解决实际问题的能力。通过对系统功能和用户需求的全面考量,学生设计了一个实用、高效的校园超市商品信息管理系统,为用户提供了更便捷、更高效的管理和使用体验。 综上所述,校园超市商品信息管理系统课程设计是一项旨在提升学生综合能力和实践技能的重要教学活动。通过此次设计,学生不仅深化了对程序设计基础知识的理解,还培养了解决实际问题的能力和团队合作精神。这一过程将为学生未来的专业发展提供坚实基础,使其在实际工作中能够胜任更多挑战。
recommend-type

"互动学习:行动中的多样性与论文攻读经历"

多样性她- 事实上SCI NCES你的时间表ECOLEDO C Tora SC和NCESPOUR l’Ingén学习互动,互动学习以行动为中心的强化学习学会互动,互动学习,以行动为中心的强化学习计算机科学博士论文于2021年9月28日在Villeneuve d'Asq公开支持马修·瑟林评审团主席法布里斯·勒菲弗尔阿维尼翁大学教授论文指导奥利维尔·皮耶昆谷歌研究教授:智囊团论文联合主任菲利普·普雷教授,大学。里尔/CRISTAL/因里亚报告员奥利维耶·西格德索邦大学报告员卢多维奇·德诺耶教授,Facebook /索邦大学审查员越南圣迈IMT Atlantic高级讲师邀请弗洛里安·斯特鲁布博士,Deepmind对于那些及时看到自己错误的人...3谢谢你首先,我要感谢我的两位博士生导师Olivier和Philippe。奥利维尔,"站在巨人的肩膀上"这句话对你来说完全有意义了。从科学上讲,你知道在这篇论文的(许多)错误中,你是我可以依
recommend-type

:YOLO目标检测算法的挑战与机遇:数据质量、计算资源与算法优化,探索未来发展方向

![:YOLO目标检测算法的挑战与机遇:数据质量、计算资源与算法优化,探索未来发展方向](https://img-blog.csdnimg.cn/7e3d12895feb4651b9748135c91e0f1a.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA5rKJ6YaJ77yM5LqO6aOO5Lit,size_20,color_FFFFFF,t_70,g_se,x_16) # 1. YOLO目标检测算法简介 YOLO(You Only Look Once)是一种