Python读取数据集并消除数据中的空行方法_python定义一个函数,用于将多行数据读取到文件 - CSDN文库

155 浏览量更新于2023-03-03 评论 1 收藏 40KB PDF 举报

身份认证购VIP最低享 7 折!

领优惠券(最高得80元）

资源详情

资源评论

资源推荐

Python读取数据集并消除数据中的空行方法读取数据集并消除数据中的空行方法

如下所示：如下所示：

# -*- coding: utf-8 -*-

# @ author hulei 2016-5-3

from numpy import *

import operator

from os import listdir

import sys

reload(sys)

sys.setdefaultencoding('utf8')

# x,y=getDataSet_dz('iris.data.txt',4)

def getDataSet(filename,numberOfFeature): #将数据集读入内存

fr = open(filename)

numberOfLines = len(fr.readlines()) #get the number of lines in the file file.readlines()是把文件的全部内容读到内存，并解析

成一个list

returnMat = zeros((numberOfLines,numberOfFeature)) #prepare matrix to return 3代表数据集中特征数目###

classLabelVector = [] #prepare labels return

fr = open(filename)

index = 0

for line in fr.readlines():

line = line.strip() #strip() 参数为空时，默认删除空白符（包括'', '', ' ', ' ')

listFromLine = line.split(',') #split 以什么为标准分割一次分成数组中的每个元素

returnMat[index,:] = listFromLine[0:numberOfFeature] #classLabelVector.append(int(listFromLine[-1])) #append() 方法向列表

的尾部添加一个新的元素

if listFromLine[-1] == 'Iris-setosa' :

classLabelVector.append(1)

elif listFromLine[-1] == 'Iris-versicolor' :

classLabelVector.append(2)

else:

#elif listFromLine[-1] == 'Iris-virginica' :

classLabelVector.append(3)

index += 1

return returnMat,classLabelVector

def getDataSet_dz(filename,numberOfFeature): #改进版，可以消除数据中的空白行

numberOfLines = 0

mx = [] #将数据集去除空行后存入

fr = open(filename)

for line in fr.readlines():

line = line.strip()

if line != '' : #去除空白行

numberOfLines+=1

mx.append( line.split(',') )

returnMat = zeros((numberOfLines,numberOfFeature))

classLabelVector = [] for index in range(numberOfLines) :

returnMat[index,:] = mx[index][0:numberOfFeature] if mx[index][-1] == 'Iris-setosa' :

classLabelVector.append(1)

elif mx[index][-1] == 'Iris-versicolor' :

classLabelVector.append(2)

else:

#elif listFromLine[-1] == 'Iris-virginica' :

classLabelVector.append(3)

return returnMat,classLabelVector

以上这篇Python读取数据集并消除数据中的空行方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大

家多多支持软件开发网。

您可能感兴趣的文章您可能感兴趣的文章:python merge、concat合并数据集的实例讲解python 实现对数据集的归一化的方法(0-1之

间)python:pandas合并csv文件的方法(图书数据集成)python 划分数据集为训练集和测试集的方法Python sklearn KFold 生成交

叉验证数据集的方法对python中数据集划分函数StratifiedShuffleSplit的使用详解对python制作自己的数据集实例讲解Python

数据集切分实例python 筛选数据集中列中value长度大于20的数据集方法python调用摄像头拍摄数据集

本内容试读结束，登录后可阅读更多

下载后可阅读完整内容，剩余0页未读，立即下载

评论0

weixin_38595473

粉丝: 3
资源: 876

会员权益专享

图片转文字

全年可省5，000元立即开通

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈