python37csv数据整理

### 如何使用 Python 3.7 和 Pandas 处理 CSV 文件

#### 导入必要的库
为了有效地处理CSV文件，首先需要导入`pandas`库。如果尚未安装此库，则可以通过pip命令来完成安装。

pip install pandas

接着，在Python脚本中引入该库：

import pandas as pd

#### 加载CSV文件至 DataFrame
利用 `read_csv()` 函数可以从本地磁盘加载CSV文件并转换成DataFrame对象。对于简单的CSV文件而言，默认设置通常已经足够好用了[^1]。

df = pd.read_csv('example.csv')

当面对更复杂的场景时——比如自定义分隔符、跳过某些行或是指定编码方式等情况下，可以传递额外的关键字参数给这个函数以适应特定的需求。例如，假设有一个用制表符作为字段间分隔符的文件，并且希望忽略前两行注释信息的话，那么应该这样调用它:

df = pd.read_csv('tab_separated_values.tsv', sep='\t', skiprows=2)

#### 获取列名列表
一旦有了DataFrame之后，就可以很方便地提取其结构化信息了。要获得所有的列名称组成的数组形式的数据，只需访问`.columns`属性即可[^3]:

column_names = df.columns.values.tolist()
print(column_names)

这会打印出一个包含所有列标签字符串表示法在内的列表。

#### 解决 KeyError 错误
有时可能会遇到试图访问不存在于当前表格中的键而导致抛出异常的情况。为了避免这种情况发生，建议先确认目标索引确实存在于数据集中再尝试读取相应的内容。一种方法是通过成员资格测试(`in`)运算符来进行验证；另一种则是采用安全的方式去获取值，即使用 `.get()` 方法代替直接下标寻址语法[^2]。

if 'desired_column' in df.columns:
    data_of_interest = df['desired_column']
else:
    print("The specified column does not exist.")
    
# 或者使用 .get() 方法
data_of_interest = df.get('desired_column', default_value_if_not_found)

#### 遍历多个CSV文件并将它们汇总在一起
如果有许多相似格式的小型CSV文档分布在同一个目录里边，想要把它们合并起来形成更大的集合也是可行的。下面给出了一种实现思路：遍历整个文件夹下的每一个子项，判断是不是CSV类型，若是则追加到最终的结果集当中去[^5]。

from pathlib import Path

path_to_dir_with_files = './some_directory'
all_dataframes = []

for file_path in Path(path_to_dir_with_files).glob('*.csv'):
    temp_df = pd.read_csv(file_path)
    all_dataframes.append(temp_df)

combined_dataframe = pd.concat(all_dataframes, ignore_index=True)

上述代码片段展示了怎样一次性收集多份资料并组合成为一个单独的大规模记录集的过程。