python删除异常值
时间: 2023-06-30 09:19:40 浏览: 155
清理数据异常
在 Python 中删除异常值的一种常用方法是使用 NumPy 库中的 percentile 函数,该函数可以计算出给定数组的百分位数。可以根据计算出来的百分位数来判断哪些数值是异常值,然后将这些异常值从数组中删除。以下是一个示例代码,可以通过该代码来删除数组中的异常值:
```python
import numpy as np
# 创建一个含有异常值的数组
arr = np.array([1, 2, 3, 4, 5, 100])
# 计算数组的第 25 个和第 75 个百分位数
q25, q75 = np.percentile(arr, [25, 75])
# 计算四分位距(IQR)
iqr = q75 - q25
# 计算上下限
lower = q25 - 1.5 * iqr
upper = q75 + 1.5 * iqr
# 删除异常值
arr = arr[(arr >= lower) & (arr <= upper)]
print(arr)
```
在上述代码中,首先创建一个含有异常值的数组 arr,然后使用 percentile 函数计算出数组的第 25 个和第 75 个百分位数,并根据这两个百分位数计算出四分位距(IQR)。接着,计算出上下限,将在这个范围外的数值从数组中删除,最终输出删除异常值后的数组。
阅读全文