溫馨提示×

python進行數據清洗的代碼怎么寫

小億
141
2024-02-01 12:10:39
欄目: 編程語言

數據清洗是指對數據進行預處理,包括去除重復值、缺失值處理、異常值處理等操作。下面是一些常見的數據清洗操作的示例代碼:

  1. 去除重復值:
df = df.drop_duplicates()
  1. 缺失值處理:
  • 刪除含有缺失值的行:
df = df.dropna()
  • 填充缺失值為指定值:
df = df.fillna(value)
  • 插值填充缺失值:
df = df.interpolate()
  1. 異常值處理:
  • 根據標準差刪除異常值:
df = df[np.abs(df['column'] - df['column'].mean()) <= (3 * df['column'].std())]
  • 根據箱線圖刪除異常值:
q1 = df['column'].quantile(0.25)
q3 = df['column'].quantile(0.75)
iqr = q3 - q1
df = df[(df['column'] >= q1 - 1.5 * iqr) & (df['column'] <= q3 + 1.5 * iqr)]

以上代碼只是示例,具體的數據清洗操作需要根據具體的數據情況進行調整和擴展。

0
亚洲午夜精品一区二区_中文无码日韩欧免_久久香蕉精品视频_欧美主播一区二区三区美女