15個必知Pandas代碼片段，助你精通數據分析

作者：學研君 2023-11-15 18:03:11

Python的Pandas庫是數據分析的基本工具，提供了強大的數據操作和分析功能。在本文中，將探討每個數據科學家都應該將其掌握的15個高級Pandas代碼片段。這些代碼片段將幫助簡化數據分析任務，并從數據集中提取有價值的見解。

簡介

1.過濾數據

import pandas as pd

# 創建一個DataFrame
data = {'Name': ['Alice', 'Bob', 'Charlie', 'David'],
        'Age': [25, 30, 35, 40]}

df = pd.DataFrame(data)

# 過濾年齡大于30的記錄
filtered_df = df[df['Age'] > 30]
print(filtered_df)

2.分組和聚合數據

# 按列分組并計算平均值
grouped = df.groupby('Age').mean()
print(grouped)

3.處理缺失數據

# 檢查缺失值
missing_values = df.isnull().sum()


# 使用特定值填充缺失值
df['Age'].fillna(0, inplace=True)

4.對列應用函數

# 對列應用自定義函數
df['Age'] = df['Age'].apply(lambda x: x * 2)

5.連接DataFrame

# 連接兩個DataFrame
df1 = pd.DataFrame({'A': ['A0', 'A1'], 'B': ['B0', 'B1']})
df2 = pd.DataFrame({'A': ['A2', 'A3'], 'B': ['B2', 'B3']})


result = pd.concat([df1, df2], ignore_index=True)
print(result)

6.合并DataFrame


# 合并兩個DataFrame
left = pd.DataFrame({'key': ['A', 'B', 'C'], 'value': [1, 2, 3]})
right = pd.DataFrame({'key': ['B', 'C', 'D'], 'value': [4, 5, 6]})

merged = pd.merge(left, right, on='key', how='inner')
print(merged)

7.透視表

# 創建數據透視表
pivot_table = df.pivot_table(index='Name', columns='Age', values='Value')
print(pivot_table)

8.處理日期時間數據

# 將列轉換為DateTime類型
df['Date'] = pd.to_datetime(df['Date'])

9.重塑數據


# 將DataFrame進行融合
melted_df = pd.melt(df, id_vars=['Name'], value_vars=['A', 'B'])
print(melted_df)

10. 處理分類數據

# 對分類變量進行編碼
df['Category'] = df['Category'].astype('category')
df['Category'] = df['Category'].cat.codes

11. 數據采樣

# 從DataFrame中隨機抽取行
sampled_df = df.sample(n=2)

12. 計算累積和

# 計算累積和
df['Cumulative_Sum'] = df['Values'].cumsum()

13. 去除重復值

# 去除重復行
df.drop_duplicates(subset=['Column1', 'Column2'], keep='first', inplace=True)

14. 創建虛擬變量

# 為分類數據創建虛擬變量
dummy_df = pd.get_dummies(df, columns=['Category'])

15. 導出數據

# 將DataFrame導出為CSV文件
df.to_csv('output.csv', index=False)

掌握這15個Pandas代碼片段，將極大增強你的數據操作和分析能力。將它們納入工作流程中，可以更加高效地處理和探索數據集。

責任編輯：武曉燕來源： Python學研大本營

Python 數據分析基本工具