Python Pandas常用函數(shù)方法總結(jié)

## 讀寫
pd.Series #定義一維標(biāo)記數(shù)組
pd.DataFrame #定義數(shù)據(jù)框
pd.read_csv #讀取逗號(hào)分隔符文件
pd.read_excel #讀取 excel 表格
pd.to_excel #寫入 excel 表格
pd.read_sql #讀取 SQL 數(shù)據(jù)
pd.read_table #讀取 table
pd.read_json #讀取 json 文件
pd.read_html #讀取 html
pd.read_clipboard() #從剪切板讀入數(shù)據(jù)
df.to_csv #寫入 csv 文件
df.to_excel #寫入 excel 文件
df.to_sql #寫入 SQL 表
df.to_json #寫入 JSON 文件
df.to_html #寫入 HTML 表格
df.to_clipboard() #寫入剪切板

## 數(shù)據(jù)展示和統(tǒng)計(jì)
df.info() #統(tǒng)計(jì)數(shù)據(jù)信息
df.shape() #統(tǒng)計(jì)行數(shù)和列數(shù)
df.index() #顯示索引總數(shù)
df.columns() #顯示數(shù)據(jù)框有哪些列
df.count() #顯示有多少個(gè)記錄
df.head(n) #返回前 n 個(gè)，默認(rèn) 5
df.tail(n) #返回后 n 個(gè)
df.sample(n) #隨機(jī)選取 n 行
df.sample(frac = 0.8) #百分比為 0.8 的選取
df.dtypes #查看每一列的數(shù)據(jù)類型
df.sum() #數(shù)據(jù)框按列求和
df.cumsum() #數(shù)據(jù)框累計(jì)求和
df.min() #給出每列的最小值
df.max() #給出每列的最大值
df['列名'].idxmin() #獲取數(shù)據(jù)框某一列的最小值
mySeries.idxmin() #獲取 Series 的最小值
df['列名'].idxmax() #獲取數(shù)據(jù)框某一列的最大值
mySeries.idxmax() #獲取 Series 的最大值
df.describe() #關(guān)數(shù)據(jù)的基本統(tǒng)計(jì)信息描述
df.mean() #給出數(shù)據(jù)框每一列的均值
df.median() #給出數(shù)據(jù)框每一列的中位數(shù)
df.quantile #給出分位數(shù)
df.var() #統(tǒng)計(jì)每一列的方差
df.std() #統(tǒng)計(jì)每一列的標(biāo)準(zhǔn)差
df.cummax() #尋找累計(jì)最大值，即已出現(xiàn)中最大的一個(gè)
df.cummin() #累計(jì)最小值
df['列名'].cumproad() #計(jì)算累積連乘
len(df) #統(tǒng)計(jì)數(shù)據(jù)框長(zhǎng)度
df.isnull #返回?cái)?shù)據(jù)框是否包含 null 值
df.corr() #返回列之間的相關(guān)系數(shù)，以矩陣形式展示
df['列名'].value_counts() #列去重后給每個(gè)值計(jì)數(shù)

## 數(shù)據(jù)選擇
mySeries['列名'] #用中括號(hào)獲取列
df['列名'] #選取指定列
df.列名 #同上
df[n0:n1] #返回 n0 到 n1 行之間的數(shù)據(jù)框
df.iloc[[m],[n]] #iloc按行號(hào)來索引，兩層中括號(hào)，取第 m 行第 n 列
df.loc[m:n] #loc 按標(biāo)簽來索引，返回索引 m 到 n 的數(shù)據(jù)框，loc、iloc 主要針對(duì)行來說的
df.loc[:,"列1":"列2"] #返回連續(xù)列的所有行
df.loc[m:n,"列1":"列2"] #返回連續(xù)列的固定行
df['列名'][n] #選取指定列的第 n 行
df[['列1','列2']] #返回多個(gè)指定的列

## 數(shù)據(jù)篩選和排序
df[df.列名  n] #篩選，單中括號(hào)用于 bool 值篩選
df.filter(regex = 'code') #過濾器，按正則表達(dá)式篩選
df.sort_values #按某一列進(jìn)行排序
df.sort_index() #按照索引升序排列
df['列名'].unique() #列去重
df['列名'].nunique() #列去重后的計(jì)數(shù)
df.nlargest(n,'列名') #返回 n 個(gè)最大值構(gòu)成的數(shù)據(jù)框
df.nsmallest(n,'列名') #返回 n 個(gè)最小的數(shù)據(jù)框
df.rank #給出排名，即為第幾名

## 數(shù)據(jù)增加刪除修改
df["新列"] = xxx #定義新列
df.rename #給列重命名
df.index.name = "index_name" #設(shè)定或者修改索引名稱
df.drop #刪除行或者列
df.列名 = df.列名.astype('category') #列類型強(qiáng)制轉(zhuǎn)化
df.append #在末尾追加一行
del df['刪除的列'] #直接刪除一列

## 特別的
df.列名.apply #按列的函數(shù)操作
pd.melt #將寬數(shù)據(jù)轉(zhuǎn)化為長(zhǎng)數(shù)據(jù)（拆分拉長(zhǎng)），run 一下下面例子就知道什么意思了
pd.merge #兩個(gè)數(shù)據(jù)表間的橫向連接（內(nèi)連接，外連接等）
pd.concat #橫向或者縱向拼接

mySeries = pd.Series([1,2,3,4], index=['a','b','c','d'])

data = {'Country' : ['Belgium', 'India', 'Brazil' ],
        'Capital': ['Brussels', 'New Delhi', 'Brassilia'],
        'Population': [1234,1234,1234]}
df = pd.DataFrame(data, columns=['Country','Capital','Population'])

pd.DataFrame(np.random.rand(20,5))

df = pd.read_csv('data.csv')

pd.read_excel('filename')
pd.to_excel('filename.xlsx', sheet_name='Sheet1')

df.quantile([0.25, 0.75]) # 給出每一列中的25%和75%的分位數(shù)

filters = df.Date > '2021-06-1'
df[filters] #選出日期在某個(gè)日期之后的所有行

df.filter(regex='^L') #選出 L 開頭的列

df.sort_values('列名', ascending= False) #按指定列的值大小升序排列

df.rename(columns= {'老列名' : '新列名'}) #修改某個(gè)列名

df["新列"] = df.a- df.b #定義一個(gè)新的列表示為兩個(gè)的差

df.columns = map(str.lower(), df.columns) #所有列名變?yōu)樾懽帜?

df.columns = map(str.upper(), df.columns) #所有列名變?yōu)榇髮懽帜?

df.drop(columns=['列名']) #刪除某一列
df.drop(['列1', '列2'], axis=1) #含義同上，刪除兩列
mySeries.drop(['a']) #刪除 Series 指定值
df.drop([0, 1]) #根據(jù)索引刪除，雙閉區(qū)間

def fun(x):
    return x*3
df.列名.apply(fun)  #把某一列乘 3 倍

df.列名.apply(lambda x: x*3) #匿名表達(dá)式的寫法

df = pd.DataFrame({'A': {0: 'a', 1: 'b', 2: 'c'},'B': {0: 1, 1: 3, 2: 5}, 'C': {0: 2, 1: 4, 2: 6}})
pd.melt(df, id_vars=['A'], value_vars=['B','C']) #melt的使用

new=pd.DataFrame({'name':'lisa', 'gender':'F', 'city':'北京'},index=[1])
df = new
df=df.append(new) #增加一行數(shù)據(jù)

frame = pd.DataFrame({'a':[2.3,-1.7,5,3],'b':[6,2.9,-3.1,8]},index=['one','two','three','four'])
frame.rank(method="min",ascending=False)#對(duì)每一列的數(shù)據(jù)，根據(jù)大小給個(gè)排名


#merge 表示橫向連接
df3 = pd.merge(df1,df2,how='inner',on='股票簡(jiǎn)稱') #on表示連接列，how選擇連接方式
pd.merge(df1,df2,left_on='lkey',right_on='rkey',how='left') #當(dāng)連接列名不同分別指定
#concat 拼接
pd.concat([df1,df1])  #縱向連接，當(dāng)s1和s2索引不重疊時(shí)，可以直接拼接
pd.concat([df1,df1],axis = 1)  #橫向連接，默認(rèn)外連接，以行索引為連接字段