10 isin函式做篩選
11、缺失值處理
使用map函式就可以實現把某一列的字元型別的值轉換為數字。
data[
class
]= data[
class].
map首先定義乙個字典，然後使用map方法就可以把某一列的字元型別的值轉換為數字。
參考：使用pandas把某一列的字元值轉換為數字的例項
使用value_counts函式即可。**：
import pandas as pd
import numpy as np
df = pd.dataframe(
)print
(df)
df['key2'
].value_counts(
)
參考：【pandas】統計某個值的出現次數
使用unique()函式即可，**：
import pandas as pd
import numpy as np
df = pd.dataframe(
)print
(df)
print
(df[
'key1'
].unique(
))
key1 key2 data1 data2
0 a one -
0.066452
1.850358
1 a two 0.861040
-2.977021
2 b one 0.422862
1.871435
3 b two -
0.060591
-2.044589
4 a one 0.779476
-0.390922
['a'
'b']
train_[
(train_[
'id']==
0)&(train_[
'queue_id']==2)]
train_[train_[
'id']==
0]
data.isna().
sum(
)
province 0
adcode 0
model 0
bodytype 0
regyear 0
regmonth 0
salesvolume 5280id0
forecastvolum 36960
popularity 5280
carcommentvolum 5280
newsreplyvolum 5280
label 5280
pandas資料的去重，替換和離散化，異常值的檢測
包括merge和contract方法
pandas-資料的合併與拼接
9.1 寫入乙個excel
一般不需要指定寫入引擎，pandas會根據你的系統和excel格式自動選，缺少的引擎pip install安裝就好。
file_name=
'mdp_original.xlsx'
dataset_original.to_excel(file_name,sheet_name=
'version1'
,index=
false
)
**如下：
with pd.excelwriter(file_name)
as writer:
dataset_original.to_excel(writer,sheet_name=
'original'
,index=
false
) dataset_v1.to_excel(writer,sheet_name=
'v1'
,index=
false
) dataset_v2.to_excel(writer,sheet_name=
'v2'
,index=
false
)
>>
>
import numpy as np
>>
>
import pandas as pd
#建立資料
>>
> df=pd.dataframe(np.random.randint(1,
16,size=(4
,4))
,columns=
['a'
,'b'
,'c'
,'d'])
>>
>
print
(df)
a b c d02
71111
25151524
107153
311122
>>
> l=
list
(range(1
,8))
>>
>
print
(l)[1,
2,3,
4,5,
6,7]
>>
> df[
'c']
.isin(l)
0true
1false
2true
3false
name: c, dtype:
bool
# 篩選
>>
> data=df[df[
'c']
.isin(l)
]>>
>
print
(data)
a b c d02
71112
410715
>>
>
#空值處理方式
data.fillna(data.mean(
), inplace =
true
)#以均值填充
data.fillna(
0, inplace =
true
)#以0填充
data.dropna(inplace=
true
)#剔除空值，針對空值數量相對總體而言可以忽略的情況
pandas 操作整理
pd.read csv filename 從csv檔案匯入資料，filename路徑 pd.read excel filename 從excel檔案匯入資料 pd.read sql query 從sql表 庫匯入資料 pd.read html url 解析url 字串或者html檔案，抽取其中的ta...
pandas 常用函式整理
pandas常用函式整理，作為個人筆記。僅標記函式大概用途做索引用，具體使用方式請參照pandas官方技術文件。約定from pandas import series,dataframe import pandas as pd import numpy as np 帶.的為series或者dataf...
整理 pandas 常用函式
1.df.head n 顯示資料前n行，不指定n，df.head則會顯示所有的行 2.df.columns.values獲取所有列索引的名稱 3.df.column name 直接獲取列column name的資料 4.pd.unique series 獲取series中元素的唯一值 即去掉重複的 ...