Datawhale 學CV task 5模型整合

2022-07-18 03:30:21 字數 577 閱讀 8557

記錄幾個關於模型整合的問題:

1、validate set的留出法(還有k-折交叉驗證)

【常見的整合學習方法有stacking、bagging和boosting,同時這些整合學習方法與具體驗證集劃分聯絡緊密。】

原來常說的整合學習,跟驗證集劃分相關,以前常看到整合,但不知道是怎麼做,以為是多個模型test結果的處理。

2、dropout也是整合的一種。

以前以為只有在fc層後,因為引數比較多,現在知道還有conv的後面,具體是在啟用層後面,pooling層前面。例如

nn.conv2d(3, 64, kernel_size=(3, 3), stride=(2, 2)),

nn.relu(),

nn.dropout(0.2),

nn.maxpool2d(2),

3、tta是測試時用的整合方法,雖然**裡有tta,但是還設里乙個false的flag,所以實際是沒有用tta?

4、變換lr。固定lr的方法是在優化器裡指定;如果通過看loss曲線,確定lr修改的epoch,可以寫乙個判斷語句,修改lr變數。

還有乙個steplr,暫時不會用。

統計學基本知識 datawhale 任務一,二

按照網易雲課堂可汗學院統計學進度,從第1課 34課 條形圖線型圖 餅圖箱線圖 莖葉圖各種作用就不一一闡述了,比較基礎。總體和樣本 總體是統計學解決任何乙個問題都有待認識客觀事物的全體,稱作統計總體。總體單位是組成總體的各個個體。樣本則是為了認識總體而從總體中選取的實際觀測的個體和。二項分布 設在n重...

統計學基本知識 datawhale 任務三

假設檢驗是數理統計中根據一定假設條件由樣本推斷總體的一種方法,依據的原理是小概率事件原理,即小概率事件在一次試驗中是幾乎不可能發生的。建立假設 原假設與備擇假設 原假設記作h 0h 0 h0 是指待檢驗的假設,一般為研究者想要收集證據反對的,沒有充分理由否定的假設。備擇假設記作h 1h 1 h1 是...

Datawhale異常處理

try 檢測範圍 except exception as reason 出現異常後的處理 try 語句按照如下方式工作 例子 try f open test.txt print f.read f.close except oserror print 開啟檔案出錯 開啟檔案出錯 try except ...