學習筆記 Self Paced Learning

2021-08-20 10:58:34 字數 730 閱讀 3167

自步學習類似於主動學習(active learning)從未知標籤中選取資料加入已知標籤訓練,不同的是,主動學習每次選取具有特徵最豐富的點,然後將這個點返回到資料庫中去查詢,得到乙個label然後去更新分類器。然而,自步學習起源於課程學習(curriculum learning),它根據學生的學習能力去選取課程,因而自主學習每次選取最簡單的特徵點集,然後到複雜,每次選取的個數不同,這樣訓練的好處就是減少熵值,訓練出潛在的權重引數。

自主學習的目標:

其潛在權重為v.選取的方式有很多種,每篇**都會提出乙個方法。

但是,在我近期看的**中,用 negative l1-norm regularizer方法:

同時作者還提出了乙個多樣性的方法the negative l2,1-norm:

通過反覆訓練可以得到權重w和潛在權重v。

參考文獻:l. jiang, d. meng, s. -i. yu, z. lan, s. shan, and a. hauptmann, 「self-paced learning with diversity,」 in proc. adv. neural inf. process. syst., 2014, pp. 2078–2086.

學習筆記 雜湊學習筆記

hash基本原理 hash就是乙個像函式一樣的東西,你放進去乙個值,它給你輸出來乙個值。輸出的值就是hash值。一般hash值會比原來的值更好儲存 更小 或比較。那字串hash就非常好理解了。就是把字串轉換成乙個整數的函式。而且要盡量做到使字串對應唯一的hash值。它的主要思路是選取恰當的進製,可以...

學習筆記 CentOS 學習筆記01

簡單的做個課堂筆記 虛擬機器用的是vmware,系統是centos cd etc sysconfig network scripts pwdls 顯示列表 cat ifcfg eth0 檢視檔案內容 vi ifcfg eth0 進入vi編輯器 onboot no 原始設定 x逐字刪除 d刪除整行 a...

筆記 spring cloud 學習筆記

1 spring cloud 是什麼 spring cloud為開發人員提供了快速構建分布式系統中一些常見模式的工具 例如配置管理,服務發現,斷路器,智慧型路由,微 控制匯流排 分布式系統的協調導致了樣板模式,使用spring cloud開發人員可以快速地支援實現這些模式的服務和應用程式。他們將在任...