邏輯回歸是乙個分類演算法,它可以處理二元分類以及多元分類。雖然它名字裡面有「回歸」兩個字,卻不是乙個回歸演算法。那為什麼有「回歸」這個誤導性的詞呢?個人認為,雖然邏輯回歸是分類模型,但是它的原理裡面卻殘留著回歸模型的影子。郵件是否是垃圾郵件。細胞是否是癌細胞。
我們知道,線性回歸的模型是求出輸出特徵向量y和輸入樣本矩陣x之間的線性關係係數θ
'>θ
θ,滿足y=x
θ'>y=xθ
y=xθ。此時我們的y是連續的,所以是回歸模型。如果我們想要y是離散的話,怎麼辦呢?乙個可以想到的辦法是,我們對於這個y再做一次函式轉換,變為g(y
)'>g(y)
g(y)。如果我們令g(y
)'>g(y)
g(y)的值在某個實數區間的時候是類別a,在另乙個實數區間的時候是類別b,以此類推,就得到了乙個分類模型。如果結果的類別只有兩種,那麼就是乙個二元分類模型了
邏輯回歸 總結
a logistic回歸又稱logistic回歸分析,是一種廣義的線性回歸分析模型,常用於資料探勘,疾病自動診斷,經濟 等領域。b 例如,引發疾病的危險因素,並根據危險因素 疾病發生的概率等。以胃癌病情分析為例,選擇兩組人群,一組是胃癌組,一組是非胃癌組,兩組人群必定具有不同的體徵與生活方式等。c ...
深度學習總結四 邏輯回歸總結
邏輯回歸 公式推導 邏輯回歸是乙個分類演算法。所以大致步驟如下 sigmoid函式二分類 對線性函式y w x by wx b y wx b 使用sigmoid函式包裝為 y sigma y y 輸出 0,1 0,1 0,1 的概率值。大於0.5為正樣本,小於0.5為負樣本。優點 計算代價不高,易於...
Logistic 回歸總結
logistic regression 和 linear regression 的原理是相似的 1.找乙個合適的 函式 andrew ng 的公開課中稱為 hypothesis 一般表示為 h 函式,該函式就是我們需要找的分類函式,它用來 輸入資料的判斷結果。這個過程時非常關鍵的,需要對資料有一定的...