K近鄰分類算法是一種理論上比較成熟的分類方法，也是最簡單的機器學習算法之一。該方法的思想是：如果特征空間中k個最相似的樣本大部分屬于某一類別，則該樣本也屬于該類別。KNN算法中K是怎么決定的？在分類：

K近鄰分類算法是一種理論上比較成熟的分類方法，也是最簡單的機器學習算法之一。該方法的思想是：如果特征空間中k個最相似的樣本大部分屬于某一類別，則該樣本也屬于該類別。

KNN算法中K是怎么決定的？

在分類：KNN（k-最近鄰）訓練階段：記住所有點測試階段：計算新點a和原始數(shù)據(jù)預測中每個點之間的歐氏距離：找到離點a最近的k點，看哪個分類點k點屬于最多，然后將點a劃分為該類缺點：SVM（支持向量機）在測試階段花費的時間太長，KNN與機器學習的區(qū)別在于logistic回歸更像分類算法。不同的是logistic回歸采用logistic損失，支持向量機采用后驗損失。這兩個損失函數(shù)的目的是增加對分類影響較大的數(shù)據(jù)點的權(quán)重，減少與分類關(guān)系較小的數(shù)據(jù)點的權(quán)重。支持向量機是稀疏的，因為它通過支持向量機。Logistic回歸通過使用權(quán)重來降低異常值的權(quán)重。

k-means和knn算法的區(qū)別？

K-means聚類算法是HCM（普通的硬c-means聚類算法），這是一種硬劃分方法，結(jié)果不是1就是0，沒有其他情況，具有“非此即彼”的性質(zhì)。

隸屬度矩陣為u。FCM是HCM算法對模糊情況的推廣，用于模糊分類，并給出隸屬度的權(quán)重。