支持向量機 (Support vector machine)

AI人工智能詞彙表

支持向量機 (Support vector machine)

什麼是支持向量機（Support Vector Machine, SVM）？

支持向量機（SVM）是一種在機器學習領域中廣泛使用的監督式學習模型，主要用於分類和回歸問題。其核心目標是找到一個最佳分割超平面，將不同類別的數據點在特徵空間中分隔開，並且使得該分割面與兩類數據點之間的邊界（Margin）最大化，從而提高分類器對未知數據的泛化能力。

SVM的基本概念與原理

• 分類超平面與邊界最大化
  SVM透過在特徵空間中建立一個超平面（Hyperplane）來區分兩類數據，即找到一條線（或高維空間中的面），將兩類點分隔開來。SVM的關鍵在於最大化該超平面與離它最近的數據點（稱為支持向量）的距離，這條距離稱為「邊界」。邊界越大，表示模型在新數據上的分類更具魯棒性。

• 支持向量（Support Vectors）
  支持向量是距離分類超平面最近的那些數據點，這些點決定了超平面的方向和位置。支持向量的存在使得模型對部分噪聲點不敏感，提升了穩定性。

• 核技巧（Kernel Trick）
  對於非線性可分的數據，SVM使用核函數將數據從原始空間映射到高維特徵空間，使得在新空間中數據線性可分。常用核函數包括線性核、多項式核、徑向基基函數（RBF）等。核技巧大幅擴展了SVM的適用範圍。

• 優化問題
  SVM將最大化邊界的目標轉化為一個凸二次規劃問題求解，同時引入懲罰項來處理分類錯誤與軟邊界，使模型在實際應用中兼顧準確性和容錯性。

SVM的優點

• 泛化能力強，特別適合小樣本、高維數據。

• 理論基礎堅實，保證求解唯一最優解。

• 靈活非線性處理，依靠核函數映射應對複雜問題。

• 不易過擬合，適合高維稀疏特徵數據。

SVM的缺點

• 對大規模數據集訓練計算成本較高。

• 核函數和超參數選擇需要經驗與調試。

• 對於多分類問題需進行適當擴展設計。

SVM的應用範疇

• 文本分類
  垃圾郵件檢測、情感分析、新聞分類。

• 圖像識別
  手寫字辨認、人臉識別。

• 生物信息學
  蛋白質分類、基因表達數據分析。

• 金融風險評估
  信用評分、詐騙檢測。

總結

支持向量機以其簡潔有效的數學模型和優異的分類性能成為機器學習領域的重要工具。它通過尋找最大邊界的分類面，實現了強大的泛化能力和穩定性。隨著核方法的引入，SVM成功處理了非線性問題，廣泛應用於文本、圖像、生物醫學等多個領域。未來隨著算法優化及大數據計算資源提升，SVM將持續在人工智慧應用中發揮重要作用。