05_support_vector_machines.ipynb

06_decision_trees.ipynb

5장 - 서포트 벡터 머신(Support Vector Machine - SVM)

중소규모의 비선형 데이터셋, 특히 분류 작업에서 장점을 가진다

하지만 큰 데이터셋으로는 잘 확장되지 않는다

5.1 선형 SVM 분류

image.png

SVM 분류기는 클래스 사이에 가장 폭이 넓은 도로를 찾는 것으로 생각 → 라지 마진 분류

결정 경계는 도로 경계에 위치한 샘플에 의해 결정된다 → 서포트 벡터 (회색 동그라미)


결정 경계에서 가장 가까운 데이터 포인트 들과의 거리

결정 경계(Margin)를 결정하는데 영향을 미치는 데이터 포인트

마진 경계에 있는 데이터 포인트


※ SVM은 특성의 스케일에 민감

image.png