4.1 판별 함수 - 최소 제곱법 기반의 판별의 한계 ( 이상 값에 대한 한계, 가우시안 분포가 아닌 데이터들에 부적합 )

최소 제곱법 기반의 방법을 사용하면 판별 함수 매개변수의 해를 정확히 닫힌 형태로 구할 수 있지만. 

이를 통해 얻은 판별 함수는 이를 이용하여 결정을 내리고 확률적인 해석을 내리는 데 있어서 문제점을 지니고 있다.

 

최소 제곱 해는 우선 이상 값에 대해 강건성이 부족하다. 

분류 문제에서도 동일하게 발생한다. ( 너무 옳은 값에 대해서도 벌칙 )

 

뿐만 아니라 

최소 제곱법은 가우시안 조건부 분포 가정하에서의 최대 가능도 방법과 연관되어 있어, 가우시안이 아닌 분포를 가진 표적 벡터들에 대해서는 제대로 작동하지 않는다.