데이터과학 삼학년

그 중에서도 제일 와 닿았던 부분은 R-square에 대한 내용이다. 어렴풋하게 알고 있던 내용을 직관적으로 와닿게 설명하고 있어서, 여기에 정리해본다. 아래 PPT는 Data Analysis with Python에서 발췌한 내용이다. R-square은 평균 제곱 오차, MSE (Mean squared error) 로부터 계산된다. 즉 1-(추정 모형의 MSE / 평균 관측 값의 MSE) 이다. 위 그림에서 파란 선은 회귀선(Regression line), 파란 박스는 회귀선의 MSE, 빨간 선은 관측 데이터 모형(data point), 빨간 박스는 관측 데이터 모형의 MSE 이다. 위 그래프에서 보면 파란 박스의 면적이 빨간 박스보다 작은 것을 알 수 있다. 즉, 회귀선(Regression line)의..

Statistical Learning : data를 통해서 pattern을 찾고, 해석가능한 형태의 모델을 구축함으로써 예측(회귀)이나 분류 문제 등을 풀어내는 통계적인 방법이라 이해됨 가령 한 제품의 판매수를 예측하기위해 TV, Radio, Newspaper의 광고와의 인과관계를 본다고 하면 각 X는 Y와 선형적인 관계를 가지고 있고, 그렇다면 위 3개 광고를 동시에 고려하여 판매수를 예측한다면 어떨까? 라는 개념이다. 어떤 변수를 가지고 모델을 만드는 방법은 크게 두가지(Parametric, Non-Parametric)로 나눌 수 있다. Parametric model : 모델의 형태를 가정하고, 데이터를 통해(학습을 통해) 각 파라미터를 추정하여 모델을 완성(lr, LDA, Naive Bayes, 단..