[추천 시스템] 추천 알고리즘 평가 방법

오프라인 평가

사용자의 아이템에 대한 선호 기록과 추천 시스템이 추천한 결과를 비교하여 추천 품질을 평가

 

특징

* 별다른 비용 지출 없이 수집된 데이터만 이용하여 평가 가능

* 여러 모델을 동시에 평가할 수 있음

* 선호 기록이 기존에 사용하고 있는 추천 모델에 영향을 받을 수 있으므로,

실제 사용자의 만족도와 평과 결과가 다를 수 있음

 

온라인 평가

만들어진 추천 시스템을 직접 사용자에게 노출시켜 사용자의 반응을 수집하여 평가

 

특징

* 실제 사용자의 만족도를 측정한다는 측면에서 정화한 방식

* 비용이 비싼 평가 방식 (사용자의 만족도 감소 가능성 등)