PPL1 자연어처리 : 언어모델 : Perplexity 정의 번역하면 "혼란도"의 의미이다. 즉, Language Model이 실제로 관측되는 값을 얼마나 잘 예측하는지를 평가할 때 사용. 외부 평가 (extrinsic Evaluation) : 비교해야하는 모델이 너무 많아서 test data에 대해서 빠르게 식으로 계산되는 간단한 평가 방법 내부 평가 : 모델 내에서 자신의 성능을 수치화화여 결과를 내놓는 내부 평가 방법 Perplexity는 수치가 높을수록 혼잡도가 높고 낮은 성능을 의미하며, 수치가 낮을수록 높은 성능을 의미한다. 1. 언어 모델의 평가 방법 : PPL https://wikidocs.net/21697 위키독스 온라인 책을 제작 공유하는 플랫폼 서비스 wikidocs.net 문장의 확률이 커질수록 1을 향해 가므로 PPL의 값은 작아지고,.. 2020. 3. 6. 이전 1 다음