https://neptune.ai/blog/f1-score-accuracy-roc-auc-pr-auc
accuracy:
- predicted class로 계산됨
- 문제가 well-balanced class 인 경우, 모든 class가 중요한 경우
f1 score:
- predicted class로 계산됨
- positive class가 좀 더 중요한 binary class 문제
roc auc:
- predicted score로 계산됨
- score가 확률보다는 rank에 가까울 때
- heavily imbalanced class에서는 사용하면 안됨
- 모든 class가 중요한 경우
pr auc:
- predicted score로 계산됨
- heavily imbalanced class인 경우
- pos가 neg보다 중요한 경우