Задача
Положительных объектов 20. При пороге A: TP=12, FP=3. При более низком B: TP=18, FP=18. Сравните precision и recall.
Порог A
recall=12/20=0,6.
precision=12/(12+3)=0,8.
Порог B
recall=18/20=0,9.
precision=18/(18+18)=0,5.
Trade-off
Снижение порога нашло ещё шесть истинных положительных, но добавило пятнадцать дополнительных ложноположительных. Recall вырос, precision упал.
Выбор рабочего порога
Оптимальный threshold зависит от стоимости FN и FP, capacity последующей проверки и требуемой precision/recall. Он не обязан равняться 0,5 даже для калиброванных вероятностей.
Редакционная практика по PR-анализу в тематике mlearn_pro · CC BY 4.0.