Яка найвища точність ROC?

Найпопулярнішим сумарним показником точності є площа під кривою ROC, часто позначається як «AUC» для площі під кривою. Його значення коливається від 0,5 (ймовірність) до 1,0 (ідеальна дискримінація або точність).

Чим ближче крива ROC до верхнього лівого кута графіка, тим вища точність тесту тому що у верхньому лівому куті чутливість = 1 і частота помилкових позитивних результатів = 0 (специфічність = 1). Таким чином, ідеальна крива ROC має AUC = 1,0.

(0,1) Точки на кривій ROC, найближчі до (0,1) представляють діапазон найефективніших порогів для даної моделі. Як обговорювалося в розділах «Порогові значення», «Матриця плутанини» та «Вибір показників і компромісів», вибране вами порогове значення залежить від того, яка метрика є найважливішою для конкретного випадку використання.');})();(function(){window.jsl. dh('qoHrZpHfEKXq7_UP_MSymA0__37','

Значення AUC лежить між 0 і 1, і чим ближче значення до 1, тим кращий тест. AUC із значенням 0,5 свідчить про відсутність дискримінації. Зв’язок між чутливістю та специфічністю можна представити на графіку ROC.

Крива ROC Тест із ідеальною дискримінацією (без перекриття в двох розподілах) має криву ROC, яка проходить через верхній лівий кут (100% чутливість, 100% специфічність). Тому чим ближче крива ROC до верхнього лівого кута, тим вища загальна точність тесту (Zweig & Campbell, 1993).

Як правило, оцінка ROC AUC вище 0,8 вважається хорошою, тоді як оцінка вище 0,9 вважається великим. Однак корисність моделі залежить від конкретної проблеми та випадку використання. Стандарту немає.