Caesar AI Atlas
МетрикиНачальный

Accuracy vs Recall

Параллельное сравнение accuracy и recall. Помогает понять, как общий корректность differs из ability для find фактический положительный случаи, особенно когда пропущенные положительные случаи являются стоимостьly.

Краткий вердикт: Используйте accuracy когда общий корректность является meaningful; используйте recall когда failing для identify фактические положительные случаи создаёт material риск.

Обзор терминов

Accuracy

Accuracy measures classification metric equal to the proportion of predictions that are correct among all predictions made.

Ключевые характеристики
  • Измеряет proportion all предсказания что являются корректный
  • Applies для классификация evaluation
  • Может быть полезный когда classes являются сбалансированный
Обратите внимание
  • Может быть misleading когда classes являются несбалансированный
  • Может hide poor производительность на положительный класс

Контекст: Наиболее уместно когда all classes и error типы have similar importance и dataset является не severely несбалансированный.

VS
Recall

Recall measures evaluation metric that measures the proportion of actual positive or relevant items that a model successfully identifies.

Ключевые характеристики
  • Измеряет proportion фактические положительные случаи identified
  • Фокусируется на пропущенные положительные случаи
  • Важный когда ложноотрицательные результаты являются стоимостьly
Обратите внимание
  • High recall может come с более ложноположительные результаты
  • Должна often быть interpreted alongside precision

Контекст: Наиболее уместно для обнаружение, скрининг, и безопасность-sensitive задачи где missing положительный случай является стоимостьly.

Ключевые отличия

АспектAccuracyRecall
Что измеряетAccuracy измеряет корректный предсказания among all предсказания.Recall измеряет identified positives among all фактические положительные случаи.
Лучший вариант использованияПолезный когда classes являются сбалансированный и errors have similar стоимость.Полезный когда пропущенные положительные случаи являются более стоимостьly than extra ложные тревоги.
Режим отказаМожет look high even когда модель misses много редкий но важный positives.Может look high even когда много предсказанные положительные случаи являются ложноположительные результаты.
Чувствительность к порогуChanging классификация порог может изменение accuracy посредством shifting balance корректный и incorrect предсказания.Changing порог often directly изменения recall посредством making модель более или менее willing для identify positives.
Распространённая ошибкаСообщать accuracy alone для несбалансированный или высокорисковый классификация задачи.Maximizing recall без документировании ложноположительный trade-off или операционная нагрузка.
Заметка Caesar AI

В practice, accuracy является метрика наиболее likely для look reassuring а hiding problem; recall forces команды для ask что модель fails для catch.

Заметки

Частые ошибки

1

Рассматривать high accuracy как proof что classifier является safe для редких событий обнаружение.

2

Сообщать recall без precision, ложноположительные результаты, или порог assumptions.

3

Choosing metrics до defining который error type является более вредful.

Когда использовать

accuracy

Используйте accuracy когда you need simple measure total корректный классификацияs и распределение классов делает что number meaningful. It должна не быть только метрика когда положительный случаи являются редкий или error затраты differ.

recall

Используйте recall когда evaluation question является как много фактический положительный или релевантный items модель successfully находит. It является особенно важный в скрининг, безопасность, мошенничество, compliance, и другие settings где пропущенные положительные случаи являются стоимостьly.

Примечание о соответствии

Metric selection affects отчёты о валидации, assurance доказательства, и заявления о производительности в рамках AI governance-программы. NIST AI RMF и ISO 42001-style контроли должна document почему chosen метрика matches риск вариант использования.

Вопросы и ответы

Может модель have high accuracy и low recall?+

Да. If положительный случаи являются редкий, модель может correctly classify много negative случаи still miss много фактические положительные случаи.

Является recall always better than accuracy?+

Нет. recall является better когда пропущенные положительные случаи являются особенно важный, а accuracy может быть полезный когда общий корректность является meaningful и class balance является reasonable.

Должна compliance reports включают both metrics?+

Often yes. Reports должна explain почему each метрика является релевантный, что error trade-offs exist, и как метрика поддерживает оценка риска.

Недавно просмотренные

No recently viewed comparisons yet.