Сравнение data drift и concept drift. Разберите, вызвана ли проблема модели изменением input distributions или изменением связи между inputs and outcomes.
Краткий вердикт: Используйте data drift, когда меняется распределение входных данных; используйте concept drift, когда меняется relationship между inputs и target outcome.
Data Drift describes change over time in the statistical properties or distribution of input data used by a model.
Контекст: Наиболее уместно при monitoring whether production inputs still resemble development data.
Concept Drift describes Concept drift occurs when the statistical relationship between input data and the target outcome changes over time.
Контекст: Наиболее уместно, когда predictions become less valid because underlying target relationship changed.
| Аспект | Data Drift | Concept Drift |
|---|---|---|
| Определение | Data drift — изменение statistical properties or distribution of input data. | Concept drift — изменение statistical relationship between input data and target outcome. |
| Практическое различие | Inputs выглядят иначе, чем данные, на которых модель trained или validated. | Meaning of inputs for predicting target changed. |
| Типичный сценарий | Production monitoring of incoming data distributions. | Когда outcome patterns change and predictions no longer match reality. |
| Распространённая ошибка | Считать любой performance decline результатом changed input distributions. | Считать, что concept drift можно detect without outcomes or target relationships. |
| Значение для governance | Требует monitoring, investigation and correction when training data less representative. | Требует review of model validity, recalibration, retraining or pipeline changes. |
На практике drift labels are diagnostic hypotheses, not final answers. Governance file должен фиксировать, что изменилось, как это detected и почему выбранное corrective action fits the evidence.
Использовать data drift как catch-all для production degradation.
Игнорировать concept drift, потому что input distributions stable.
Retraining без diagnosis of drift type.
Не сохранять monitoring alerts and investigation records.
Используйте Data Drift при обсуждении changes in input data distribution over time. Термин подходит для monitoring whether production data remains representative of training and validation data.
Используйте Concept Drift при обсуждении changes in relationship between inputs and target outcomes. Термин подходит, когда prediction logic becomes stale because the real-world relationship changed.
NIST AI RMF и ISO 42001 monitoring programs должны отличать data drift от concept drift, потому что они требуют разных investigations and corrective actions. Для high-risk systems EU AI Act evidence может требовать records, showing degradation detected and handled.
Да. Input distributions may change while input-outcome relationship also changes, so monitoring should not assume only one drift type.
Любой может привести к retraining, но решение должно следовать investigation. Concept drift часто требует recalibration, retraining или model/pipeline changes.
Different drift types support different corrective actions. Clear terminology помогает показать evidence-based monitoring, investigation and remediation.
No recently viewed comparisons yet.