Also known as: Bilingual Evaluation Understudy (BLEU) · BLEU
Bilingual Evaluation Understudy (BLEU) — метрика оценки машинного перевода путем сравнения машинно сгенерированного текста с одним или несколькими человеческими эталонными переводами. Она в основном измеряет совпадение n-грамм и полезна для корпусного сравнения, хотя может не полностью отражать смысл, беглость или допустимый парафраз.
A metric between 0.0 and 1.0 for evaluating machine translations, for example, from Spanish to Japanese. To calculate a score, BLEU typically compares an ML model's translation (generated text) to a human expert's translation (reference text). The degree to which N-grams in the generated text and reference text match determines the BLEU score. The original paper on this metric is BLEU: a Method for Automatic Evaluation of Machine Translation. See also BLEURT.