Доля успешных результатов — оценочная метрика, которая делит число сгенерированных выходов, признанных успешными, на общее число сгенерированных выходов. Она используется, когда успех можно определить по критерию, специфичному для задачи, а не по единственному точному ответу.
A metric for evaluating an ML model's generated text. The fraction of successes is the number of "successful" generated text outputs divided by the total number of generated text outputs. For example, if a large language model generated 10 blocks of code, five of which were successful, then the fraction of successes would be 50%. Although fraction of successes is broadly useful throughout statistics, within ML, this metric is primarily useful for measuring verifiable tasks like code generation or math problems.