Caesar AI Atlas

Full Softmax (Полный softmax)

Caesar AI Atlas Definition

Full softmax — стандартное вычисление softmax по всем кандидатным классам или токенам. Он противопоставляется выборочным методам, таким как candidate sampling, которые приближают обучение, рассматривая только подмножество отрицательных классов.

Other Definitions

Full Softmax (Полный softmax) Source

Synonym for softmax. Contrast with candidate sampling. See Neural networks: Multi-class classification in Machine Learning Crash Course for more information.

Related Terms