Also known as: Typologically Diverse Question Answering (TyDi QA) · TyDi QA · Typologically Diverse Question Answering TyDi QA
Typologically Diverse Question Answering (TyDi QA) es un benchmark para evaluar sistemas de respuesta a preguntas en lenguas lingüísticamente diversas. Está diseñado para comprobar si los modelos pueden manejar estructuras lingüísticas variadas más allá de conjuntos de datos centrados en el inglés.
A large dataset for evaluating an LLM's proficiency in answering questions. The dataset contains question and answer pairs in many languages. For details, see TyDi QA: A Benchmark for Information-Seeking Question Answering in Typologically Diverse Languages.