- Descripción :
El conjunto de datos de clasificación de preguntas de la Conferencia de recuperación de texto (TREC) contiene 5500 preguntas etiquetadas en el conjunto de entrenamiento y otras 500 para el conjunto de prueba. El conjunto de datos tiene 6 etiquetas, 47 etiquetas de nivel 2. La longitud promedio de cada oración es 10, el tamaño del vocabulario es de 8700. Los datos se recopilan de cuatro fuentes: 4500 preguntas en inglés publicadas por la USC (Hovy et al., 2001), alrededor de 500 preguntas construidas manualmente para algunas clases raras, 894 TREC 8 y TREC 9 preguntas, y también 500 preguntas de TREC 10 que sirve como conjunto de prueba.
Documentación adicional : Explore en Papers With Code
Página de inicio: https://cogcomp.seas.upenn.edu/Data/QA/QC/
Código fuente :
tfds.datasets.trec.Builder
Versiones :
-
1.0.0
(predeterminado): Sin notas de la versión.
-
Tamaño de la descarga :
350.79 KiB
Tamaño del conjunto de datos :
636.90 KiB
Almacenamiento automático en caché ( documentación ): Sí
Divisiones :
Dividir | Ejemplos |
---|---|
'test' | 500 |
'train' | 5,452 |
- Estructura de características :
FeaturesDict({
'label-coarse': ClassLabel(shape=(), dtype=int64, num_classes=6),
'label-fine': ClassLabel(shape=(), dtype=int64, num_classes=47),
'text': Text(shape=(), dtype=string),
})
- Documentación de características :
Característica | Clase | Forma | Tipo D | Descripción |
---|---|---|---|---|
CaracterísticasDict | ||||
etiqueta gruesa | Etiqueta de clase | int64 | ||
etiqueta-bien | Etiqueta de clase | int64 | ||
texto | Texto | cadena |
Claves supervisadas (Ver
as_supervised
doc ):None
Figura ( tfds.show_examples ): no compatible.
Ejemplos ( tfds.as_dataframe ):
- Cita :
@inproceedings{li-roth-2002-learning,
title = "Learning Question Classifiers",
author = "Li, Xin and
Roth, Dan",
booktitle = "{COLING} 2002: The 19th International Conference on Computational Linguistics",
year = "2002",
url = "https://www.aclweb.org/anthology/C02-1150",
}
@inproceedings{hovy-etal-2001-toward,
title = "Toward Semantics-Based Answer Pinpointing",
author = "Hovy, Eduard and
Gerber, Laurie and
Hermjakob, Ulf and
Lin, Chin-Yew and
Ravichandran, Deepak",
booktitle = "Proceedings of the First International Conference on Human Language Technology Research",
year = "2001",
url = "https://www.aclweb.org/anthology/H01-1069",
}