SQuAD: Más de 100,000 preguntas para la comprensión automática de texto

Presentamos el Stanford Question Answering Dataset (SQuAD), un nuevo conjunto de datos de comprensión lectora que consta de más de 100,000 preguntas formuladas por trabajadores en línea sobre un conjunto de artículos de Wikipedia, donde la respuesta a cada pregunta es un segmento de texto del pasaje correspondiente. Analizamos el conjunto de datos para entender los tipos de razonamiento necesarios para responder las preguntas, apoyándonos en gran medida en árboles de dependencia y constitución. Construimos un sólido modelo de regresión logística, que alcanza una puntuación F1 del 51.0%, una mejora significativa sobre una línea base simple (20%). Sin embargo, el desempeño humano (86.8%) es mucho mayor, lo que indica que el conjunto de datos representa un buen desafío para investigaciones futuras. El conjunto de datos está disponible gratuitamente en https://stanford-qa.com