SQuAD: Más de 100,000 preguntas para la comprensión de texto por máquinas

Presentamos el Stanford Question Answering Dataset (SQuAD), un nuevo conjunto de datos de comprensión lectora que consiste en más de 100,000 preguntas formuladas por trabajadores en línea sobre un conjunto de artículos de Wikipedia, donde la respuesta a cada pregunta es un segmento de texto del pasaje de lectura correspondiente. Analizamos el conjunto de datos para entender los tipos de razonamiento requeridos para responder las preguntas, apoyándonos en árboles de dependencia y constituyentes. Construimos un fuerte modelo de regresión logística, que alcanza un puntaje F1 de 51.0%, una mejora significativa sobre una línea base simple (20%). Sin embargo, el desempeño humano (86.8%) es mucho mayor, indicando que el conjunto de datos representa un buen problema desafiante para investigaciones futuras. El conjunto de datos está disponible gratuitamente en https://stanford-qa.com