شبكة عصبية التفافية لنمذجة الجمل

القدرة على تمثيل الجمل بدقة أمر مركزي لفهم اللغة. نصف هنا بنية التفافية تسمى الشبكة العصبية الالتفافية الديناميكية (DCNN) التي نعتمدها للنمذجة الدلالية للجمل. تستخدم الشبكة تجميع k-الأقصى الديناميكي، وهي عملية تجميع شاملة على تسلسلات خطية. تتعامل الشبكة مع جمل دخل بأطوال متفاوتة وتُحدث رسمًا بيانيًا للميزات على الجملة قادرًا على التقاط العلاقات القصيرة والطويلة النطاق بشكل صريح. لا تعتمد الشبكة على شجرة تحليل نحوي ومن السهل تطبيقها على أي لغة. نختبر DCNN في أربع تجارب: التنبؤ بالعاطفة الثنائية والصنوف المتعددة صغيرة النطاق، وتصنيف الأسئلة ذات الستة فئات، والتنبؤ بالعاطفة في تويتر بواسطة الإشراف البعيد. تحقق الشبكة أداءً ممتازًا في المهام الثلاثة الأولى وتقليل خطأ أكثر من 25% في المهمة الأخيرة مقارنة بأقوى الخطوط الأساسية.