إن SLU الشامل يمر بلحظة، ولكن التعامل مع وضع العلامات على التسلسل كتنبؤ بالتسلسل يؤدي بهدوء إلى التخلص من عقود من آلات وضع العلامات على مستوى الرمز المميز والمفهومة جيدًا. تقترح هذه الورقة تصميمًا تركيبيًا شاملاً لـ SLU يحافظ على بساطة E2E بينما يعيد لك صياغة مستوى الرمز المميز، مكتملًا بالخسائر المعيارية عالميًا على طراز CRF ومراقبة الأداء النظيف لكل مكون. بالنسبة للفرق التي تزن خطوط الأنابيب المتتالية ASR-plus-NLU مقابل E2E المباشر، فهو مسار وسط عملي.

تكمن الحيلة في إدخال وحدة فك ترميز متوسطة مدربة على ASR والتي تحول الكلام إلى تمثيلات على مستوى الرمز المميز قبل تشغيل علامة التمييز NLU، بحيث ترث التوافق مع مكونات ASR وNLU المدربة مسبقًا دون دفع ضريبة انتشار الخطأ للسلسلة الصلبة. عند التعرف على الكيانات المسماة عبر معايير SLU، تفوقت النماذج التركيبية على كل من خطوط الأساس المتتالية والمباشرة E2E. يتجول الغوص العميق عبر البنية، وتصميم إشارة التدريب، وكيف تعود خسائر CRF المقيسة عالميًا إلى الصورة، ولماذا تكون مراقبة الأداء لكل مكون مهمة عندما يتعين عليك تصحيح هذا الشيء في الإنتاج. إذا كنت تقوم بشحن مساعدين صوتيين، أو تحليلات مركز الاتصال، أو أي منتج حيث يوجد ملء الفتحة واكتشاف النوايا أعلى ASR، فهذا يستحق المشاهدة عندما يكون E2E التركيبي على خريطة الطريق الخاصة بك.