روبوت RAG
التوليد المعزّز بالاسترجاع هو الطريقة القياسية لجعل روبوت المحادثة يجيب من محتواكم لا من ذاكرته. وهذا كيف يعمل فعلاً، وأين يفشل في الإنتاج، وماذا نفعل حيال كل إخفاق.
معظم شروح RAG تتوقّف عند المسار المثالي. وعمود الإخفاق هو ما يحدّد إن كان روبوتكم جديراً بالثقة في الشهر السادس.
تُقرأ مستنداتكم وتُوحَّد صيغها: ملفات PDF، ومقالات مركز المساعدة، وجداول البيانات، وسجلّات قواعد البيانات.
أين يفشلما يدخل رديئاً يخرج رديئاً. قوائم أسعار ملغاة وسياسات نصف حالية تدخل مع الجيّدة، ولا شيء بعدها يستطيع التمييز بينها.
تُقسَّم المستندات الطويلة إلى مقاطع صغيرة بما يكفي لاسترجاعها بدقّة وكبيرة بما يكفي لتظلّ مفهومة وحدها.
أين يفشلالمقاطع تُقطع في منتصف الشرط، فيقول المقطع المسترجَع «لا ينطبق هذا إذا» ويكون الشرط في المقطع التالي الذي لم يُجلب قطّ.
كل مقطع يصبح متّجهاً، فيستطيع النظام إيجاد النصّ بالمعنى لا بالكلمة المفتاحية.
أين يفشلالتشابه الدلالي ليس صحّة. مقطعان عن الاسترجاع المالي، أحدهما حالي والآخر من ٢٠٢٣، يبدوان متطابقين تقريباً لفهرس المتّجهات.
يُضمَّن السؤال بالطريقة نفسها، وتُسحب أقرب المقاطع سياقاً للإجابة.
أين يفشلالنتيجة الأولى قريبة لكنها خاطئة، أو المقطع الصحيح يأتي رابعاً فيُقطع. هنا تفشل معظم روبوتات RAG بصمت.
يجيب النموذج مستخدماً المقاطع المسترجَعة، لا ما استوعبه أثناء التدريب.
أين يفشلمع سياق ضعيف، سينتج النموذج إجابة واثقة رغم ذلك. الاسترجاع لا يمنع الاختلاق، إنما يجعله أقلّ احتمالاً.
تحمل الإجابة المقاطع التي استُخدمت، ويُتحقّق منها مقابلها قبل أن تصل إلى أحد.
أين يفشلتخطّي هذه الخطوة هو الاختصار الأشيع، ولهذا لا تستطيع كثير من عمليات نشر RAG أن تخبركم لماذا قالت ما قالت.
من يقول لكم إن RAG يحلّ الهلوسة يبيع شيئاً. فمع سياق ضعيف سينتج النموذج إجابة واثقة، وهذا ما بُني لأجله. وما يسدّ الفجوة المتبقّية هو مقارنة الإجابة بالمقاطع التي استرجعها، والرفض حين يكون الدعم واهياً. هذا قرار تصميم نظام، لا خاصية تحصلون عليها مجاناً بإضافة قاعدة بيانات متّجهات.
شاهدوا ما نبنيه فوقهالأسئلة الشائعة
لا، ومن يدّعي غير ذلك يبالغ في البيع. إنه يقلّلها كثيراً بإعطاء النموذج النصّ الصحيح ليجيب منه. وما يسدّ الفجوة المتبقّية هو التحقّق من الإجابة مقابل مصادرها والرفض حين يكون الدعم ضعيفاً، وهذا قرار تصميم نظام لا خاصية في RAG.
للأسئلة الواقعية على محتوى يتغيّر، نعم: تحدّثون مستنداً بدل إعادة التدريب. أمّا الضبط الدقيق فأداة أفضل لتعليم النبرة أو الصياغة أو مهمّة ضيّقة. كلٌّ منهما يحلّ مشكلة مختلفة وليسا منافسين حقاً.
أقلّ ممّا يتوقّع الناس، والجودة أهمّ بكثير من الكمّية. خمسون صفحة دقيقة وحالية ومنظّمة تتفوّق على ألف صفحة مختلطة الأعمار، وتلك الألف عادةً أسوأ من لا شيء، لأنها تُسترجع بثقة.
نعم، ولمعظم الأنشطة هناك تكمن الإجابات القيّمة. حالة الطلب والتوفّر وحالة الحساب استعلامات لا استرجاعات. والبناء الجيّد يستخدم الاثنين ويعرف متى يلجأ لأيّهما.
يعتمد على الحجم وعلى كم استرجاع تحتاجه كل إجابة. نحن نعطي سعر بناء وسعر تشغيل شهري ثابت قبل بدء أي عمل، فلا تتعرّضون لفاتورة بالرمز لا تستطيعون توقّعها.
احجزوا مكالمة مجانية
ثلاثون دقيقة، بلا عرض بيعي. تخرجون بإجابة صريحة عمّا إذا كان الوكيل الذكي سيفيد عملكم، سواء بنيتموه معنا أو لا.
لن نضعكم في سلسلة رسائل متابعة. إن لم يكن الأمر مناسباً نقول ذلك وينتهي الموضوع.