AI Solutions · تعمّق
قاعدة معرفة RAG: إجابات مرتكزة على المصادر، لا مُختلقة
نبني قواعد معرفة تُجيب فقط من مصادر موثَّقة: استرجاع هجين، ارتكاز على المستندات، استشهادات قابلة للتتبُّع، التحكم في الهلوسة، وتقييم مستمر لجودة الإجابات. حين لا يكفي المصدر، يُصرّح النظام بذلك بدل أن يختلق.
قاعدة المعرفة · استرجاع موثَّق
يدخل · سؤال المستخدم
يخرج · إجابة مستشهَدة وقابلة للتحقق
استيعاب مصدر الحقيقة وتقطيعه
يُطبّع المستندات المصدر ويقسّمها إلى شذرات متماسكة مُحجَّمة بحسب نوع المحتوى، مُرفِقًا بكل شذرة بيانات وصفية للمصدر — العنوان، القسم، التاريخ، الصلاحيات — تصير أساسًا للاستشهادات والتحكم في الوصول: بلا استيعاب نظيف، يستشهد كل ما يليه بالهواء.
استرجاع هجين (كلمات مفتاحية + دلالي)
يجمع بحثًا بالكلمات المفتاحية (BM25) يلتقط أكواد المنتجات والأسماء العَلَم والمصطلحات النادرة الدقيقة مع بحث دلالي متّجهي يلتقط إعادات الصياغة والمفاهيم، دامجًا مجموعتي النتائج بالرتبة (RRF) لاسترجاع ما لا يجده أيٌّ منهما وحده.
إعادة ترتيب قائمة مختصرة
يُعيد مُعيد ترتيب من نوع cross-encoder ترتيب القائمة القصيرة الضيّقة لأفضل المرشّحين فقط بتقييم السؤال والمقطع معًا لا منفصلين، مُضيفًا مرحلة دقة تبقى دقيقة تحديدًا لأنها تعمل على شذرات قليلة لا على الفهرس كله.
توليد موثَّق مع استشهادات
يُجيب النموذج حصرًا من أعلى القائمة القصيرة ويستشهد بمصدر كل ادّعاء، فتبقى كل جملة قابلة للتتبُّع إلى مستند ونسخة وقسم بدل الغرق في ذاكرة التدريب.
فحص التوثيق والملاءمة / الامتناع
قبل التسليم، يقارن فحصُ ارتكازٍ وملاءمةٍ الإجابةَ بالمقاطع المُسترجَعة: دون العتبة، يمتنع النظام أو يُعيد الاسترجاع أو يُحيل إلى شخص، لأن «ليس في المصادر» الصادق أثمن من اختلاق محتمل.
تقييم جودة الإجابة وحداثتها
تُقاس الوفاء وملاءمة السياق وملاءمة الإجابة ودقة الاستشهادات وحداثة الفهرس باستمرار، لأن درجة واحدة تُخفي أين تكمن المشكلة، والقاعدة الموثوقة يجب إبقاؤها نزيهة بينما تتغيّر المستندات والصلاحيات.
علامات قاعدة معرفة تختلق
المساعد الذي يُجيب بثقة لا قيمة له إن لم تكن تلك الثقة مرتكزة على مصدر. هذه هي الأعراض التي نراها قبل أن نتدخّل.
- واثق لكنه مُخطئ. يؤكّد النظام بنبرة جازمة أشياء لا ترد في أي مستند داخلي: ذلك ارتكاز مفقود، لا خطأ مطبعي.
- لا استشهادات قابلة للتحقق. لا يستطيع المستخدم تتبُّع جملة إلى مصدرها، فلا يثق بها ولا يصحّحها؛ كل إجابة صندوق أسود.
- محتوى قديم يُقدَّم كأنه حالي. سياسة حُدِّثت الأسبوع الماضي ليست بعدُ في الفهرس، والنظام لا يزال يستشهد بالنسخة القديمة بالثقة نفسها.
- تسرّبات في المحيط. يتلقّى مستخدم شذرات من مستندات لم يكن له حق رؤيتها في النظام المصدر.
- أسئلة خارج النطاق بلا مكبح. حين تقصر المصادر، يملأ النموذج الفراغ بالاختلاق بدل التصريح بأنه لا يعرف.
للفرق التي تدير توثيقًا حسّاسًا أو دعمًا أو امتثالًا أو معرفة داخلية ولا يمكنها تحمُّل إجابة مُختلقة أمام عميل أو مدقّق.
استرجِع أولًا، ثم وَلِّد
النموذج التوليدي المتروك لنفسه يتنبّأ بنص محتمل. قاعدة معرفة RAG تقلب الترتيب: تسترجع الأدلة من مصادرك أولًا، ثم تُلزِم النموذج بالإجابة ضمن تلك الأدلة فقط.
الاسترجاع المعزَّز بالتوليد (RAG)
قبل الإجابة، يبحث النظام في المستندات عن المقاطع ذات الصلة ويسلّمها للنموذج كسياق مع تعليمات بالإجابة من هناك فقط. يتوقّف النموذج عن الاعتماد على ذاكرة التدريب ويعتمد على مصدرك المرجعي.
الارتكاز ≠ الصحة
يتحقّق الارتكاز من أن الإجابة وفيّة للنص المُسترجَع، لا من أنها صحيحة على الإطلاق. إذا جلب الاسترجاع الشذرة الخاطئة، فإن درجة ارتكاز عالية تعني فقط أن النموذج كرّر الخطأ بأمانة — لذلك يجب التعامل مع الاسترجاع والتقييم كمشكلتين منفصلتين.
مصدر الحقيقة، لا نسخة
الفهرس لا يستبدل أنظمتك المصدر؛ بل يعكسها. حين يتغيّر مستند في الأصل، يجب أن يتغيّر الفهرس معه، وإلا كذبت قاعدة المعرفة بثقة بشأن ما هو صحيح اليوم.
الامتناع ميزة، لا عيب
قاعدة المعرفة الموثوقة تعرف أن تقول «هذا ليس في المصادر». امتناع صادق خير من إجابة مُختلقة: القيمة المؤسسية في ألّا تُخطئ، لا في أن تُجيب دائمًا.
من المصدر إلى الإجابة المستشهَد بها
كل طبقة تُضيّق ما يُسمح للنموذج بقوله. الخط ليس نموذجًا واحدًا: إنه سلسلة من الضوابط، لكل منها مهمة قابلة للقياس.
تُطبَّع المستندات وتُقسَّم إلى شذرات متماسكة مُحجَّمة بحسب نوع المحتوى: تُجزَّأ السياسة على نحو يختلف عن ورقة المواصفات. تحمل كل شذرة بيانات وصفية للمصدر — العنوان، القسم، التاريخ، الصلاحيات — تصير أساسًا للاستشهادات والتحكم في الوصول.
بحث بالكلمات المفتاحية (BM25) يلتقط أكواد المنتجات والأسماء العَلَم والمصطلحات النادرة الدقيقة؛ وبحث دلالي متّجهي يلتقط إعادات الصياغة والمفاهيم. تُدمج مجموعتا النتائج بالرتبة (RRF)، فتسترجعان ما لا يجده أيٌّ منهما وحده.
يُرتّب مُعيد ترتيب من نوع cross-encoder أفضل المرشّحين القلائل بتقييم السؤال والمقطع معًا، لا منفصلين. إنها مرحلة دقة ثانية تعمل على قائمة قصيرة، لا على الفهرس كله — لذلك هي دقيقة دون أن تكون بطيئة.
يُجيب النموذج فقط من أعلى القائمة القصيرة ويستشهد بمصدر كل ادّعاء. قبل التسليم، يقارن فحصُ ارتكازٍ وملاءمةٍ الإجابةَ بالمقاطع: دون العتبة، يمتنع النظام أو يُعيد الاسترجاع بدل النشر.
من المصدر إلى الإجابة المستشهَد بها في أجزاء من الثانية، مع كل ادّعاء قابل للتتبُّع إلى مقطع.
المقاييس التي تفصل القاعدة الموثوقة عن المحتملة
تُقيَّم قاعدة المعرفة على أبعاد منفصلة، لأن درجة واحدة تُخفي أين تكمن المشكلة. هذه هي الروافع التي نراقبها باستمرار.
| البُعد | ماذا يفحص | لماذا يهمّ |
|---|---|---|
| Faithfulness (الوفاء) | كل ادّعاء في الإجابة مدعوم بالمقاطع المُسترجَعة | المكبح المباشر للهلوسة: لا مصدر، لا ادّعاء |
| ملاءمة السياق | المقاطع المُسترجَعة وثيقة الصلة فعلًا بالسؤال | يقيس الاسترجاع: إن كان ضعيفًا، فحتى إجابة وفيّة تكون وفيّة للخطأ |
| ملاءمة الإجابة | الإجابة تتناول فعلًا السؤال المطروح دون تشتُّت | تفصل ما هو وثيق الصلة عمّا هو صحيح عمومًا لكنه عديم الفائدة |
| دقة الاستشهادات | كل استشهاد يشير إلى المقطع الذي يدعم الجملة حقًّا | يجعل الإجابة قابلة للتحقق: يعود المستخدم إلى المصدر ويتحقّق |
| Freshness | الفهرس يعكس الحالة الراهنة للمستندات المصدر | فهرس بائت يُنتج إجاباتٍ واثقة لكنها خاطئة اليوم |
الضوابط التي نُبقيها عاملة في الإنتاج
بناء الخط نصف العمل. النصف الآخر هو إبقاؤه نزيهًا عبر الزمن، بينما تتغيّر المستندات والصلاحيات والأسئلة.
التحكم في الوصول داخل الاسترجاع
الصلاحيات مرشِّح على البيانات الوصفية وقت البحث: مستند لا يستطيع المستخدم رؤيته في الأصل لا يظهر أبدًا في النتائج. محيط الأمان يسافر مع البيانات.
الفهرسة التزايدية
حين يتغيّر مصدر، يُعاد معالجة ما تغيّر فقط ويُحدَّث الفهرس بمعرّفات ثابتة. لا إعادات بناء كاملة، ولا نوافذ تُجيب فيها القاعدة من نسخ قديمة.
عتبات الامتناع
دون عتبة الارتكاز أو الملاءمة، لا تنطلق الإجابة: يُصرّح النظام بأنه لا يعرف، أو يُعيد الاسترجاع، أو يُحيل إلى شخص. قاعدة النطاق صريحة، لا متروكة للصدفة.
المنشأ ومصدر الحقيقة
تحمل كل إجابة معها منشأ ادّعاءاتها — أيُّ مستند، أيُّ نسخة، أيُّ قسم — بروح معايير منشأ المحتوى المفتوحة مثل C2PA: تاريخ الادّعاء قابل للتحقق.
قاعدة المعرفة الموثوقة ليست تلك التي تُجيب دائمًا — بل تلك التي لا تُجيب حين لا ينبغي لها.
ما تسأله الفرق قبل أن نبدأ
هل يُلغي RAG الهلوسة تمامًا؟
لا، واحذر ممّن يَعِدُ بذلك. إنه يقلّلها جوهريًّا بإرساء كل إجابة على مصادر حقيقية، وفحوص الارتكاز مع عتبات الامتناع توقف الإجابات غير المدعومة قبل خروجها. الهدف إجابة قابلة للتحقق، لا عمل إيماني.
ماذا يحدث حين لا تكون الإجابة في المستندات؟
يُصرّح النظام بذلك. نُحدّد معك قاعدة النطاق: امتناع صريح، أو إعادة استرجاع، أو تصعيد إلى شخص. «ليس في المصادر» الصادق خير من اختلاق محتمل.
كيف تبقى الإجابات محدَّثة؟
عبر الفهرسة التزايدية: حين يتغيّر مستند في الأصل، يُحدَّث الفهرس للجزء المتغيّر فقط، دون إعادة بناء كاملة. الـ freshness مقياس نراقبه، لا حدثًا عرضيًّا.
ملاحظات الحالات
من المشكلة إلى النتيجة — مجهّلة.
وثائق مُستشهَد بها، لا متخيَّلة
المشكلة كان مساعد الدعم يُجيب بثقة عن البنود وحدود التغطية معتمدًا على نسخ وثائق متجاوَزة، دون سبيل للموظف لتتبُّع جملة إلى مصدرها.
المنهج استيعاب «مصدر الحقيقة» ببيانات وصفية للنسخة والقسم، استرجاع هجين على شروط العقد، توليد مُرتكِز يستشهد بكل بند، وعتبة امتناع حين لا يدعم المقطع الإجابة.
النتيجة تحمل كل إجابة معها مستندها ونسختها وقسمها؛ وحين لا تكون المعلومة في المصادر يُصرّح النظام بذلك بدل الاختلاق، ويمكن للموظف التحقق قبل التحدُّث إلى العميل.
أوراق مواصفات بلا تسرّبات محيط
المشكلة كانت قاعدة المعرفة الداخلية تُعيد لمهندسين من أقسام مختلفة شذرات من توثيق مقيَّد لم يكن لهم حق رؤيته في النظام المصدر.
المنهج تحكُّم في الوصول كمرشِّح على البيانات الوصفية وقت الاسترجاع — محيط الأمان يسافر مع البيانات — مع تجزئة بحسب نوع المحتوى تُجزّئ ورقة المواصفات على نحو يختلف عن الإجراء.
النتيجة مستند لا يستطيع المستخدم رؤيته في الأصل لا يظهر أبدًا في النتائج؛ تبقى الإجابات مُستشهَدًا بها وقابلة للتحقق دون كشف مواد خارج المحيط.
إجراءات محدَّثة إلى الأسبوع الصحيح
المشكلة كانت الإجراءات السريرية تتغيّر كثيرًا، لكن فهرسًا يُعاد بناؤه على جدول كان يترك نوافذ يستشهد فيها النظام بالنسخة القديمة بالثقة نفسها للنسخة الحالية.
المنهج فهرسة تزايدية بمعرّفات ثابتة تُعيد معالجة ما يتغيّر في الأصل فقط، مع معاملة الـ freshness كمقياس مُراقَب باستمرار إلى جانب الوفاء ودقة الاستشهادات.
النتيجة لا إعادات بناء كاملة ولا نوافذ انحراف: يعكس الفهرس الحالة الراهنة للمستندات، وتكفّ الإجابات عن كونها واثقة لكنها خاطئة اليوم.
تعمّق أكثر