كيف تقيّم وكيل ذكاء اصطناعي عربي أصيل
تقريباً كل مزوّد يبيع في الخليج اليوم يقول إنه يدعم العربية، لكن قلة قليلة تقصد الشيء نفسه. هذا الدليل يعطيك ثمانية اختبارات نشغّلها لو كنا في مكانك — كل واحد منها مصمَّم ليكشف الشات بوت المترجَم خلال دقيقتين.
نُشر في
لماذا "يدعم العربية" ليست مواصفة
النموذج الذي دُرِّب في معظمه على الإنجليزية ثم وُجِّه إلى نص عربي سيخرج بعربية فصحى سليمة نحوياً، لكنها ستبدو كتعميم حكومي. عملاؤك لا يكتبون لك بالفصحى — يكتبون باللهجة السعودية أو الخليجية، نصفها بحروف لاتينية، وباسم منتج إنجليزي في منتصف الجملة.
الفجوة بين الاثنين هي المكان الذي تُخطئ فيه معظم التقييمات: العرض التوضيحي مكتوب بفصحى نظيفة، كل شيء يعمل، ثم تصطدم التجربة بصندوق واتساب حقيقي. لذلك اخرج بالعرض عن نصه مبكراً وبشكل متكرر.
الاختبار ١ — اللهجة، لا مجرد العربية
أرسل للوكيل ثلاث رسائل مكتوبة بالطريقة التي يكتب بها عملاؤك فعلاً: واحدة بالسعودي، وواحدة بالمصري، وواحدة بالشامي. الوكيل الكفء يرد على الثلاث دون أن ينقل العميل إلى الفصحى ودون أن يطلب منه إعادة الصياغة.
راقب أسلوب الرد لا دقته فقط. الوكيل الذي يرد على سؤال عفوي بلهجة رسمية جامدة فهم الكلمات وأخطأ الشخص.
الاختبار ٢ — التنقل بين اللغتين داخل الجلسة نفسها
ابدأ بالعربي، اسأل سؤال المتابعة بالإنجليزي، ثم ارجع للعربي. لازم الوكيل يحمل السياق كاملاً عبر الأدوار الثلاثة دون أن يعيد ضبط الجلسة أو يعيد السؤال أو يجيب على السؤال الثاني بلغة السؤال الأول.
هذا أكثر إخفاق شائع في الإنتاج، لأن معظم الأنظمة تتعامل مع اللغة كإعداد للجلسة بدل أن تكون خاصية لكل رسالة.
الاختبار ٣ — الأرقام والتواريخ والمبالغ
اسأل عن طلب تم "الخميس اللي راح" وشوف هل يحل الوكيل التاريخ على التقويم الهجري أو الميلادي — وهل يوضّح أيهما استخدم. اطلب سعراً وتأكد أن الريال يظهر بشكل صحيح داخل جملة من اليمين إلى اليسار، وأن الأرقام بالاتجاه الذي يتوقعه عميلك.
النص ثنائي الاتجاه هو المكان الذي ينكسر فيه الدعم العربي السطحي بشكل مرئي: تنقلب الأسعار، وتنشطر أرقام الطلبات، ويفقد العميل ثقته قبل أن ينهي القراءة.
الاختبار ٤ — الأسماء والكتابة اللاتينية
أعطِ الوكيل اسماً مكتوباً بالطريقتين — عبدالرحمن و Abdulrahman — في المحادثة نفسها، وتأكد أنه يعاملهما كشخص واحد. ثم اطلب منه كتابة الاسم في حقل داخل الـ CRM وشوف أي صيغة يختار.
توحيد الهوية عبر الأبجديتين موضوع غير لامع، لكنه هو الذي يحدد إن كان الـ CRM سينتهي بسجل واحد أو سجلين.
الاختبار ٥ — الاستناد للمصدر ورفض ما لا تعرفه
اسأل عن باقة أو خصم أو سياسة لا تقدّمها أصلاً. الإجابة الصحيحة هي "هذا غير متوفر لدينا" بوضوح، مع أقرب بديل حقيقي إن وُجد. الوكيل الذي يخترع إجابة عربية معقولة هنا سيخترعها أمام عميل.
اسأل السؤال المُختلَق نفسه مرتين، بالعربي وبالإنجليزي. بعض الأنظمة تستند جيداً بالإنجليزية وتهلوس بالعربية، لأن فهرس الاسترجاع بُني على مستندات إنجليزية فقط.
الاختبار ٦ — التصعيد مع السياق الكامل
افرض حالة تصعيد ثم انظر ماذا يستلم الموظف البشري. نص المحادثة كاملاً بالعربي والإنجليزي، والنية المحددة، وسؤال العميل الفعلي — هذا تسليم يعمل. أما تذكرة مكتوب فيها "العميل يحتاج مساعدة" فهي طابور بخطوات إضافية.
اسأل تحديداً: هل الملخص المسلَّم للموظف مكتوب بلغة عمله هو، لا بلغة العميل؟
الاختبار ٧ — الصوت، إن كان ضمن النطاق
جودة النص لا تقول شيئاً عن جودة المكالمة. خلِّ الوكيل يتصل على جوال واستمع لثلاثة أشياء: التأخير قبل أول كلمة، وكيف يتصرف حين تقاطعه في منتصف الجملة، وهل النبرة العربية تشبه إنساناً أو نظام رد آلي.
ثم اسأل ماذا يحدث حين يكون الخط مزعجاً، لأن مكالمة المتابعة الحقيقية تحصل والعميل في السيارة.
الاختبار ٨ — ماذا يفعل بعد انتهاء المحادثة
المحادثة هي النصف الظاهر فقط. اطلب من المزوّد أن يعرض الكتابة العكسية: السجل في الـ CRM، والحقل في الـ ERP، والاسترداد وقد نُفِّذ فعلاً. واطلب سجل التدقيق لهذا الإجراء، داخل نظام تشغّله أنت اليوم.
الوكيل الذي يتكلم جيداً ولا يكتب شيئاً نقل مشكلتك من صندوق الوارد إلى الطابور، وترك العمل اليدوي في مكانه تماماً.