كيف تقيّم وكيل ذكاء اصطناعي عربي أصيل
تقريباً كل مزوّد يبيع في الخليج اليوم يقول إنه يدعم العربي، لكن قليل منهم يقصدون نفس الشي. هذا الدليل يعطيك ثمان اختبارات نشغّلها لو كنا مكانك — كل واحد منها مصمَّم يكشف الشات بوت المترجَم خلال دقيقتين.
نُشر في
ليه «يدعم العربي» مو مواصفة
النموذج اللي تدرّب أغلبه على الإنجليزي وبعدين توجّه لنص عربي بيطلع بفصحى سليمة نحوياً، لكنها بتبين مثل تعميم حكومي. عملاؤك ما يكتبون لك بالفصحى — يكتبون بالسعودي أو الخليجي، نصها بحروف لاتينية، وباسم منتج إنجليزي في نص الجملة.
الفجوة بين الاثنين هي المكان اللي تغلط فيه أغلب التقييمات: الديمو مكتوب بفصحى نظيفة، كل شي يشتغل، وبعدين التجربة تصطدم بصندوق واتساب حقيقي. عشان كذا اطلع بالديمو عن نصه بدري وبشكل متكرر.
الاختبار 1 — اللهجة، مو بس العربي
أرسل للوكيل ثلاث رسايل مكتوبة بالطريقة اللي يكتبون بها عملاؤك فعلاً: واحدة بالسعودي، وواحدة بالمصري، وواحدة بالشامي. الوكيل الشاطر يرد على الثلاث بدون ما ينقل العميل للفصحى وبدون ما يطلب منه يعيد الصياغة.
راقب أسلوب الرد مو بس دقته. الوكيل اللي يرد على سؤال عفوي بلهجة رسمية جامدة فهم الكلمات وغلط في الشخص.
الاختبار 2 — التنقل بين اللغتين جوّا نفس الجلسة
ابدأ بالعربي، واسأل سؤال المتابعة بالإنجليزي، وبعدين ارجع للعربي. لازم الوكيل يحمل السياق كامل عبر الأدوار الثلاث بدون ما يعيد ضبط الجلسة أو يعيد السؤال أو يجاوب على السؤال الثاني بلغة السؤال الأول.
هذا أكثر إخفاق شائع في الإنتاج، لأن أغلب الأنظمة تتعامل مع اللغة كإعداد للجلسة بدل ما تكون خاصية لكل رسالة.
الاختبار 3 — الأرقام والتواريخ والمبالغ
اسأل عن طلب صار «الخميس اللي راح» وشوف هل يحل الوكيل التاريخ على التقويم الهجري أو الميلادي — وهل يوضّح أي واحد استخدم. اطلب سعر وتأكد إن الريال يطلع صحيح جوّا جملة من اليمين لليسار، وإن الأرقام بالاتجاه اللي يتوقعه عميلك.
النص ثنائي الاتجاه هو المكان اللي ينكسر فيه الدعم العربي السطحي بشكل واضح: الأسعار تنقلب، وأرقام الطلبات تنشطر، والعميل يفقد ثقته قبل ما يخلّص القراءة.
الاختبار 4 — الأسماء والكتابة اللاتينية
عطِ الوكيل اسم مكتوب بالطريقتين — عبدالرحمن و Abdulrahman — في نفس المحادثة، وتأكد إنه يعاملهم كشخص واحد. وبعدين اطلب منه يكتب الاسم في حقل جوّا الـ CRM وشوف أي صيغة يختار.
توحيد الهوية عبر الأبجديتين موضوع مو لامع، لكنه هو اللي يحدّد إذا كان الـ CRM بينتهي بسجل واحد أو سجلين.
الاختبار 5 — الاستناد للمصدر ورفض اللي ما يعرفه
اسأل عن باقة أو خصم أو سياسة ما تقدّمها أصلاً. الجواب الصحيح هو «هذا مو متوفر عندنا» بوضوح، مع أقرب بديل حقيقي إذا فيه. الوكيل اللي يخترع جواب عربي معقول هنا بيخترعه قدّام عميل.
اسأل نفس السؤال المُختلَق مرتين، بالعربي وبالإنجليزي. بعض الأنظمة تستند زين بالإنجليزي وتهلوس بالعربي، لأن فهرس الاسترجاع انبنى على مستندات إنجليزية بس.
الاختبار 6 — التصعيد مع السياق الكامل
افرض حالة تصعيد وبعدين شوف وش يستلم الموظف البشري. نص المحادثة كامل بالعربي والإنجليزي، والنية المحدّدة، وسؤال العميل الفعلي — هذا تسليم يشتغل. أما تذكرة مكتوب فيها «العميل يحتاج مساعدة» فهي طابور بخطوات زيادة.
اسأل بالتحديد: هل الملخص المسلَّم للموظف مكتوب بلغة شغله هو، مو بلغة العميل؟
الاختبار 7 — الصوت، إذا كان ضمن النطاق
جودة النص ما تقول شي عن جودة المكالمة. خلّ الوكيل يدق على جوال واسمع ثلاث أشياء: التأخير قبل أول كلمة، وكيف يتصرف لما تقاطعه في نص الجملة، وهل النبرة العربية تشبه إنسان أو نظام رد آلي.
وبعدين اسأل وش يصير لما يكون الخط مزعج، لأن مكالمة المتابعة الحقيقية تصير والعميل في السيارة.
الاختبار 8 — وش يسوي بعد ما تخلص المحادثة
المحادثة هي النص الظاهر بس. اطلب من المزوّد يعرض الكتابة العكسية: السجل في الـ CRM، والحقل في الـ ERP، والاسترجاع وهو منفَّذ فعلاً. واطلب سجل التدقيق لهذا الإجراء، جوّا نظام أنت تشغّله اليوم.
الوكيل اللي يتكلّم زين وما يكتب شي نقل مشكلتك من صندوق الوارد للطابور، وخلّى الشغل اليدوي في مكانه بالضبط.