قياس مؤرخ مع الأصفار: ماذا أظهر منتجنا
لماذا يحتاج قياس إجابات الذكاء الاصطناعي إلى تاريخ وإلى الأسئلة والمساعدين أنفسهم قبل العمل وبعده، ولماذا نُبقي الأصفار. مثال: ShotBook.
نُشر في
دقائق القراءة: 3
باختصار
- لا يمكن التحقق من رقم عن إجابات الذكاء الاصطناعي إلا بثلاثة أمور: التاريخ، والأسئلة، وقائمة مساعدي الذكاء الاصطناعي.
- تُكتب الأسئلة والمساعدون قبل البدء ولا تتغير بين القياسات، وكل سؤال يُطرح في محادثة جديدة.
- تبقى الأصفار في التقرير: فمن دونها لا يكون هناك ما يُقارن به. لدى ShotBook أعطت خمسة فحوص متتالية 0 من 46، وأعطى الفحص السادس، في 7 سبتمبر 2026، 10 من 46.
عبارة «بدأ الذكاء الاصطناعي يذكر الشركة أكثر» قد تعني أي شيء. لا يمكن التحقق من ادعاء كهذا إلا بثلاثة أمور: التاريخ، والأسئلة، وقائمة مساعدي الذكاء الاصطناعي.
إليكم لماذا يهم كل منها، وكيف تبدو سلسلة قياسات على منتجنا الخاص، مع الأصفار.
ما هو القياس الواحد
القياس الواحد يعني أن نطرح على مساعدي الذكاء الاصطناعي المختارين أسئلة عملائكم، بكلماتهم ودون اسم الشركة، وكل سؤال في محادثة جديدة.
لكل إجابة نسجّل من يذكره ومن أين يأخذ الإجابة. والنتيجة رقم لكل مساعد: كم إجابة من أصل كم ذكرت الشركة.
لماذا التاريخ
الرقم دون تاريخ لا يمكن التحقق منه ولا مقارنته: فلا تعرفون أي لحظة يصف. وإجابات الذكاء الاصطناعي تتغير - ومثال ShotBook أدناه يُظهر صفرًا يتحول إلى رقم آخر. لهذا لا نعرض أرقامًا دون تاريخ القياس.
والتاريخ يمنع أيضًا أن يُقدَّم رقم قديم على أنه رقم اليوم.
لماذا الأسئلة نفسها والمساعدون أنفسهم
لا تصح المقارنة بين ما قبل وما بعد إلا إذا لم يتغير شيء آخر. استبدلوا سؤالًا بآخر أسهل، وقد يأتي النمو من الصياغة. أضيفوا مساعدًا كان يعرفكم من قبل، ويحدث الشيء نفسه.
قبل
بعد
لذلك تُكتب الأسئلة والمساعدون قبل البدء، ولا نغيّرهم بين القياسات. كل سؤال يُطرح في محادثة جديدة، حرفيًا. وما يُعدّ نتيجة يُكتب قبل البدء أيضًا.
لماذا نعرض الأصفار
الصفر هو نقطة البداية: إنه الطريقة الوحيدة لمعرفة ما إذا تغير شيء. والصفر إجابة صادقة عن سؤال «هل ينجح العمل؟».
لا نخفي الأصفار: إذا ظل الذكاء الاصطناعي لا يذكركم، فستكونون أول من يعلم.
تبقى الأصفار في التقرير، وأنتم تقررون ما إذا كنتم ستواصلون.
مثال: ShotBook
ShotBook منتجنا الخاص ودراسة حالة علنية، وهو كتالوج مقاطع فيديو مرجعية للمخرجين والمونتيرين. قسنا كم مرة ذكر الذكاء الاصطناعي ShotBook.
كم مرة ذكر الذكاء الاصطناعي ShotBook
0من 46
10من 46
الأصفار الخمسة ليست جزءًا محرجًا من القصة ينبغي حذفه. فمن دونها لا يكون للفحص السادس ما يُقارن به.
ما لا تُظهره هذه السلسلة
سبب تحوّل الصفر إلى عشرة. القياس يسجّل ما تغيّر في إجابات الذكاء الاصطناعي، لا السبب. والرقم المسجّل في 7 سبتمبر 2026 يصف 7 سبتمبر 2026، لا ما يجيب به الذكاء الاصطناعي اليوم.
صفرنا نحن
نطبّق النهج نفسه على أنفسنا. في 2 أكتوبر 2026، حين كنا لا نزال نُعرف باسم shyash.ai، طرحنا على مساعدي الذكاء الاصطناعي أسئلة مشترين عن خدمتنا، دون اسمنا. لم يذكرنا أي منهم: 0 من 96 إجابة.
هذا الصفر هو نقطة البداية. سنُجري القياس التالي بالأسئلة نفسها باسمنا الجديد aigo، وسنحتسب أيضًا أي ذكر لاسمنا السابق shyash.ai.
- إجابة ذكرت اسمنا، قياس 2 أكتوبر 2026
- 0من96
ما الذي تسألون عنه في أي قياس
عندما يعرض عليكم أحد نموًا في إجابات الذكاء الاصطناعي، اسألوا:
- في أي تاريخ أُجري كل قياس؟
- ما الأسئلة التي طُرحت، وهل كان فيها اسم الشركة؟
- أي مساعدي الذكاء الاصطناعي، وهل كانوا أنفسهم قبل العمل وبعده؟
- هل طُرح كل سؤال في محادثة جديدة؟
- ماذا أظهر القياس الأول، حتى لو كان صفرًا؟
إذا لم تحصلوا على إجابات، فلا سبيل للتحقق من الرقم.
الأسئلة نفسها، ومساعدو الذكاء الاصطناعي أنفسهم، ومحادثات جديدة. نعرض عليكم الفرق. والأصفار أيضًا.