أداة لقياس الظهور في الذكاء الاصطناعي تنشر منهجيتها وهامش الخطأ لكل درجة
ينشر AIVisib طريقة القياس كاملة، بمعادلاتها وحدودها، ويعرض هامش الخطأ لكل درجة. يُطرح كل سؤال على كل محرك في 3 جولات، وتُعرض كل نتيجة مع دقتها (±) ومجال ثقة ويلسون.
لماذا نحتاج إلى هامش الخطأ
محركات الذكاء الاصطناعي لا تعطي الإجابة نفسها مرتين. ولذلك تتغير الدرجة المحسوبة من عدد قليل من الإجابات من تلقاء نفسها: في 30 إجابة، درجة 23% تعني في الواقع «بين 12% و41%». ومن دون هامش الخطأ لا تستطيع أن تعرف هل الارتفاع تقدم حقيقي أم مجرد تقلب.
ما الذي نعرضه
- هامش الخطأ لكل درجة: مثلاً «23%، بهامش ± 5 نقاط».
- عدد الإجابات التي حُسبت منها الدرجة.
- مؤشر ثقة للتقرير كله.
- ما تغيّر فعلاً من أسبوع إلى آخر، مع استبعاد التغيرات الصغيرة التي لا يُعتمد عليها.
ما الذي ننشره
- المنهجية كاملة: كيف تُطرح الأسئلة، وكيف يُحتسب ذكر العلامة، والمعادلات، والحدود.
- قياسات حقيقية بأرقامها.
- حدود القياس بوضوح: نقيس كل أسبوع لا كل يوم، والفحص المجاني على 18 إجابة يبقى لقطة واحدة.
كيف يتم القياس
- يُطرح كل سؤال من أسئلة المشترين في 3 جولات على ChatGPT، Gemini، Perplexity، Claude، في جلسة محايدة ومع البحث في الويب.
- تُقرأ كل إجابة وتُصنَّف: هل ذُكرت العلامة أم لا، وترتيبها، والمنافسون، والمصادر.
- نتحقق من أن اسم العلامة موجود فعلاً في الإجابة، حتى لا نحتسب ذكراً لم يحدث.
- تُحسب الدرجة وهامشها، ثم تُقارن بالأسبوع السابق.
الأسئلة الشائعة
ما هامش الخطأ في التقرير؟
يتوقف على عدد الإجابات. في بضع مئات من الإجابات أسبوعياً، الفرق الذي يقل عن ثماني نقاط لا يكون له معنى في الغالب. ويعرض التقرير الهامش الدقيق.
لماذا القياس أسبوعي وليس يومياً؟
الرقم اليومي المحسوب من إجابات قليلة يتحرك عدة نقاط دون سبب. أما ثلاث جولات لكل سؤال مرة في الأسبوع فتعطي رقماً أكثر ثباتاً.
هل طريقة العمل منشورة للجميع؟
نعم، كاملة، في صفحة المنهجية.
لتعرف كيف تميّز التغيّر الحقيقي من التقلب، اقرأ دليل درجات الظهور في الذكاء الاصطناعي. انظر أيضاً: المحركات الأربعة المشمولة، الفحص المجاني.