اتهام جوجل باستخدام مبتدئين للتحقق من صحة إجابات Gemini

لا جدال في أن الذكاء الاصطناعي لا يزال يعاني من بعض اللحظات غير الموثوقة، ولكن المرء يأمل أن تكون تقييماته دقيقة على الأقل. ومع ذلك، زُعم أن جوجل أصدرت تعليمات الأسبوع الماضي للعاملين المتعاقدين الذين يقيمون برنامج جيميني بعدم تخطي أي مطالبات، بغض النظر عن خبرتهم، وفقًا لتقارير TechCrunch استنادًا إلى الإرشادات الداخلية التي اطلعت عليها.

شاركت جوجل معاينة لبرنامج جيميني 2.0 في وقت سابق من هذا الشهر.

يُقال إن جوجل أصدرت تعليمات لشركة GlobalLogic، وهي شركة خارجية يقوم المتعاقدون معها بتقييم الناتج الناتج عن الذكاء الاصطناعي، بعدم جعل المراجعين يتخطىون المطالبات خارج نطاق خبرتهم. في السابق، كان بإمكان المتعاقدين اختيار تخطي أي مطالبة تقع بعيدًا عن خبرتهم - مثل سؤال طبيب عن القوانين. كانت الإرشادات تنص على "إذا لم تكن لديك خبرة حاسمة (مثل الترميز والرياضيات) لتقييم هذه المطالبة، فيرجى تخطي هذه المهمة".

الآن، يُقال إن المتعاقدين تلقوا تعليمات مفادها "لا ينبغي لك تخطي المطالبات التي تتطلب معرفة متخصصة بالمجال" وأن عليهم "تقييم أجزاء المطالبات التي تفهمها" مع إضافة ملاحظة تفيد بأنها ليست مجالاً لديهم معرفة فيه. من الواضح أن الأوقات الوحيدة التي يمكن فيها للعقود تخطيها الآن هي إذا كانت هناك كمية كبيرة من المعلومات مفقودة أو إذا كانت تحتوي على محتوى ضار يتطلب نماذج موافقة محددة للتقييم.

استجاب أحد المتعاقدين بشكل مناسب للتغييرات قائلاً، "اعتقدت أن الهدف من التخطي هو زيادة الدقة من خلال منحها لشخص أفضل؟"

بعد وقت قصير من نشر هذه المقالة لأول مرة، قدمت Google لـ Engadget البيان التالي: "يقوم المصنفون بأداء مجموعة واسعة من المهام عبر العديد من منتجات ومنصات Google المختلفة. إنهم يقدمون ملاحظات قيمة حول أكثر من مجرد محتوى الإجابات، ولكن أيضًا حول الأسلوب والتنسيق وعوامل أخرى. لا تؤثر التقييمات التي يقدمونها بشكل مباشر على خوارزمياتنا، ولكن عند أخذها في المجموع، فهي نقطة بيانات مفيدة لمساعدتنا في قياس مدى جودة عمل أنظمتنا."

كما أشار متحدث باسم Google إلى أن اللغة الجديدة لا ينبغي بالضرورة أن تؤدي إلى تغييرات في دقة Gemini، لأنهم يطلبون من المصنفين تقييم أجزاء المطالبات التي يفهمونها على وجه التحديد. يمكن أن يوفر هذا ملاحظات حول أشياء مثل مشكلات التنسيق حتى لو لم يكن لدى المصنف خبرة محددة في الموضوع. كما أشارت الشركة إلى إصدار هذا الأسبوع لمعيار FACTS Grounding الذي يمكنه التحقق من استجابات LLM للتأكد من "أنها ليست دقيقة من الناحية الواقعية فقط فيما يتعلق بالمدخلات المقدمة، ولكنها أيضًا مفصلة بما يكفي لتقديم إجابات مرضية لاستفسارات المستخدم".

المصدر: بوابة الوفد