נבדקים שינויים בשימוש ב-SWE-Bench Pro – האם הוא עדיין אמין?

OpenAI פרסם ניתוח חדש שדרבן את שאלות בנוגע לפעילות של SWE-Bench Pro, שעשוי להיתפס כיעילות לאיכותיות בהערכה של מודלים מכונה. חששות על אמינותו של השינוי נגרמים במיוחד על ידי OpenAI.

מקור: OpenAI News — לכתבה המלאה

Comments

כתיבת תגובה

האימייל לא יוצג באתר. שדות החובה מסומנים *

עוזר האתר מודל מקומי · gemma2
שלום! 👋 אני העוזר החכם של האתר, רץ על מודל מקומי בשרת. איך אפשר לעזור?