Supabase משיקה Evals: בנצ'מרק קוד פתוח חדש
סופאבייס משיקה את Evals, כלי בנצ'מרק בקוד פתוח הבוחן סוכני קידוד כמו Claude Code וCodex במשימות סופאבייס אמיתיות. הכלי מספק נתוני ביצועים מעשיים.
חברת Supabase, ספקית פלטפורמת קוד פתוח לבסיסי נתונים, חשפה לאחרונה את 'Evals' – כלי בנצ'מרק חדש בקוד פתוח. הכלי נועד לבחון את היכולות של מודלי קידוד מתקדמים כמו Claude Code, Codex וOpenCode, על ידי ביצוע משימות Supabase אמיתיות בסביבות מכולות (קונטיינרים). הוא מודד את ביצועיהם במשימות כמו בניית סכימות, איתור באגים ותיקון מדיניות אבטחה (RLS), תוך שימוש בבדיקות דטרמיניסטיות ובגישת 'LLM כשופט'.
השקת Evals מספקת כלי חשוב למפתחים וחברות סטארטאפ ישראליות המשתמשות בSupabase או מתכננות לשלב כלי AI בפיתוח שלהן. היכולת להעריך באופן אובייקטיבי את ביצועי מודלי הקידוד במשימות יומיומיות, מאפשרת קבלת החלטות מושכלות יותר בבחירת כלי AI לפיתוח. זהו צעד משמעותי לקראת אימוץ יעיל יותר של בינה מלאכותית בתהליכי פיתוח תוכנה בישראל ובעולם.
קריאה נוספת ←