Devin מוסיפה ציון יעילות ובקרות על תקציב העבודה של סוכני קוד
Cognition הציגה ב-Devin את Efficiency Score, אישור אוטומטי להוצאה נוספת ו-Devin Coach. הציון מנסה להעריך שעות הנדסה יצרניות ביחס לצריכת ACU, אך זהו מדד של הספק ולא מדידה אובייקטיבית של ביצועי עובדים. לפני שמחברים אותו למדיניות תקציב, כדאי להגדיר בדיקות תוצאה, הרשאות ושמירת נתונים שבשליטת הצוות.
מערכת אוטומציה · ניתוח פורסם
פרסום המקור: · Cognition / Devin
מה השתנה ב-Devin
ב-19 באוקטובר Cognition הציגה שלוש יכולות: Efficiency Score, בקרות על הוצאה המבוססות על הציון ו-Devin Coach. לפי החברה, הציון מעריך שעות הנדסה יצרניות של סשנים, כולל חקירה ותכנון גם בלי יצירת PR, ביחס לצריכת ACU. זו טענת ספק ולא בדיקה עצמאית שלנו.
למי זה עשוי לעזור ומה מחליטים
צוותים שמנהלים שימוש של כמה מפתחים עשויים לקבל מנגנון להקצאת תקציב נוסף לפי כללים. לפי החברה, לקוחות Devin Enterprise יכולים לאפשר אישור אוטומטי להוצאה נוספת למשתמשים עם דירוג Healthy או Satisfactory; בקשות אחרות מנותבות לאדמין עם סיבה, יעילות, תמהיל מודלים וצריכה. ההחלטה החשובה היא לא אם לסמוך על הציון, אלא איזה סכום, משתמש וסוג פעולה רשאים לעבור ללא אישור אנושי ומה מחייב בדיקת תוצאה.
המגבלה של מדד הספק
שעות יצרניות משוערות מול ACU אינן שקולות לערך עסקי, לאיכות קוד או לביצועי עובד. סשן חקירה ארוך עשוי למנוע תקלה, ותוצאה קצרה עשויה להיראות יעילה בלי להיות נכונה. מדד של ספק אינו תחליף למדידה בהקשר של הצוות שלכם. אין להשתמש בציון לבדו להערכת עובדים, לתגמול או לשלילת גישה.
רשימת בדיקה לפריסה
המלצת המערכת: הגדירו מראש תוצאות שניתנות לבדיקה, כגון בדיקות שעברו, זמן עד מיזוג ושיעור חזרה של תקלות, והשוו אותן לעלות. קבעו סף הוצאה ומסלול אישור, תעדו מי יכול לשנות את המדיניות ובדקו שהאדמין רואה את ההקשר הדרוש. הגבילו הרשאות, הגדירו תקופת שמירת נתוני שימוש ומחיקה, והתחילו בפיילוט שבו הציון הוא אות תקציבי אחד בלבד. בדקו לאחר כמה שבועות אם הוא מסייע להחלטות בלי ליצור תמריצים לעבודה שנראית יעילה בלבד.