בדיקת חיבור למודל
לא כל מודל שפה מתאים ל-Klacksy — עליו לספק באופן אמין קריאות פונקציה מובנות במקום להשיב בפרוזה. תחת הגדרות > בדיקת מודל Klacksy, Klacks בודק זאת אוטומטית עבור כל המודלים המוגדרים.
איך זה עובד
הבדיקה: לחיצה על "מציאת המודלים הטובים ביותר" שולחת לכל מודל מוגדר (גם למודלים מושבתים) את אותה משימת בדיקה קטנה: "צור עובד חדש בשם Anna Müller." המודל חייב להשיב לכך בקריאת פונקציה מובנית מתאימה ובפרמטרי שם נכונים — לא בתשובת טקסט. בנוסף חלון ההקשר חייב לכלול לפחות 32,000 טוקנים, כדי שהנחיית המערכת והיכולות של Klacksy יכנסו. כל בדיקה פועלת עם מגבלת זמן של 30 שניות.
תוצאה: מודלים העומדים בשני הקריטריונים נחשבים "מתאימים" ומופעלים אוטומטית; מודלים לא מתאימים מושבתים. רשימת התוצאות ממוינת לפי התאמה, ואז לפי יכולת קריאת פונקציה, עלות, זמן תגובה וחלון הקשר.
קביעת מודל ברירת מחדל: באמצעות "כברירת מחדל" אתם בוחרים ישירות מרשימת התוצאות איזה מודל Klacksy ישתמש בו מעתה כברירת מחדל. ללא בחירה עצמאית, Klacks קובע אוטומטית את המודל המתאים ביותר כברירת מחדל.
טוב לדעת
- הבדיקה בודקת את כל המודלים המוגדרים, לא רק את המופעלים — כך גם מודלים שהיו מושבתים עד כה יכולים להיות מופעלים אם הם עוברים את הבדיקה.
- בדיקה שעברה בהצלחה אינה הגנת עלות: מודלים יקרים אך מתאימים גם הם מופעלים. העלות לכל 1000 טוקנים גלויה ברשימת התוצאות.
- בדיקה זו מיועדת ספציפית לקריאות פונקציה לצורך יכולת פעולה, ואינה תלויה בבדיקת המודל בהגדרות הקול, המסתפקת בחלון הקשר נמוך יותר לצורך ניקוי תמלול בלבד.
התנסו ישירות: Klacks Playground — התחברות admin@test.com / P@ssw0rt1, הנתונים מתאפסים מדי יום.