על AIQ Pulse
AIQ Pulse הוא שאלון קצר של iverse שבודק איך אנשים עובדים בפועל עם בינה מלאכותית, ועד כמה הם מוכנים לעבודה בעולם שבו AI הוא חלק מכל תפקיד. הוא מבוסס על AIQ, מתודולוגיית ההערכה של iverse, שבה מרואיינים מספרים על מקרים אמיתיים ומקבלים ציון לפי קריטריונים התנהגותיים מוגדרים.
מאיפה הגיעו השאלות
כל פריט בשאלון נבנה מתוך הקריטריונים של ראיון ה-AIQ ומתוך ניתוח של 541 תשובות פתוחות שמרואיינים נתנו בראיונות AIQ. בדקנו מה מבדיל בין תשובה חלשה לתשובה חזקה בכל קריטריון, והפכנו את ההבדלים לפריטים:
- היגדים (17). משפטים על התנהגות קונקרטית, שעונים עליהם בסולם של חמש דרגות. חלק מההיגדים מתארים את ההתנהגויות הנדירות שאפיינו תשובות חזקות, וחלק מתארים דפוסים נפוצים של תשובות חלשות, בניסוח שקל להסכים איתו.
- תרחישים (7). מצב עבודה אמיתי וארבע דרכי פעולה. כל הארבע סבירות, וההבדל ביניהן הוא באיכות לפי הקריטריונים.
- אתגרים (6). בדיקה ישירה של מיומנות: איזו בקשה לצ'אט תביא את התוצאה הטובה ביותר, מה ההודעה הבאה הנכונה, איזה כלי מתאים למשימה.
שבעת המימדים
| מימד | מה נבדק |
|---|
איך מחושב הציון
כל פריט מקבל ציון בין 0 ל-1. בהיגדים הציון נקבע לפי מידת ההסכמה, ובהיגדים ההפוכים הסולם מתהפך. בתרחישים ובאתגרים לכל אפשרות יש ניקוד בין 0 ל-3. תרחישים ואתגרים שוקלים פי שלושה מהיגד, כי הם מראים שיקול דעת בפועל, מעבר לתיאור עצמי.
ציון של מימד הוא הממוצע המשוקלל של הפריטים שלו, בסולם 0 עד 100. הציון הכללי הוא הממוצע של שבעת המימדים, והוא מומר לסולם סטנַיין (Stanine) של 1 עד 9: סולם מקובל בהערכה תעסוקתית שבו 5 הוא אמצע הסולם, ובערך 4% מהאנשים מגיעים לכל אחד מהקצוות.
הנורמות כרגע ראשוניות. נקודות החיתוך נקבעו בסימולציה של אוכלוסייה עובדת, ונבדקו מול דפוסי מענה מוכרים: מי שעונה באקראי מקבל בערך 3, ומי שמסכים לכל ההיגדים אבל בוחר באקראי בתרחישים מקבל בערך 5. ככל שיצטברו תוצאות אמיתיות, הנורמות יעודכנו לפיהן.
מה הציון אומר ומה לא
AIQ Pulse נותן תמונה מהירה של הרגלי עבודה ושיקול דעת בעבודה עם AI. הוא מבוסס על דיווח עצמי ועל בחירה בין אפשרויות, ולכן הוא אינו תחליף לראיון ה-AIQ המלא ואינו הסמכת AIQ. הסמכת AIQ מלאה היא ראיון של 15 עד 30 דקות שמפיק ציון מאומת. עוד על הסמכת AIQ
פרטיות
- אין הרשמה, ואין צורך בשם, טלפון או מייל כדי לעשות את השאלון.
- התשובות והציון נשמרים באופן אנונימי, לצורכי מחקר, סטטיסטיקה ועדכון הנורמות.
- שם ותפקיד נשמרים רק אם בוחרים להפיק תעודה. הם מופיעים בדף האימות של התעודה, יחד עם הציון, הפרופיל ותאריך ההנפקה, וכל מי שמחזיק בקישור יכול לראות אותם.
- לבקשה למחוק תעודה, אפשר לפנות ל-iverse דרך האתר ולציין את מזהה התעודה.