משוב לשאלות רב־ברירה: איך לומדים מתשובה שגויה?

איך לומדים אחרי תשובה שגויה בשאלת רב־ברירה?

קוראים קודם את התשובה הנכונה ואת ההסבר. משווים אותם לסיבה שבגללה נבחרה האפשרות השגויה. סוגרים את ההסבר ומנסחים את ההבדל המרכזי מהזיכרון. ראיית האפשרות הנכונה מזהה את הטעות; הפקת תשובה עצמאית בודקת אם ההבחנה הובנה. אם עדיין אי אפשר להסביר את ההבדל, חוזרים לחומר המקור לפני ניסיון נוסף.

משוב יכול לסייע לתקן הבנה שגויה ולהעריך בצורה מציאותית את הידע. עם זאת, מחקר בהקשר הוראה אוניברסיטאי לא מצא יתרון כללי של תרגול רב־ברירה על פני קריאה חוזרת. ההשפעה שנצפתה הייתה תלויה גם בקלות השליפה בשאלות התרגול. לכן תוצאת המחקר אינה הבטחה לכל תחום או לכל מבחן שנוצר באמצעות AI.מקור Greving, S.; Lenhard, W.; Richter, T. (2023). The Testing Effect in University Teaching: Using Multiple-Choice Testing to Promote Retention of Highly Retrievable Information. Teaching of Psychology 50(4). https://doi.org/10.1177/00986283211061204 · ברשימת המקורות

מה אפשר ללמוד מאפשרות שגויה?

מסיח הוא אפשרות תשובה שגויה. אם בחרתם בו, מתעדים יותר מאשר את הציון. שואלים איזו הנחה הובילה לבחירה: סימן שהוחלף, תנאי שנשכח, הגדרה דומה או שלב בחישוב שלא בוצע. סוג הטעות קובע איזה הסבר צריך בהמשך. טעות קריאה אינה מחייבת אותו תרגול כמו חוסר הבנה של המושג.

אוסף תרגול שימושי כולל אפשרויות סבירות אך שגויות בצורה ברורה. כל אפשרות צריכה להתייחס לאותה מטרת למידה ולהציג בלבול אפשרי. כללים לכתיבת שאלות רב־ברירה עוסקים בבהירות, בניסוח וברמזים לא מכוונים בין השאלה לאפשרויות. לאחר הבדיקה מנסים להסביר למה המסיח שגוי בלי להסתכל במפתח התשובות.מקור Haladyna, T.M.; Downing, S.M. (1989). A Taxonomy of Multiple-Choice Item-Writing Rules. Applied Measurement in Education 2(1), 37-50. https://doi.org/10.1207/s15324818ame0201_3 · ברשימת המקורות

איך נראה משוב שעוזר לתקן טעות?

משתמשים בסדר קבוע: קוראים שוב את השאלה, מזהים את הפרט הקובע, משווים את האפשרויות ורק אז פותחים את ההסבר או המקור. מנסחים מדוע התשובה הנכונה מתאימה ומדוע הבחירה שלכם אינה מתאימה. כך מפרידים בין פער בידע, החמצת תנאי והחלטה מהירה מדי. ההסבר צריך לציין את ההבחנה, ולא רק להציג שוב את האפשרות הנכונה.

לא קושרים את התשובה למיקום שלה על המסך. בסבב מאוחר יותר משנים את סדר האפשרויות או עונים על שאלה דומה בלי לראות אותן. אם עדיין מנחשים, מתרגלים את המושג בשליפה חופשית לפני שחוזרים לרב־ברירה. כאשר השאלה חוזרת בניסוח חדש, הסבר נכון של ההבחנה שימושי יותר מזיכרון של האות שנבחרה.

מה המחקר אומר על מבחני רב־ברירה?

Greving, Lenhard ו־Richter בדקו שאלות רב־ברירה בקורס אוניברסיטאי אמיתי. המשתתפים יכלו לחזור לחלקים מחומר הלמידה לאחר התרגול. הם ביקשו משוב מתקן עבור 9 אחוזים בלבד מהפריטים שתורגלו.

במבחן הסופי לא נמצא יתרון כללי על קריאה חוזרת; השפעה הופיעה במידע שהמשתתפים שלפו בקלות יחסית בשאלות התרגול. הממצא מתאר את מסגרת המחקר המסוימת.מקור Greving, S.; Lenhard, W.; Richter, T. (2023). The Testing Effect in University Teaching: Using Multiple-Choice Testing to Promote Retention of Highly Retrievable Information. Teaching of Psychology 50(4). https://doi.org/10.1177/00986283211061204 · ברשימת המקורות

הממצא אינו הופך רב־ברירה לחסרת שימוש. הוא מראה למה כדאי שסביבת התרגול תציע משוב פעיל והסבר ברור. בחירה נכונה יכולה לנבוע מידע, מזיהוי או מניחוש. בחירה שגויה יכולה להצביע על ידע חסר או על שאלה דו־משמעית. הסבר וניסיון שליפה נוסף עוזרים להבחין בין המקרים במקום לפרש את הציון לבדו.

מה מאפיין שאלת רב־ברירה טובה?

שאלה טובה בודקת מטרת למידה אחת ומוגדרת. הניסוח כולל את התנאים הדרושים לפתרון חד־משמעי. האפשרויות דומות ברמת הפירוט, מתאימות מבחינה דקדוקית ואינן מכילות רמזים נסתרים. אם השאלה מוצגת כשאלה עם תשובה נכונה יחידה, בדיוק אפשרות אחת צריכה להיות נכונה לפי חומר הלמידה. ניחוש לפי אורך האפשרות אינו אותה משימה כמו שליפת המושג.מקור Haladyna, T.M.; Downing, S.M. (1989). A Taxonomy of Multiple-Choice Item-Writing Rules. Applied Measurement in Education 2(1), 37-50. https://doi.org/10.1207/s15324818ame0201_3 · ברשימת המקורות

למשל, שאלה על עליית הלחץ בגז אידיאלי כאשר הטמפרטורה עולה והנפח וכמות הגז קבועים יכולה לבדוק קשר בין גדלים. האפשרויות צריכות לייצג הבדלים אמיתיים בהסבר. המשוב מציין איזה גודל נשאר קבוע ומהו הקשר שנבדק. הודעה שאומרת רק שגוי אינה משלימה את השלב הזה. אם אותה שאלה מתפרשת בשתי דרכים, מתקנים את התנאים ולא מאשימים אוטומטית את הלומד.

מתי כדאי להסתיר את אפשרויות התשובה?

אפשרויות עוזרות בתחילת הלמידה כאשר ממיינים מושגים. בהמשך מסתירים אותן ומנסחים תשובה עצמאית. בשאלת חישוב משלימים את הפתרון בלי להסתכל באפשרויות. הבדיקה הזאת חושפת אם יודעים לשלוף את החומר או רק לזהות ניסוח מוכר. גם תשובה שנאמרה בקול או צוירה על נייר יכולה לשמש לניסיון עצמאי, בהתאם למטרת הקורס.

מחקר על תרגול שליפה כולל גם משימות ללא אפשרויות. Roediger ו־Karpicke השוו קריאה חוזרת לבדיקה חוזרת במשימת לימוד טקסט מסוימת. אי אפשר להעביר את התוצאות ישירות לכל פורמט רב־ברירה. המדריך למבנה קובץ ייבוא ל־Anki עוסק בארגון שאלות ותשובות קיימות לפני התרגול.מקור Roediger, H.L.; Karpicke, J.D. (2006). Test-Enhanced Learning: Taking Memory Tests Improves Long-Term Retention. Psychological Science 17(3), 249-255. https://doi.org/10.1111/j.1467-9280.2006.01693.x · ברשימת המקורות

איך בודקים שאלות רב־ברירה שנוצרו באמצעות AI?

מוודאים קודם שהמקור תומך בתשובה הנכונה. בודקים גם אם מסיח יכול להיות נכון בטעות ואם ההסבר מציין את ההבדל החשוב. AI יכול לסייע לנסח טיוטה, אבל הוא אינו מחליף בדיקה מקצועית. אם השאלה דורשת ידע מחוץ לחומר, מציינים זאת או מתקנים אותה. מדריך האיכות והמקורות מפרט את ההבחנה בין קישור למקור לבין נכונות התשובה.

Quanta מתארת יצירת כרטיסיות ומבחני רב־ברירה מחומר לימוד ואת סביבת הכרטיסיות בעמודי המוצר. לפני תחילת מבחן בודקים את השאלות ואת ההסברים שנשמרו. מכסות יצירה תלויות במסלול; אין להניח שכל מבחן חדש זמין ללא הגבלה.

בדוגמה לכרטיסיות ממצגות לימוד מוצגים כל נתוני המקור, אפשרות נכונה ושלושה מסיחים מוסברים. אפשר לעבור על כל אפשרות בנפרד, להסביר את הטעות ולפתור שוב בלי לראות את הטבלה. ההצלחה בתרגיל אחד אינה מדידה של הצלחה במבחן אחר; היא בדיקה ממוקדת של אותה הבחנה.