בתשובה להפונז, 18/05/15 17:37
משרדי ממשלה,מה יהיה עם הדבר הזה 655490
אתם רציניים? חלוקת גרסאות שונות של אותו המבחן כדי להתמודד עם העתקות הייתה פרקטיקה מקובלת ונפוצה בכל המסגרות בהן למדתי אי פעם, מהיסודי ועד האונ'. מה אתם עושים מזה סיפור גדול?

ובכלל, במה זה שונה מהבדלי הקושי בין מועד א' למועד ב', בין סמסטר אביב לסמסטר סתיו, או בין המבחנים של המרצה שמוליק למבחנים של המרצה רותי?

זאת ועוד, במבחנים ממוחשבים בהיקף גדול אין שום בעיה לתת ניקוד ומשקל לשאלות בדיעבד, לפי רמת הקושי האמיתית שלהן, כדי לאזן באופן מדוייק במיוחד את רמות הקושי ולנרמל את הציונים (באופן שמזכיר את מה שנעשה בפסיכומטרי).

זה nonissue.
משרדי ממשלה,מה יהיה עם הדבר הזה 655493
אני לתומי חשבתי שכל הרעיון מאחורי בחינת הבגרות הוא לנטרל את ההבדל בין המבחנים של המורה שמוליק למבחנים של המורה רותי‏1.
שאחרת - מאחר וזה כל כך פשוט וגאוני - הבה נגדיר את ציוני המגן כציונים הסופיים, נחסוך למדינת ישראל כמה מיליארדים על המנגנונים והזמן שמוקדשים לבגרויות, נחסוך למאות אלפי תלמידים כאבי ראש, בטן ושלפוחית, ושלום על ישראל. איך לא חשבו על זה קודם?

"אין שום בעייה לתתניקוד ומשקל לשאלות בדיעבד לפי רמת הקושי האמיתית שלהן" - זה די חדש לי, אשמח לדעת איך עושים זאת. לי זה נראה קשה מאד לבחון את רמת הקושי האמיתית הזאת, ואני גם כבר רואה את תלמידי תיכון הגאון ברעננה מתלוננים על זה שקיבלו פקטור 0.96 מול תלמידי תיכון הבלון מהרצליה שקיבלו פקטור 1.04.

1 מרצים יש באוניברסיטה, וזה לא רלבנטי לענייננו.
משרדי ממשלה,מה יהיה עם הדבר הזה 655495
לכל שאלה מצמידים פקטור שמזיז את הגאוסיאן עד שהמקסימום מתקבל באותה נקודה (ואם ההתפלגות נורמלית כמצופה, הגאוסיאנים יחפפו). אף אחד מהתלמידים לא אמור לדעת איזה פקטור הוצמד לכל שאלה.
משרדי ממשלה,מה יהיה עם הדבר הזה 655496
הוא לא אמור, אבל בעידן המידע של היום שבו - שומו שמיים - לא מצליחים אפילו להסתיר את בחינות הבגרות עצמן מעיני התלמידים הפוחזים, להשיג את הפקטורים האלה יהיה הרבה יותר קל, וזה יקרה.

יתירה מזו, גם לפני הפקטור אתה תראה שורה של מרצי פסיכומטרי ובגרויות חרוצים מנתחים את השאלות ומראים כחול על גבי אתר אינטרנט איך שאלה מס' 1 שלא טור א' היתה הרבה יותר קשה משאלה מס' אחת של טור ב'.
אם רוצים לעשות פרקטיקות של פסיכומטרי, בוא נבטל את הבגרויות ונעשה פסיכומטרי.

אני רוצה להבין - זה לא ברור שאותה שאלה לכולם זאת מדידה שיוויונית יותר מאשר פקטורים ונירמולים למיניהם‏1? לא מושלמת ונתונה לבעיות בגלל פרמטרים אחרים, אבל עדיין יותר טובה מכל הטכניקות שמטרתן לצמצם את השגיאה העודפת שנוצרה בגלל השיטה הזאת.

1 הרי לך בעייה קטנטנה: כשמזיזים את הגאוסיאן של שאלה 1 בטור ב' שלוש נקודות אחורה, כדי לנרמל אותו עם הגאוסיאן של שאלה 1 בטור א' - אזי יכול להיות שהציון המירבי על שאלון ב' יהיה 97 נקודות ולא מאה. כי, מה לעשות, גם מי שענה עליה באופן מושלם, קיבל פקטור שלילי.
משרדי ממשלה,מה יהיה עם הדבר הזה 655497
לא הבעתי דיעה בקשר לרעיון כולו, חשבתי שיש לי תשובה מניחה את הדעת לבעיה אחת שהעלית. אולי טעיתי.

1 המממ. כן, אני חושב שיהיה קשה לנרמל הכל כך שבסוף כל שאלון אכן יסתכם ל-‏100. יובל?
משרדי ממשלה,מה יהיה עם הדבר הזה 655498
1 דוקא לבעיה הספציפית הזאת אני חושב שיש לי תשובה - אתה צריך לנרמל את כולם לגאוסיאן הכי גבוה, ככה שכל הפקטורים שלך הם תמיד מעל אחד.
אבל מן הסתם יש עוד בעיות אחרות שלא חשבנו עליהם בחמש דקות שהקדשנו לכך.
משרדי ממשלה,מה יהיה עם הדבר הזה 655538
אכן, כנראה יש. מאז ההודעה האחרונה חלפה במוחי השאלה מה יקרה אם אחרי כל השקלול שמקנה לכל השאלות גאוסיאן חופף, נחשב את הציון המכסימלי של כל טופס בחינה (וירטואלי) ונשקלל שוב כך שהסיכום יהיה 100. מישהו ייפגע ומישהו אחר ירויח?
משרדי ממשלה,מה יהיה עם הדבר הזה 655544
אני בכלל לא בטוח שאפשר לעשות את מה שאתה מציע:
מצד אחד, נניח שיש 5 שאלות בבחינה, ולכל אחת יש 50 שאלות אופציונליות מתוך המאגר, שנבחרו אקראית.
אז מצד אחד יש לך 250 גאוסיאנים (אחד להתפלגות של כל שאלה מהמאגר), אבל מצד שני יש לך חמישים בחזקת חמש טפסי בחינה אפשריים - בערך 300 מיליארד כאלה. אז אתה לא יכול בעזרת הגאוסיאנים לנרמל את הבחינות.

אם התכוונת שכל בחינה אינדיבידואלית תנורמל - נראה לי סביר מאד שיהיו כאלה שייפגעו: למשל אלה שהציון המקסימלי של הבחינה שלהם יצא 110. עכיו אתה צריך לתת להם פקטור של 0.9 בערך - מה ששוב ימנע אפילו מאיינשטיין‏1 לקבל 100 במבחן הזה.

1 ואל תקנה את המיתוסים על זה שהוא היה תלמיד גרוע.
משרדי ממשלה,מה יהיה עם הדבר הזה 655513
מה ההסתברות שכל הקבוצות יהיו מספיק הומוגניות? אם לא, אתה עלול להקלע לקבוצה של תלמידים מוצלחים מהממוצע והפקטור שלך נמוך מהצפוי.

חזרה לעמוד הראשי המאמר המלא

מערכת האייל הקורא אינה אחראית לתוכן תגובות שנכתבו בידי קוראים