126 ע בין דיוק מדעי לחדשנות טכנולוגית: הערכת תוכן שנוצר באמצעות בינה מלאכותית יוצרת )מאמר קצר( הדביקו כאן את נוסח השאלה/תשובה שיוצרה על ידי ChatGPT קריטריונים להערכה -1 רמה נמוכה מאוד -2 רמה נמוכה -3 רמה בינונית -4 רמה טובה -5 רמה טובה מאוד מדעי מוכר, ללא שגיאות עובדתיות? מידת הבהירות הלשונית עד כמה השאלה/תשובה מנוסחת באופן ברור, מובנת, ונכונה תחבירית? הערכה מספרית: 1-2-3-4-5 הסבר כתוב להערכה: ____________________________________________________ ________________________________________________ מידת התאמה לתכנית הלימודים האם השאלה/תשובה מותאמת מבחינת רמת תוכן, שפה ואוצר מילים לתלמידים בחטיבת - ביניים? הערכה מספרית: 1-2-3-4-5 הסבר כתוב להערכה: ____________________________________________________ ________________________________________________ 2 . טופס רפלקציה – נבנה בכדי לענות על שאלת המחקר השנייה ובחן כיצד המורים תופסים שילוב תהליכי הערכה של תוכן שנוצר באמצעות במ " י בהוראה. בסיום הסדנה נאספו 15 תוצרים קבוצתיים )שאלות , תשובות ורפלקציות(, אשר שימשו כבסיס לניתוח המחקרי. ניתוח הנתונים ניתוח הנתונים שילב גישות כמותיות ואיכותניות. בפן הכמותי, עובדו דירוגי המשתתפים באמצעות מבחן וילקוקסון למדגמים תלויים וניתוח בוטסטראפ בייסיאני (Bayesian bootstrap) להערכת מובהקות ההבדלים ועוצמתם. בפן האיכותני, נימוקי ההערכה נותחו בשיטה דדוקטיבית, והרפלקציות בשיטה אינדוקטיבית (Hsieh & Shannon, 2005). מהימנות בין שופטים, שנבחנה על ידי שני מומחים, הניבה מדד קאפה של כהן של .0.91 ממצאים 1 . הערכות המורים את השאלות והתשובות שהופקו ע"י במ"י ניתוח הערכות המורים לשאלות החשיבה מסדר נמוך – דיוק מדעי קיבל את הציון הגבוה ביותר ביחס לשני הקריטריונים האחרים ) M = 4.27, SD = 0.46 .( בהירות לשונית דורג מעט נמוך יותר ) M = 3.93, SD = 0.70 (, כאשר המורים ציינו כי ישנם מונחים שעשויים לדרוש הבהרה: " השאלה מנוסחת באופן תקין מבחינה דקדוקית ומבנית, אך ביטויים כגון 'מודל חלקיקי' יידרשו הסבר " )פיזיקה - קב. 7 ( . הלימה לתוכנית הלימודים דורגה באופן חיובי ) M = 4, SD = 0.65 . ( ניתוח הערכות המורים ל שאלות חשיבה מסדר גבוה – דיוק מדעי דורג באופן חיובי ) M = 4, SD = 0.65 (, לדוגמה, מורי פיזיקה - קב. 8 סברו: " השאלה עוסקת היטב במושגים מרכזיים כגון אינרציה, התנגדות אוויר ואנרגיה...השאלה מדויקת ובעלת היגיון פיזיקלי" . בהירות לשונית דורג נמוך יותר ) M = 3.67, SD = 0.82 (, ו הלימה לתוכנית הלימודים דורג הכי נמוך ) M = 3.47, SD =0.92 (, כאשר סטיית התקן הגבוהה יחסית מצביעה על פערי תפיסות בקרב המורים. חלקם מצאו את השאלות " מתאימות לרמת הגיל ", בעוד אחרים סברו שהשאלה חורגת מרמת המוכנות הקוגניטיבית של תלמידי חטיבת - ביניים . באשר לתשובות, המורים העניקו להן דירוגים חיוביים, אם כי מתונים בהשוואה לשאלות. דיוק מדעי דורג באופן חיובי ) M = 3.87, SD = 0.52 (, בהירות לשונית דורג גבוה ) M = 4.07, SD = 0.70 (, התשובות נתפסו כמנוסחות " באופן ברור וקריא ", גם כאשר היו מורכבות יותר. הלימה לתוכנית הלימודים דורג בינוני ) M = 3.6, SD = 0.83 ,( וסטיית התקן הגבוהה הצביעה על פערי תפיסות. לדוגמה מורי ביולוגיה - קב. 13 ראו בתשובות: " העמקה מועילה המאפשרת הרחבת ידע " , בעוד מורי מתמטיקה - קב. 5 תארו: "המגבלה העיקרית שזיהינו היא חוסר ההתאמה לרמת הכיתה [..] ועלולה ליצור ע ומס קוגניטיבי " .
RkJQdWJsaXNoZXIy Mjk0MjAwOQ==