1. כל הזכויות שמורות - ד"ר גילה קורץ 2002
הערכת קורסים מקוונים
ד"ר גילה קורץ
כל הזכויות שמורות - ד"ר גילה קורץ 2002

2. איך יודעים שהקורס המקוון היה אפקטיבי?
שאלה לדיון:
איך יודעים שהקורס המקוון היה אפקטיבי?
Question
קורץ/תשס"א
קורץ/תשס"א

3. הערכה
מהי הערכה?
Any systematic method for gathering information about the impact and effectiveness of a learning event. Results of the measurements can be used to improve the learning offering, determine whether the learning objectives have been achieved, and assess the value of the learning event to the organization
קורץ/תשס"א
קורץ/תשס"א

4. הצעה למסגרת הערכת אפקטיביות קורס מקוון
הצעה למסגרת הערכת אפקטיביות קורס מקוון
A. Performance
B. Anxiety
C. Satisfaction
כל הזכויות שמורות - ד"ר גילה קורץ 2002

5. הצעה למסגרת הערכת אפקטיביות קורס מקוון (1)
הצעה למסגרת הערכת אפקטיביות קורס מקוון (1)
A. Performance: 
Achievement = Midterm & final exams grades
Drop rates
Participants interaction = The degree of contact and educational exchange among learners and among learners and instructors 
כל הזכויות שמורות - ד"ר גילה קורץ 2002

6. הצעה למסגרת הערכת אפקטיביות קורס מקוון(2)
הצעה למסגרת הערכת אפקטיביות קורס מקוון(2)
B. Anxiety:
Computer anxiety
Technology comfort
Technology attitudes  
כל הזכויות שמורות - ד"ר גילה קורץ 2002

7. הצעה למסגרת הערכת אפקטיביות קורס מקוון (3)
הצעה למסגרת הערכת אפקטיביות קורס מקוון (3)
C. Satisfaction = Self evaluation of the learning-teaching experience
Motivation
Previous experience with e-learning
Epistemic beliefs about the nature of learning & teaching
Self-efficacy = Participant’s belief in their ability to successfully perform the course
כל הזכויות שמורות - ד"ר גילה קורץ 2002

8. מיהם מושאי ההערכה? הלומדים המלמדים עולם התוכן הנלמד הטכנולוגיה
התהליך לימודי-הוראתי
קורץ/תשס"א
קורץ/תשס"א

9. למי מיועדת ההערכה? מקבלי ההחלטות בארגון צוות ההוראה הערכה קורץ/תשס"א

10. קורסים מתוקשבים: מסגרת מחקרית כללית
רמת המקרו: מהפרספקטיבה הארגונית - היבטים ארגוניים/כלכליים
רמת הביניים: תאור והערכת תהליכים/מודלים הוראתיים לימודיים בקורסים אקדמיים – למשל, השוואה בין מודלים פדגוגיים שונים או בחינה והערכה של אפיק מתוקשב (קבוצות דיון) או אקלים חברתי בקורסים
רמת המיקרו: תאור והערכת תהליכים הוראתיים לימודיים ברמת הקורס(ים) הבודד(ים)
כל הזכויות שמורות - ד"ר גילה קורץ 2002

11. דוגמא למחקר הערכה ברמת המיקרו
השוואה בין הישגי סטודנטים בקורס פנ"פ
לסטודנטים בקורס מתוקשב:
קורס זהה
מרצה זהה
בחינה זהה
קורץ/תשס"א
קורץ/תשס"א

12. מחקר הערכה ברמת המיקרו (המשך)
הממצא הבולט:
הישגי הסטודנטים בקורס המתוקשב היו גבוהים באופן מובהק מתלמידי הקורס פנ"פ
למה???
קורץ/תשס"א
קורץ/תשס"א

13. הערכה
"אין הבדל מובהק"
סקירה מפורסמת של מחקרים וקורסים שהועברו בשיטת הלימוד מרחוק.
המסקנה המרכזית: אין הבדל מובהק בין הקורסים הנלמדים בשיטה הקונבנציונלית לבין קורסים הנלמדים בלימוד מרחוק.
קורץ/תשס"א
קורץ/תשס"א

14. שני סוגי הערכה איכותית ---כמותית מעצבת----מסכמת ונעבור לדוגמאות....
קורץ/תשס"א
קורץ/תשס"א

15. הערכת קורסים מתוקשבים באוניברסיטת בר-אילן
כל הזכויות שמורות - ד"ר גילה קורץ 2002

16. כל הזכויות שמורות - ד"ר גילה קורץ 2002

17. כל הזכויות שמורות - ד"ר גילה קורץ 2002

18. כל הזכויות שמורות - ד"ר גילה קורץ 2002

19. כל הזכויות שמורות - ד"ר גילה קורץ 2002

20. כל הזכויות שמורות - ד"ר גילה קורץ 2002
מטרות הערכה
הערכה מעצבת
הערכה מסכמת
מחקרים חיצונים
(פרויקטנטים, תיזות,דוקטורט)
מחקרים פנימיים (מרצים)
כל הזכויות שמורות - ד"ר גילה קורץ 2002

21. שיטות איסוף נתונים וניתוחם
איסוף נתונים כמותי ואיכותני
מגוון שיטות לאיסוף נתונים:
שאלונים למילוי עצמי Pap
שאלונים למילוי עצמי Online
מפגשים אישיים: פא"פ, טלפון
מפגשים קבוצתיים מקוונים
בחינת התוצאות
אפיקים לא פורמליים
כל הזכויות שמורות - ד"ר גילה קורץ 2002

22. סקר ציפיות סמסטר א'- תשס"ג -מדעי המדינה- תקשורת
סקר ציפיות סמסטר א'- תשס"ג -מדעי המדינה- תקשורת
כל הזכויות שמורות - ד"ר גילה קורץ 2002

23. סקר ציפיות סמסטר א'- תשס"ג -מדעי המדינה- תקשורת
סקר ציפיות סמסטר א'- תשס"ג -מדעי המדינה- תקשורת
סמינריון לתואר שני
מתוקשב במלואו ללא מפגישם פנ"ם (למעט אחד בתחילת השנה)
27 סטודנטים – 11 ענו (65% אחוז הענות)
הוצגו היגדים לבחינת עמדות (סולם 1-5)
הנושאים שנבחנו: עמדות כלפי
הטכנולוגיה המתוכננת
תוכן
אינטראקציות צפויות
עמדות כלפי למידה מתוקשבת בהשוואה לפנ"פ
ממצאים חולקו בדף presentation/ evaluation.doc
כל הזכויות שמורות - ד"ר גילה קורץ 2002

24. ממצאים (2) העדפת שיטת הוראה
ממצאים (2) העדפת שיטת הוראה
כל הזכויות שמורות - ד"ר גילה קורץ 2002

25. ממצאים ראשוניים תחילת תשס"ב n=660 מספר קורסים: 9
כל הזכויות שמורות - ד"ר גילה קורץ 2002

26. מודל לתכנית הערכה שפותח עבור:
דוגמא 2
מודל לתכנית הערכה שפותח עבור:
הכנת חיילי חיל אוויר לקראת לימודים בטכניון בשיטת ה – Blended e-Learning
מאי אוגוסט 2001
קורץ/תשס"א
קורץ/תשס"א

27. הערכה
מטרות ההערכה
לבחון ולהעריך את שיטת הלמידה-הוראה בקורסים, חומרי למידה, הבניית האינטראקציות הלימודיות, לווי הקורס בפועל, מדידת תפוקות ואפקטיביות.
קורץ/תשס"א
קורץ/תשס"א

28. הערכה
מושאי ההערכה
הלומדים
המורים (לא איכות הוראתם! הנחת מוצא שהם מורים טובים)
הסביבה הארגונית (חיל אויר, במצב סמי מלחמה)
קורץ/תשס"א
קורץ/תשס"א

29. הקונספט המתודלוגי של ההערכה
שילוב של הערכה איכותית וכמותית. בשיטות לאיסוף נתונים מגוונות: שאלונים, תצפיות, ריאיונות אישיים וקבוצתיים, נתוני המערכת הטכנולוגית.
קורץ/תשס"א
קורץ/תשס"א

30. הערכה
הערכה איכותית
ליווי והערכת המורים במספר נקודות זמן באמצעות ראיונות אישיים חצי מובנים וכן תצפיות אחר התהליך ההוראתי.
תצפיות בכיתות לימוד על ידי תצפיתנית מהטכניון ותצפיתן מחיל האוויר. נבנתה תכנית להכשרת התצפיתנים.
קורץ/תשס"א
קורץ/תשס"א

31. הערכה
הערכה כמותית
נבנו שני שאלונים ללומדים. האחד, שאלון "לפני" (הועבר במפגש הראשון של הקורס) והשני "אחרי" (הועבר במפגש האחרון של הקורס).
קורץ/תשס"א
קורץ/תשס"א

32. מטרות השאלון "לפני" ללמוד על מאפיינים אישיים של לומדים
הערכה
מטרות השאלון "לפני"
ללמוד על מאפיינים אישיים של לומדים
לבחון מיומנויות טכנולוגיות
עמדות כלפי טכנולוגיה בכלל ולשילובה בתהליך לימודי בפרט
לאמוד מוטיבציה,מניעי רצון להשתתפות, וציפיות
קורץ/תשס"א
קורץ/תשס"א

33. מטרות השאלון "אחרי" שביעות הרצון מהקורס עמדות כלפי:
הערכה
מטרות השאלון "אחרי"
שביעות הרצון מהקורס
עמדות כלפי:
שיטת הלימוד בקורס
הטכנולוגיה
המרצה
תהליכי האינטראקציה בהרצאה הסינכרונית
הערכת תרומת העזרים האודיו ויזואליים
קורץ/תשס"א
קורץ/תשס"א

34. כל הזכויות שמורות - ד"ר גילה קורץ 2002
דוגמאות
ממצאים מרכזיים (1):
לפני (1): לומדים מוטיבציונים – 92% מוטיבציה גבוהה-גבוהה מאד.
לפני (2): הלימוד באמצעות טכנולוגיה כמאתגר
אחרי: ממוצע שביעות רצון כללית: 4 (מתמטיקה) 3 (פיסיקה)
למה ירידה? תנאי לימוד פיסיים ותקלות טכניות
כל הזכויות שמורות - ד"ר גילה קורץ 2002

35. כל הזכויות שמורות - ד"ר גילה קורץ 2002
דוגמאות
ממצאים מרכזיים (2):
המורים זכו לציוני הערכה גבוהים (ממוצע 3.6 ומעלה) בפריטים הרלוונטיים
למידה באמצעות מחשב/טכנולוגיה – רוב מכריע אמר נוחה וידידותית
יתרון אי הצורך לנסוע לכיתה (אבל היו מעדיפים ללמוד בטכניון)
מחסור בשיעורי ביית (פתרון: א-סינכרוני)
מתן קרדיטציה
כל הזכויות שמורות - ד"ר גילה קורץ 2002

36. כל הזכויות שמורות - ד"ר גילה קורץ 2002
דוגמאות
ומה הם אומרים…
הקורס היה מאד נח ללמוד אך עם זאת לא היתה תחושת כיתה אלא לימוד עצמי מול המרצה. המורה היה על הכיפאק!!"
מעדיף ללמוד בטכניון מאשר בשיטה הזו, אבל אתם יכולים להרים את הראש כי זה לא היה עד כדי כך גרוע וזה עוד קורס ראשון. לכן שיהיה לכם בהצלחה בהמשך."
כל הזכויות שמורות - ד"ר גילה קורץ 2002

37. אמצע קורס: מניסיון מורה בפיילוט חיל-אויר (1):
ומה עם המרצה/מדריך???
אמצע קורס: מניסיון מורה בפיילוט חיל-אויר (1):
מהן המיומנויות שנדרשות ממך כמורה, האם יש מיומנויות מיוחדות ממורה שמלמד בלמידה מרחוק?
קודם כל שיכיר את הסביבה של המחשב, שזה לא יהיה זר לו, צריך להיות מספיק פתוח בשביל להיכנס לטכנולוגיה חדשה, אני יודע שככל שהולך הגיל בדרך כלל המורים בדיוק לא מקבלים חידושים די מתנגדים, ודווקא מורים יותר צעירים מוכנים לקבל את זה ומבוגרים פחות. לכן הייתי אומר שזה יתאים למורים יותר צעירים, זה לא אומר חסרי ניסיון, ובלל באופן כלל לאנשים שהם פתוחים.
זה דורש יותר ריכוז, איזשהו התמצאות כזאת טכנית, קואורדינציה של הדברים, אני חושב שגם זה מתאים להוראה שהיא יותר מובנית, כלומר, אי אפשר לעשות שם יותר מידי אימפרוביזציה, יש לך דברים שכבר הכנת מראש ואת צריכה ללכת עם זה. יש מעט מאוד אפשרויות לסטות ימינה ושמאלה, כלומר אפשר אבל, פחות ספונטניות. לי זה די מפריע בהוראה.
כל הזכויות שמורות - ד"ר גילה קורץ 2002

38. אמצע קורס: מניסיון מורה בפיילוט חיל-אויר (2):
ומה עם המרצה/מדריך???
אמצע קורס: מניסיון מורה בפיילוט חיל-אויר (2):
היו שינויים שעשית במהלך הקורס?
תראי, יש בעיה. המדיה הזאת לא מתאימה להעברת מסרים מורכבים. שדרושים הרבה מאוד שלבים. קשה. את צריכה להעביר משהו, את קולטת שתלמידים מבינים ואז את מגיבה ואת בעצם משנה את ההוראה שלך, כאן לא. את צריכה להעביר מסר מסוים, די קצר, את צריכה לברר שזה נקלט על ידי +/-, ולהתקדם הלאה ועוד פעם ועוד פעם, כלומר את צריכה לפרק את הדברים לקוונטים.
כל הזכויות שמורות - ד"ר גילה קורץ 2002

39. אמצע קורס: מניסיון מורה בפיילוט חיל-אויר (3):
ומה עם המרצה/מדריך???
אמצע קורס: מניסיון מורה בפיילוט חיל-אויר (3):
יש בעיות פדגוגיות שהתעוררו בקורס (למשל אמרת קודם שדוגמאות מורכבות – זה לא המקום לעשות אותן)
חסר לי שאני לא רואה את התלמידים, הם רואים אותי לכאורה אבל זה לא זה.יש שפת גוף גם של התלמידים וגם שלי. מורה שמנוסה יכול להבין הרבה מאוד מהתנהגות של התלמידים, וזה חסר, זה חסר. זאת אומרת אני לא הייתי אומר שזה מודל של הוראה שיכול להחליף הוראה רגילה. זה פחות טוב בכל מקרה. גם אם יש המון ניסיון בדברים האלה זה לא אותו סוג.
אתה מונה חסרונות יש עוד חסרונות של השיטה הזאת?
אני מרגיש שכל המדיה הזאת והוראה הזאת זה מן כזאת מסננת, לא עובר הכל, זה לא אותו הדבר. אפשר להתנשק דרך שקית ניילון, אבל זה לא זה. זה לא אותו הדבר.
כל הזכויות שמורות - ד"ר גילה קורץ 2002

40. אמצע קורס: מניסיון מורה בפיילוט חיל-אויר (4):
ומה עם המרצה/מדריך???
אמצע קורס: מניסיון מורה בפיילוט חיל-אויר (4):
מה טוב, מה היתרונות של שיטה זאת?
הדברים מאורגנים מראש, רוב החומר מאורגן על שקפים הוא נשאר, ואז תלמיד יכול לקחת את ההרצאות ולחזור עליהן שוב ושוב, מבחינתו זה טוב שהדברים כתובים בצורה מובנית, לפעמים תלמיד לא יודע לכתוב את הדברים וזה טוב.
דבר שני שהוא טוב שאני יכול לשאול שאלות, אם מבינים או לא מבינים, אני יודע כמה הבינו וכמה לא הבינו, אבל זה שוב זה אני יכול לראות אם אני נמצא בכיתה פיזית, אני לא יודע באחוזים.
כל הזכויות שמורות - ד"ר גילה קורץ 2002

41. ממצאים ממוקדים- תרומת העזרים האודיו-ויזואלים:
הערכה
ממצאים ממוקדים- תרומת העזרים האודיו-ויזואלים:
שאלה ממוצע אחרי1 ממוצע אחרי2
חשיבות וידאו המרצה
תרומת מצגת השקפים
תרומת ה"לוח"
כל הזכויות שמורות - ד"ר גילה קורץ 2002

42. הערכה
לסיכום….
קורץ/תשס"א
קורץ/תשס"א