מבחן t למדגמים תלויים או בלתי תלויים: איך בוחרים נכון?
אותם נבדקים פעמיים או שתי קבוצות נפרדות? כך בוחרים בין מבחן t למדגמים תלויים ובלתי תלויים, מסדרים את הנתונים ונמנעים מטעויות, עם דוגמה פתורה.
מבחן t למדגמים תלויים מתאים להשוואה שיש בה זוגות בעלי משמעות, למשל שתי מדידות של אותם אנשים. מבחן t למדגמים בלתי תלויים מתאים להשוואת ממוצעים של שתי קבוצות עצמאיות. הבחירה נקבעת לפי הדרך שבה נאספו הנתונים, ולא לפי המבחן שנותן תוצאה מובהקת יותר.
לפני שפותחים נוסחה או תוכנה, שאלו: “האם לכל תצפית בקבוצה הראשונה יש בת זוג מוגדרת בקבוצה השנייה, ומדוע?” התשובה לשאלה הזאת יכולה לחסוך חישוב שלם בשיטה הלא נכונה.
המדריך עוסק בבחירה ובביצוע בסיסי של מבחני t להשוואת ממוצעים, והוא מיועד לסטודנטים שכבר מכירים ממוצע, סטיית תקן והשערת אפס. סוגי המבחנים מופיעים בנפרד גם בחומרי הקורס המקוון בסטטיסטיקה של אוניברסיטת תל אביב. זהו מקור לימודי, ולא הצהרה על דרישות של קורס בשנת לימודים מסוימת.
מה הופך מדגמים לתלויים?
זיווג נובע ממבנה המדידה או המחקר. הדוגמה הפשוטה היא אדם שנמדד פעמיים: פעם לפני שינוי ופעם אחריו. המדידה השנייה אינה תצפית של אדם אחר שאפשר להתייחס אליה בלי קשר לראשונה.
זיווג יכול להתקיים גם בין אנשים שונים, אם הם הותאמו בזוגות לפי תכנון רלוונטי. במקרה כזה צריך לדעת מי שייך לכל זוג ומה ההצדקה להתאמה. עצם העובדה ששתי הקבוצות דומות בממוצע או כוללות אותו מספר אנשים אינה יוצרת זיווג.
לדוגמה, אם חמישה נבדקים ביצעו משימת איתור סימנים בשתי גרסאות של ממשק, לכל נבדק יש שתי תוצאות. לעומת זאת, אם חמישה אנשים השתמשו בגרסה א׳ וחמישה אנשים אחרים בגרסה ב׳, בלי התאמה זוגית, זו השוואה בין קבוצות נפרדות.
חומרי אוניברסיטת תל אביב מבחינים בין מדידות חוזרות לבין מדגמים מזווגים, ומסבירים שבשני המקרים הניתוח נשען על ההפרשים בתוך הזוגות.
טבלת הבחירה: מתחילים באנשים, לא במספרים
הטבלה הבאה עוברת על השאלות שקובעות את מבנה ההשוואה, לפני כל חישוב.
| שאלה | מדגמים תלויים | מדגמים בלתי תלויים |
|---|---|---|
| מי נמדד? | אותם אנשים בשני מצבים, או זוגות שתוכננו מראש | אנשים נפרדים בשתי קבוצות עצמאיות |
| מהי יחידת הניתוח? | ההפרש בתוך כל זוג | התצפיות בכל אחת מהקבוצות |
| האם סדר השורות משנה? | כן, הוא חייב לשמור על הזוגות | אין זיווג בין שורה בקבוצה אחת לשורה בשנייה |
| האם הגדלים חייבים להיות שווים? | לכל זוג שנכלל בניתוח הבסיסי דרושות שתי מדידות | אין חובה לשוויון בין גדלי הקבוצות |
| מה בודקים בדרך כלל? | האם תוחלת ההפרשים היא אפס | האם ההפרש בין תוחלות הקבוצות הוא אפס |
הטבלה אינה מחליפה בדיקת הנחות. למשל, אנשים שונים יכולים עדיין להיות תלויים בגלל אשכולות, משפחות או מדידות משותפות. “לא אותו אדם” אינו לבדו הוכחה לעצמאות.
דוגמה פתורה: אותם נבדקים, שתי גרסאות ממשק
הנתונים הבאים מומצאים לצורך ההסבר. הם אינם תוצאות מחקר, נתוני לקוחות או הוכחה ליעילות של מוצר. נניח שנמדד מספר פריטים שאותרו נכון במשימה, אצל אותם חמישה נבדקים, בשתי גרסאות של ממשק, וההפרש מוגדר כציון בגרסה ב׳ פחות הציון בגרסה א׳.
| נבדק | גרסה א׳ | גרסה ב׳ | הפרש d |
|---|---|---|---|
| 1 | 40 | 42 | 2 |
| 2 | 35 | 39 | 4 |
| 3 | 50 | 56 | 6 |
| 4 | 45 | 53 | 8 |
| 5 | 30 | 40 | 10 |
יש כאן עשר מדידות, אך חמישה זוגות. עבור מבחן t מזווג, n = 5.
קודם מחשבים את ההפרשים
כל החישוב נעשה על עמודת ההפרשים, ולא על שתי עמודות הציונים בנפרד.
| מה מחשבים | החישוב |
|---|---|
| ההגדרה של ההפרש | d = (ציון בגרסה ב׳) − (ציון בגרסה א׳) |
| ממוצע ההפרשים | (2+4+6+8+10)/5 = 6 |
| הסטיות מהממוצע | −4, −2, 0, 2, 4 |
| שונות ההפרשים | (16+4+0+4+16)/(5−1) = 10 |
| סטיית התקן של ההפרשים | √10 ≈ 3.16 |
חשוב לחשב את הפיזור של ההפרשים, ולא להציב בנוסחה את סטיית התקן של גרסה א׳ או של גרסה ב׳.
אחר כך מחשבים את סטטיסטי המבחן
אם השערת האפס היא שתוחלת ההפרשים שווה לאפס, מחלקים את ממוצע ההפרשים בשגיאה התקנית שלו.
| מה מחשבים | החישוב |
|---|---|
| מספר הזוגות | n = 5 |
| השגיאה התקנית של הממוצע | √10 / √5 = √2 ≈ 1.41 |
| סטטיסטי המבחן | t = 6 / √2 ≈ 4.24 |
| דרגות החופש | n − 1 = 4 |
זהו חישוב של סטטיסטי המבחן. כדי להשלים החלטה על מובהקות יש לקבוע את ההשערה החלופית ואת רמת המובהקות, ולחשב את ערך p או להשוות לערך קריטי מתאים. בנוסף, צריך להצדיק את הנחות הניתוח. חמש שורות בטבלה אינן מספיקות כדי להוכיח שההנחות מתקיימות.
מה יקרה אם נהפוך את סדר החיסור?
אם נגדיר את ההפרש כגרסה א׳ פחות גרסה ב׳, ממוצע ההפרשים יהיה 6− והסטטיסטי יהיה בערך 4.24−. במבחן דו צדדי ערך p לא ישתנה, אך סימן ההפרש ופירוש כיוון השינוי יתהפכו.
לכן כתבו בראש הפתרון את כיוון החיסור. כך לא תדווחו בטעות על ירידה כשהנתונים מצביעים על עלייה.
למה אסור למיין כל עמודה בנפרד?
בנתונים מזווגים, הזהות של כל זוג היא חלק מהמידע. אם נמיין את ציוני גרסה א׳ בנפרד ואת ציוני גרסה ב׳ בנפרד, נחבר מדידות של אנשים שונים.
בדוגמה שלנו, אחרי מיון נפרד ההפרשים יהיו 9, 5, 2, 8, 6 במקום 2, 4, 6, 8, 10. ממוצע ההפרשים עדיין יהיה 6, אבל השונות המדגמית שלהם תשתנה מ-10 ל-7.5, וגם סטטיסטי המבחן ישתנה. המשמעות היא שאפשר לקבל אותו הפרש ממוצעים ובכל זאת לבצע ניתוח שגוי, משום שהקשרים בין התצפיות נהרסו.
אם ממיינים קובץ, ממיינים את כל השורה יחד עם מזהה הנבדק ושתי המדידות. אין ליצור זוגות לפי גודל הציון רק משום שזה מייצר טבלה מסודרת יותר.
מה עושים כשמדובר בשתי קבוצות עצמאיות?
נניח שבמקום אותם חמישה אנשים, כל גרסת ממשק נבדקה על קבוצה נפרדת של אנשים, ללא זיווג. אז לא נחשב הפרש בין האדם הראשון בקבוצה א׳ לבין האדם הראשון בקבוצה ב׳: סדר השורות אינו התאמה מחקרית.
במבחן לשתי קבוצות עצמאיות משווים את הממוצעים ומשתמשים במידע על הפיזור ועל גודל המדגם בכל קבוצה. בגרסת Welch, הבודקת הפרש תוחלות בלי להניח שוויון שונויות, החישוב הוא כזה.
| מה מחשבים | החישוב |
|---|---|
| הפרש הממוצעים | ממוצע קבוצה 1 פחות ממוצע קבוצה 2 |
| השגיאה התקנית | √(s₁²/n₁ + s₂²/n₂) |
| סטטיסטי המבחן | t = הפרש הממוצעים חלקי השגיאה התקנית |
| דרגות החופש | קירוב Welch-Satterthwaite, לא בהכרח n₁ + n₂ − 2 |
Welch או הנחת שוויון שונויות?
זאת החלטה נפרדת מההחלטה אם הנתונים מזווגים. Welch הוא מבחן לקבוצות עצמאיות; הוא אינו פתרון לתלות בין שתי מדידות של אותו אדם.
בגרסה המאוחדת, המכונה לעיתים pooled t-test, מניחים שוויון שונויות ומשתמשים באומדן משותף לפיזור. ב-Welch אין הנחה כזאת. בקורס בדקו איזו גרסה מתבקשת ומהן ההנחות שניתנו. אין לבחור גרסה רק מפני שערך p שלה קטן יותר.
אילו הנחות צריך לבדוק?
מבנה המדגם קודם לנוסחה, אבל הוא אינו הבדיקה היחידה. משתנה התוצאה צריך להתאים להשוואת ממוצעים, ויש לבחון את צורת הנתונים, חריגים ועצמאות יחידות הניתוח.
במבחן המזווג, ההנחה הקלאסית למדגם קטן מתייחסת להתפלגות ההפרשים, ולא לדרישה ששתי עמודות הציונים בנפרד יתפלגו נורמלית. גם הזוגות צריכים להיות עצמאיים זה מזה. במבחן לקבוצות עצמאיות בוחנים את הנתונים בכל קבוצה ואת ההנחות של הגרסה שנבחרה.
לא כדאי להפוך את המספר 30 למתג אוטומטי שפוטר מבדיקת הנתונים. גודל המדגם, חריגים חזקים, אסימטריה ומבנה הדגימה משפיעים על התאמת ההליך. ואם ההנחות אינן סבירות, לא מחליפים באקראי למבחן אחר: צריך להבין מה הבעיה, מה השאלה המחקרית, ואיזו חלופה מתאימה למבנה הנתונים ולחומר הקורס.
נתונים חסרים: לא הופכים זוג חסר לאדם חדש
בניתוח מזווג בסיסי צריך שתי מדידות כדי לחשב הפרש. אם חסרה מדידה אחת, אין להשלים אותה באפס או להצמיד אליה מדידה של אדם אחר.
אפשרות של ניתוח זוגות שלמים משאירה רק זוגות עם שתי מדידות, אבל השמטת נתונים אינה פעולה ניטרלית בהכרח: צריך לתעד כמה הושמטו ולבחון למה הם חסרים. במצב מחקרי אמיתי ייתכן שנדרש טיפול אחר.
גם מעבר אוטומטי למבחן בלתי תלוי אינו פותר את הבעיה. הנתונים לא נעשו עצמאיים רק משום שאחת המדידות אבדה.
איך כותבים מסקנה בלי להבטיח יותר מהנתונים?
מסקנה טובה מציינת מה הושווה, באיזה כיוון הוגדר ההפרש, מהו האומדן ומהי אי הוודאות. בדיווח על מבחן נהוג לציין גם את הסטטיסטי, דרגות החופש וערך p, בהתאם לדרישות הקורס.
בדוגמה הלימודית שלנו אפשר לכתוב, לפני השלמת ההסקה: “בחמשת הזוגות שנבדקו, הציון בגרסה ב׳ היה גבוה בממוצע ב-6 פריטים מהציון בגרסה א׳. סטטיסטי המבחן המזווג, עבור השערת תוחלת הפרש אפס, הוא t עם 4 דרגות חופש, בערך 4.24.”
אין להוסיף שהממשק “גרם לשיפור” רק מפני שההפרש חיובי. אם גרסה ב׳ תמיד נבדקה שנייה, למשל, ייתכן אפקט תרגול או סדר, וטענת סיבתיות דורשת תכנון מחקרי שמאפשר אותה. גם “לא נמצא הבדל מובהק” אינו אומר ששני התנאים זהים: ייתכן שהאומדן אינו מדויק מספיק כדי להכריע, ולהוכחת שקילות נדרשת מסגרת אחרת.
איך מתרגלים את הבחירה לפני שמחשבים?
קחו תיאור מחקר וכתבו שלוש שורות בלבד: מי או מה נמדד בכל קבוצה, האם קיים זיווג מוגדר ומה הסיבה לו, ואיזה גודל רוצים לאמוד או לבדוק. אחר כך נסו את התבנית על המצבים הבאים.
- אותם עובדים משתמשים בשתי פריסות מקלדת: יש שתי מדידות לכל עובד, ולכן מבנה מזווג, בכפוף לתכנון ולהנחות.
- שתי קבוצות של 20 אנשים, ללא התאמה ביניהן: גודל שווה אינו זיווג, ולכן מבנה של קבוצות עצמאיות, אם העצמאות אכן מוצדקת.
- אותם אנשים נמדדו בשלושה מועדים: זה כבר אינו מקרה של שתי מדידות בלבד, ואין לבצע אוטומטית סדרת מבחני t ולשכוח את התלות ואת ריבוי ההשוואות.
אם הבחירה קשה, הבדילו בין סוגי התקיעות: בלבול במשמעות “זוג” הוא קושי מושגי, זיהוי הקשר מתוך ניסוח הוא קושי בבחירת כלי, וטעות בחישוב סטיית התקן היא קושי טכני. מי שמצליח רק כשפתרון פתוח צריך לתרגל את שלוש שורות ההחלטה בלי עזרה. תחת לחץ זמן, אותה תבנית קצרה יכולה למנוע קפיצה מוקדמת לנוסחה.
שאלות נפוצות על מבחן t תלוי או בלתי תלוי
השאלות שחוזרות אצל מי שמתלבט בין מבחן מזווג למבחן לשתי קבוצות.
האם “תלויים” פירושו שיש משתנה תלוי?
לא. “משתנה תלוי” הוא תפקיד של משתנה במודל או בשאלת מחקר. “מדגמים תלויים” מתאר קשר בין התצפיות בשני המדגמים. אלה שני שימושים שונים במילה.
האם שתי קבוצות באותו גודל הן מדגמים מזווגים?
לא. דרוש קשר מוגדר בין כל זוג תצפיות. עשרים אנשים בקבוצה אחת ועשרים אנשים אחרים בקבוצה השנייה אינם מזווגים רק מפני שהמספרים שווים.
האם לפני ואחרי תמיד מחייב מבחן מזווג?
רק אם מדובר באותם אנשים או בזוגות בעלי משמעות. סקר שנערך לפני שינוי על קבוצה אחת ואחריו על קבוצה אחרת אינו יוצר אוטומטית מדידות חוזרות.
האם צריך לבדוק מתאם כדי להחליט אם המדגמים תלויים?
הבחירה נשענת על תכנון המחקר ועל זהות התצפיות. מתאם מדגמי נמוך אינו מבטל זיווג אמיתי, ומתאם בין שתי עמודות שסודרו באופן מלאכותי אינו יוצר זיווג תקף.
במבחן מזווג, n הוא מספר המדידות או מספר הזוגות?
מספר הזוגות שנכללו בניתוח. חמישה אנשים עם שתי מדידות לכל אדם נותנים חמישה הפרשים, ולכן n = 5, ולא 10.
האם Welch מתאים גם למדידות של אותו אדם פעמיים?
לא כתחליף אוטומטי למבחן מזווג. Welch מטפל בהשוואת שתי קבוצות עצמאיות ללא הנחת שוויון שונויות; הוא אינו מטפל בזיווג בין המדידות.
האם תוצאה מובהקת אומרת שההבדל חשוב?
לא בהכרח. צריך לבחון את גודל ההפרש, היחידות, רווח הסמך וההקשר. שינוי קטן מאוד יכול להיות מובהק, ושינוי בעל משמעות יכול להיות מוערך בחוסר דיוק.
מה כדאי להביא לשיעור פרטי על מבחני t?
הביאו את תיאור המחקר, מבנה הטבלה, ניסיון הבחירה שלכם והפלט אם כבר קיים. בקשו להסביר מדוע המבחן מתאים לנתונים לפני שממשיכים לחישוב או לפירוש המובהקות.
סיכום
כדי לבחור בין מבחן t תלוי לבלתי תלוי, מתחילים בזהות התצפיות. בזיווג אמיתי שומרים על הזוגות ועובדים עם ההפרשים; בקבוצות עצמאיות משווים ממוצעים באמצעות הפיזור וגודל המדגם בכל קבוצה.
אחר כך בודקים הנחות, מחשבים ומפרשים. מספר שורות שווה, מתאם גבוה או ערך p נוח אינם תחליף להבנת מבנה המחקר.
רוצים לתרגל את הבחירה על שאלות מהקורס?
אם אתם מכירים את הנוסחאות אבל מתקשים לבחור ביניהן, אפשר לבדוק התאמה למורה פרטי לסטטיסטיקה בבלופרינט. הביאו ניסיון פתרון ותיאור של מבנה הנתונים, כדי להתמקד בשלב שבו הבחירה מסתבכת.
אם לא התחברתם להתאמה בשיעור הראשון, לא משלמים עליו.
מורה פרטי לסטטיסטיקהמקורות
אוניברסיטת תל אביב, הקורס המקוון בסטטיסטיקה: ההבחנה בין מדידות חוזרות ובין מדגמים מזווגים, והניתוח המבוסס על ההפרשים בתוך הזוגות. NIST Engineering Statistics Handbook: נוסחת המבחן לשני מדגמים וההבחנה בין שונויות שוות ולא שוות. Penn State STAT 500: הנחות ההשוואה בין שני פרמטרים באוכלוסייה.
הנתונים המספריים והתרחישים במדריך הם דוגמאות לימודיות מקוריות, ולא ממצאים אמפיריים.
מחפשים מורה פרטי למתמטיקה?
בבלופרינט בוחרים רמה ומועד ומקבלים התאמה למורה מנוסה. שיעור אונליין של 50 דקות, מחיר מנוהל לפי רמת הלימוד, ואם לא התחברתם לשיעור הראשון לא משלמים עליו.