ניסויית

סוגי קשרים

מתאמי

סיבתי

מצב בו קיימת מגמה של השתנות משותפת של שני משתנים.

מתאם הוא המדד לחישוב הקשר הסטטיסטי בין משתנים

נע בין -1 ו1

קשר בו ידוע ששינוי בA הוא הגורם לשינוי בB, למעשה יודעים כיוון וסוג קשר.

קשר סיבתי ישיר בו A משפיע על B או להפך

קשר סיבתי ישיר דו כיווני בוא הם משפיעים אחד על השני

קשר מתווךסיבתי

קשר סיבתי מותנה

בו A משפיע על C וזה בתורו משפיע על B

A משפיע על B רק בתנאי קיומו של C.

התניה המשפיעה על עוצמת הקשר

התנייה מוחלטת בה הקשר יתקיים רק בנוכחות C

image

אינטרקציה

כיצד מבחינים בין משנה מתוור למשתנה מתנה

סדר הזמנים ( במתווך חייב להיות בנקודת זמן מסויימת, במתנה לא חייב להיות חלק מהשרשרת הסיבתית כי אם להימצע ברקע של ההתרחשות.

שימוש כהסבר חלופי: במתווך יכול להפוך להסבר חלופי למשתנה A, במותנה המשתנה C לא יכול לשמש הסבר חלפוי לאחד מהמשתנים, הוא בסך הכל מאפשר את התרחשותם

נשאל: האם C נגרם על ידי A? אם כן מדובר במשתנה מתווך. במידה וC לא קשור להתרחשות אחד המשתנים האחרים הוא יהיה משתנה מתנה.

קשר מזוייף

אין באמת קשר בין A B ולא סיבתיות

image

לדוגמא מידת נעליים A אינטלגנצייה B וגיל (C)

קשר בו הבלתי תלוי מתופעל

קשר בו המשתנה הבלתי תלוי הוא נמדד

תנאים לסיבתי

1 קשר סטטיסטי

2 סדר הזמנים (בלתי תלוי לפני התלוי)

הפרכת הסברים חלופיים (באמצעות מניפולציה, בקרה על משתנים מתערבים הקצאה רנדומלית

רק בהתקיים כל התנאים הללו אפשר להסיק על סיבתיות

סטנדרטיזציה בפרוצדורה, תנאים, הוראות, מניעים וכ'..

בנבדקים: א. התאמה בין כמה שיותר תכונות, ב. השמה רנדומאלית: חלוקה אקראית כך שלכל אחד סיכוי שווה (הקבוצות לא יהיו שווים אבל יש שוויון הסתברותי)

השוואה בין המערכים

השוואה בין המערכים

תפקיד החוקר

סיבתי: ליצור הבדלים בין הנבדקים בבלתי תלוי

מתאמי לקבל את הערכים של הבלתי תלוי ולקשור אותם להבדלים בתלוי

משתנה בלתי תלוי

מתופעל על ידי החוקר ומפויע בהכרח לפני המשתנה התלוי

מגיע כנתון לא בשליטת החוקר ואינו מופיע בהכרח לפני התלוי

התוצאות הנמדדות

הקשר בין הימצאות בקבוצת ניסוי מסויימת לבין הרמה במשתנה התלוי

הקשר בין הרמה הנמדדת בבלתי תלוי לרמה הנמדדת בתלוי

סוג המסקנות

הסקה על קשר, (הערה על כך שבתגבורת של לוגיקה אפשר להסיק על סיבתיות בערבון מוגבל)

קשר סיבתי

יתרונות

קל יותר לביצוע וקרוב יותר למציאות היום יומית (ניתן להכליל ממנו יותר בקלות)

שליטה בסדר הופעת המשתנים, מניעת הסברים חלופיים, הסקת סיבתיות

סיבות לשימוש במערך המתאמי

1 לא ניתן לבצע מניפולצייה על הבלתי תלוי

לא אתי לבצע מניפוציה

לא מעשי עקב סיבות של עלות

יותר קרוב למציאות ועונה על מורכבות של תופעה

חסרונות במערך מתאמי

פחות שליטה בסדר הזמנים

אין שליטה בתנאי הניסוי

תמיד ייתכנו הסברים חלופיים

מערך מסוג זה לא מלמד על סיבתיות ולא על כיוון!!

מהימנות ותוקף

מהימנות

תוקף

עקביות בין מדידות (EEG, משקל,ראיון כ'...)

תפקידו של מדד המהימנות לוודא שהתוצאות אינן מתקבלות מתוך טעות מקרית אלא מתוך עקביות

ציון נצפה= ציון אמיתי+ טעות

טעות שיטתית תשפיע תמיד באותו אופן על הציון (לא משפיע על מהימנות)

שונות הציון הנצפה= שונות ציון אמיתי + שונות הטעות

שונות הטעות, כוללת טעות מקרית וטעות קבועה (שיטתית)

טעות מקרית

נובעת מגורמים מקריים

משפיע באופן שונה על הציון הנצפה ולכן מניחים כי השונות שלה שונה מ0, תוחלת שווה ל0, כלומר כל פעם הטעות המקרית משפיע אחרת על התצפית הספציפית

גורם מרכזי המשפיע על מהימנות**

ככל שהטעות המקרית גדולה יותר כך המהימנות נמוכה יותר

לרוב אינה ניתנת לאיתור ותיקון לכן מפחיתה מהימנות של כלי המדידה

אינדקס המהימנות

image

image

image

נאמוד מהימנות על ידי שני ציונים נצפים על אותו ציון אמיתי מתוך הנחה שהציון האמיתי שהם משקפים הוא זהה

המתאם הפשוט בין שני ציונים יהיה שווה לריבוע המתאם בין ציון נצפה ליון האמיתי

שיטות למדידת מהימנות: מבחן חוזר, נוסחים מקבילים?, מהימנות כעקיבות פנימית, מהימנות בין שופטים**

מבחן חוזר: שתי מדידות של אותו מבחן לאותם נבדקים בזמנים שונים

נוסחים מקבילים: עבור משתנים שאימון בהם ישפיע על התוצאות, מועבר בשני נוסחים שונים שהפריטים בהם שקולים, היתרון הוא המנעות מאימון, החיסרון הוא שקשה לייצר נוסחים מקבילים שקולים

עקיבות פנימית: השוואה בין ציונים נצים של חלקים שונים של כלי המדידה, 1 מהימנות מבחן חצוי- מחושב באמצעות המתאם בין מחצית ומחצית, מושפע מכמות הפריטים ולכן מתאים לשאלונים בעלי פריטים רבים, 2 אלפא קורנבאך: אם כל הפריטים מודדים את אותו עולם תוכן אז המתאמים בכל זוגות הפריטים יהיו גבוהים.

מהימנות בין שופטים: עבור משתנים שנמדדים על ידי הערכת שופטים בלבד., מחושבת באמצעות מתאם בין הערכות השופטים השונים, נוסף מרכיב של שונות טעות שנובע מסובייקטיביות-מיקום יחסי: מה שחשוב כאן זו המגמה של השופטים כלומר יכול להיות ששופט אחד יחמיר יותר אבל בכולם ושופט אחר יקל יותר אבל ביחס לכולם...מה שמשנה זה שהם משתנים ביחד. (פתרון אפשרי לחיזוק המהימנות במצב זה אלו קריטריונים מוסכמים מראש למדידה בין השופטים

image

צריך לעבור באותו זמן ולאותם נבדקים

image

הנוסחא היא פונקציה של ממוצע המתאמים בין כל הפריטים ומספר הפריטים, נע בין 0-1. מתחת ל0.6 נחשב נמוך, מעל 0.8 נחשב גבוה

לא נכו, יכול להיות הסקת סיבתיות בעירבון מוגבל granger causality

סוגי דגימות

דגימה לא הסתברותית

דגימת נוחות, הפריטים נבחרים לפי שיקולי נוחות

קווטה: המקבילה הלא רנדומאלית של שכבות, דגימת פרופורציות לכל שכבה ודגימת נוחות מתוך השכבות-היתרון שזה משפר את הייצוג של מיעוטים, מדגם ממוקד: משמש במחקרי שדה למשל נפגעי צונאמי, יש להיזהר בקבלת הממצאים כאשר הדגימה איננה הסתברותית.= מוריד מהימנות

מקדם המהימנות

מתאם בין שתי מדידות

image

image

זמן, נבדקים, מבחן עצמו

מהיהמנות היא חסם עליון של תוקף כלומר אם אין מהימנות אין טעם לדבר על תוקף

מתייחס למידה בה כלי המדידה הולם רת ההגדרה התיאורטית של המשתנה הנמדד= האם אני מודד את מה שהתכוונתי למדוד

תוקף תוכן, תוקף נראה, תוקף ניבוי ותוקף מבנה

תוקף תוכן

אין שיטה מדוייקת לאמידת תוקף זה והוא מבוסס על המידה בה השאלון מכסה את כל האספקטים של המשתנה הנמדד לפי התאורייה

click to edit

כדי להגביר את תוקף התוכן יש להקפיד על ניץוח מקיף של עולם התוכן של המשתנה

תוקף נראה

עד כמה נראה הכלי כהולם את מטרתו עבור צופה מהצד

לא תמיד נשאף לתוקף נראה גבוה כי לעיתים קרובות נרצה להסתיר את המניפולציה מהנבדק על מנת למנוע ריצוי, בשילה וכ'...

תוקף ניבוי

נקרא גם תוקף תלוי קריטריון

המידה בה המבחן שלנו מצליח לנבא אובייטיבית קריטריון מסויים

מבצעים מתאם בין המבחן שלנו לבין מבחן חיצוני בעל תוקף קודם (הניתן למדידה באופון מהימן)

תוקף שלאחר מעשה

תוקף מקביל

תוקף ניבוי

לנסיין יהיו תוצאות הנבדקים ממבחן חיצוני תקף עוד לפני שנבחנו במבחן שלו (החדש)

הנבדק מבצע במקביל גם את המבחן שלי וגם מבחן שבוחן את אותו קריטריון ויש לו כבר תוקף---והוא מבצע אותם באותו זמן.

הנבדק מבצע את המבחן שלי ולאחר מכן בוחנים אותו גם במחן חיצוני מוכח

תוקף מבנה

מודד את החפיפה בין ההגדרה התיאורטית של המשתנה התלוי לביין ההגדרה האופרציונאלית שלו

תוקף מתכנס: מודד עד כמה כלי המדידה ממצה כלומר, בודק את כל ההיביטים של המשתנה התיאורטי

כדי למדוד תוקף זה נשווה בין הציון במבחן שלנו לבין ציון מבחן חיצוני שבודק את אותו משתנה תיאורטי.---מתאם גבוה יעיד על תוקף מבנה גבוה כלומר דומה

תוקף מבחין: האם הכלי שלי בודק רק את המשתנה הספציפי אליו אני מכוון או שמא יש משתנים שמסתננים לתוך כלי המדידה

כדי למדוד נשווה בין המבחן שברצוננו לתקף מול כלי מתוקף אחר שמודד מושגים אחרים**

מתאם נמוך יעיד לנו על תוקף מבחין גבוה

ציון מתאם נמוך לפעמים יהיה מה שנרצה

תוקף ממצאי הניסוי

תוקף המסקנה הסטטיסטית: האם הקשר בין הסטטיסטי התקבל במקרה או קיים באוכלוסייה (הכללה ממדגם לאוכלוסייה)

האם המניפולציה (הרמה האופרציונאלית) היא שגרמה לשינוי או שיש משתנה אחר (ארטיפקט) שיוצר איום חמור על התוקף הפנימי

איומים על התוקף הפנימי

ללא השמה רנדומאלית

ללא קבוצת ביקורת

האם המניפולציה בודקת את מה שהיא צריכה לבדוק

מדידה

מכשור

בשילה

רגרסיה לממוצע

היסטוריה

ברירה: יכול להיות מיוחס למאפייני הנבדקים ולא למניפולציה, כאשר יש הבדלים שיטתיים בין הקבוצות אין השמה רנדומאלית

אינטראקציות עם ברירה: ברירה עם כל האיומים שסקרנו קודם (כאשר אין קבוצת ביקורת?כן אינטרקציה עם כל הנושאים שסקרנו עד כה!) בשילה היסטוריה מדידה מכשור וכ'...

נשירה: יש להבחין בין נשירה מקרית (שלא מאיימת על התוקף הפנימי, לבין נשירה דיפרנציאלית**

זו עלולה להיגרם מ2 סיבות: 1 אינטרקציה בין נשירה לטיפול: המניפולציה גרמה לנבדקים לעזוב (השמה רנדומאלית לא תפתור בעיה זו וקשה למצוא פתרון)....2 אינטרקציה בין ברירה לנשירה: לא נעשתה הקצאה רנדומאלית ובקבוצה אחת מרוכזים אלו בעלי תכונה שגורמת להם לפרוש----אינטרקציה עם טיפול הנשירה נובעת מהמניפולציה, ואינטרקציה עם ברירה הנשירה נובעת ממאפייני הנבדקים

פתרונות: 1. שימוש בהשמה רנדומאלית (ללא רנדומאלית לא ניתן לדעת אם השונות נובעת רק מהמניפולציה או מאראטיפקט

סוגי טעויות

image

תוקף המסקנה הסטטיסטית

גורמים המשפיעים על הטעות מסוג ראשון (אלפא)

רמת מובהקות אפריורית

השוואות מרובות

פתרון?

תיקון סטטיסטי, מבחן מתאים, סטטיסטיקה ביסיאנית

לברר מה זה סטטיסטיקה ביסייאנית

גורמים המשפיעים על טעות מסוג שני (בטא לא דחיתי וטעיתי)

עצמת הניסוי

רגישות הניסוי

רעש- ככל שהרעש קטן יותר הרגישות גבוה יותר (יחס הפוך)

ככל שיהיה פחות רעש כך יהיה קל יותר לראות את האפקט

הגברת רגישות הניסוי מגבירה את העוצמה אך הגברת העוצמה לא משפיעה על הרגישות

גורמים המשפיעים על הרגישות: הגדלת המדגם- ככל שהמדגם גדול יותר, כך השונות קטנה יותר כלומר מידת הרעש קטנה יותר לכן רגישות ועוצמה גדלים

איך נקטין את השונות בהתפלגות הדגימה?

החזקת משתנה קבוע , בחירת אוכלוסייה הומוגנית

הוספת משתנה בלתי תלוי (הסבר)

איך נשפיע על העצמה שלא דרך הגברת רגישות

1 הקטנת האלפא: תוביל להקטנת העצמה, כי יהיה לי יותר קשה לדחות את H0

2 סוג ההשערה: חד כיווני 5 אחוז דו כיווני 2.5

ג הגברת מניפולציה: הגדלת השונות בין הקבוצות=הגברת האפקט

מבנה

האם המשתנה האופרציונאלי משקף כהלכה את ההגדרה הנומינאלית

בהקשר של ממצאי הניסוי

למה שתיווצר בעיה בתוקף המבנה?

1 הבעיה:צמצום: ההגדרה האופרציונאלית כוללת רק חלק ממרכיבי ההגדרה הנומינאלית "חוסר מיצוי"

2 חוסר הלימה חלקי : ההגדרה האופרציונאלית מסבירה את המשתנה התיאורטי אך מסבירה גם מרכיבים שלא שייכים להגדרה התיאורטית

3 חוסר הלימה מלא: ההגדרה האופרציונאלית לא כוללת אף חלק ממרכיבי ההגדרה הנומינאלית "חוסר בלבדיות" confound

image

הפתרון הוא בדיקת המניפולציה: מבחני בדיקת מניפולציה

איומים נוספים

א ציפיות הנסיין, זה עלול באופן לא מודע להשפיע על נבדקים

פתרון הוא עיוורון כפול- הנסיין לא יהיה מודע בעצמו להשערת הניסוי

ב "המצב הניסויי" הנבדקים נוטים לנחש את מטרת הניסוי ולהתנהג בהתאם

עיוורון כלפי הנבדק- להסוות את מטרת הניסוי

ג רצייה חברתית: נבדקים יענו תשובות בהתאם לנורמות

פתרון: עיוורון כלפי הנבדק ואנונימיות , הנבדק ימלא את התנאים לבד

ד איום סדר: כאשר סדר התנאים לא משתנה

פתרון אקראיות התנאים, ערבוב סדר הופעה

תוקף חיצוני

באיזה מידה ניתן להכליל את תוצאות הניסוי על אוכלוסיות מצבים או זמן מעבר ל

למה שתיווצר בעיה בתוקף זה?

בעיות דגימה

בעיות אפשריות

חוסר שת"פ (חרדים, כת האמיש

בעיות נגישות: למשל קושי להגיע לשבט נידח

שימוש במדגם בהתאם לנגישות

בוחרים רק חלק נגיש אך לא מייצג כמו סטודנטים לפסיכולוגיה

מדגם קטן: לא מכליל את המאפיינים באוכלוסייה, המדגם לא מקרי או לא מייצג

אינטרקציה בין דגימה למניפולציה : דוגמה טיפול פסיכולוגי על סטודנטים לפסיכולוגיה לא מייצג את האוכלוסייה כי מכירים את תחום הפסיכולוגיה

פתרון: דגימה הסתברותית

החזקת משתנה האוכלוסייה קבוע- יצמצם את היכולת להכליל אך הופך ליותר מדוייק, כלומר יהיה ניתן להכליל רק על אוכלוסייה דומה

פתרון של הפיכת משתנה האוכלוסייה ממקרי לשיטתי כלומר השוואה בין אוכלוסיות שונות

בעיות זמן ומקום

א תוצאות המחקר תלויות במקום ובזמן שבו הוא נערך

ב. בעיית מקום עריכה נגיד במעבדה

פתרון: חזרה על הניסוי בזמנים ומקומות שונים

תוקף אקולוגיה: שאיפה להכניס למחקרי מעבדה כמה שיותר מציאותיות לדוגמא בדיקת יעילות טיפול גם במעבדה וגם בקליניקה

חיזוק של מחקרי מעבדה עם מחקרי שדה תומכים

אינטרקציה בין מדידה למניפולציה

השפעה של בדיקה לפני על רגישות הנבדקים למניפולציה

פתרון: השוואה לקבוצה שקיבלה רק טיפול ובדיקה אחרי כלומר---קבוצה אחת שעושה מדידה לפני ואחת שלא עושה מדידה לפני

ההבדל בין תוקף ממצא סטטיסטי לבין תוקף חיצוני זה: בחיצוני אפשר להכליל מעבר לאוכלוסיות, בתוקף מסקנה אפשר להכליל רק על האוכלוסייה המדוברת

click to edit

מערכי מחקר וביקורת מחקרים

מערכי מחקר וביקורת מחקרים

שלושה תנאים להסקה על סיבתיות

קשר סטטיסטי

סדר זמנים

הפרכת הסברים חלופיים

שלושה סוגים של מערכי מחקר

שגויים

קוואזי

אמיתיים

תוקף פנימי

האם ההבדל התקבל במקרה או קיימת באמת באוכלוסייה

ארטיפקט- הסבר חלופי להבדל שנמצא בניסוי

ארטיפקט סטטיסטי

אולי קרה משהו שהשפיע בין המדידות על הקבוצות

שינוי שנוצר מתוך הנבדקים

למידה עקב התנסות מהמדידה עצמה

כלי המדידה או הנסיין יוצר הבדל

לקחתי אנשים מאוד בדיכאון, סביר שהם ירדו בדיכאון

קשר אלגברי בין (לבדוק)המשתנים

המתאם בין ההישג ורמת השאיפה יהיה שלילי ומכאן שככל שההישג יהיה גבוה יותר כך רמת השאיפה פוחתת

בחירה מוטית+

סטנדרטיזציה פתרון לכל הרשומים מטה

איום על תוקף פנהימי של

ההבדל בין היסטוריה, היסטוריה מקומית, ואינטרקציה של היסטוריה עם ברירה

היסטוריה: קרה לכולם והשפיע על כולם

היסטוריה מקומית קרה רק לחלק

אינטרקציה: קרה לכולם אבל השפיע באופן שונה על כל קבוצה

איומים נוספים על

דיפוזיה: חילופי מידע בין הנבדקיפם בקבוצות השונות

דה מורליזציה

השוואה מפצה

תחרות מפצה

פתרון:מניעת מודעות לגביי ההשתייכות לאחת הקבוצות

מניעת חילופי מידע בין הקבוצות

מה יגרום לניפוח אלפא: מספר המשתנים התלויים, בדיקה אחרי שהוספנו נבדקים, מספר דרכים לחישוב המדד התלוי, הסרת נבדקים חשודים

משתנה משפיע שתופעל ללא כוונה

התוחלת של שונות הטעות גם שווה לאפס: ההבדל בין טעות לשונות הוא שטעות היא ההשתנות של הגורם , והשונות היא הסטייה של השתנות זו מפעם לפעם... (מהממוצע)

click to edit

נחלץ את אינדקס המהימנות דרת הורדת שורש ממקדם המהימנות

תוקף מדידה

דוגמת (אני לא שמן) המשקל

כמה אני יכול לנבא מהמבחן הנוכחי -- משהו אחר שיקרה בעתיד, (מבחן אינטלגנציה שינבא הצלחה בלימודים)

נבדקים קיצוניים

במצב כאשר יש קיפוח לאחד הקבוצות והקבוצה המקופחת מגלה על הקיפוח ומורידה את המדידה

גורם חיצוני לניסוי דורש השוואה בין הקבוצות מבחינת גמול

הקבוצה המקופחת מנסה יותר חזק להדביק את הקבוצה השנייה

אפקט חלקי רעש

הגדלת השונות הבין קבוצתית

הקטנת השונות הבין אישית

גודל המדגם ועצמת המניפולציה יעלו גם את הרגישות וגם את העוצמה

1-B= עוצמה

אם נקטין את האלפא, נגדיל את הבטא ואז העוצמה שהיא 1-B תקטן

בייסיאנית עוזר לי להקטין טעות מסוג אלפא או לא לטעות טעות אלפא

תיקון: מקשה על עצמי כחוקר כדי להשאיר ספק קטן ככל הניתן

image

פתרון: פלסבו--יראה לי את ההשפעה שנגרמה לא כתוצאה מהמניפולציה שלי

בתוקף מבנה זה אנו מדברים על (האם המכשיר מודד את המשקל כהלכה )המדידות

הפתרון הוא עריכת וריאציה עם תפעולים שונים ו/או מדידות שונות

קונפאונד

ארטיפקט משפיע לזכור!!!

image

image

ההבדל העיקרי בין שניהם הוא שבתוקף המדידה אנו בוחנים האם המכשיר בודק את המושג התיאורטי ובתוקף ממצאי הניסוי אנחנו בודקים האם ההליך המחקרי שאני מבצע מאפשר לכלי לשקף את שלנו המשתנה התיאורטי

קשר אלגברי

image

צריך שיהיה לקוח מ2 מבחנים שונים. בעוד שבמבחן חצוי לוקחים 2 חלקים של אותו מבחן

image

image