הערכת מדיניות מחוץ למסגרת: הצלחה וסחרפים

הערכת תוצאות מדיניות היא אבן הפינה של ממשל יעיל וממשל ציבורי.זה הולך מעבר פשוט מדידת תוצאות; זה כרוך הערכה שיטתית של ההשפעות המיועדות והבלתי מאומתות של מדיניות, תוכניות, והתערבות על החברה. בעידן של מורכבות מוגברת ומשאבים ציבוריים מוגבלים, הערכה קפדנית מסייעת מקבלי ההחלטות להבין מה עובד, תחת אילו תנאים, ובאיזה מחיר זה מספק בדיקה מורחבת של ההצלחות, התנגשויות, הערכה מיטבית של שיטות ודוגמאות מקיף על ידי חוקרים.

תפקידה של הערכת מדיניות בראיות מבוססת על ממשל

ממשל מבוסס ראיות מבוסס על השימוש השיטתי של נתונים ומחקר כדי ליידע החלטות מדיניות. הערכת מדיניות היא המנוע שמחייב גישה זו.ללא הערכה, מדיניות עשויה להימשך בהתבסס על אינטואיציה או אידיאולוגיה ולא להפגין יעילות.הערכה מספקת את הלולאה המשוב הדרוש לניהול הסתגלות, המאפשר לממשלות וארגונים לחדד תוכניות, משאבים אמיתיים, ולהגדיל את מה שעובד.

סיבות עיקריות מדוע הערכת מדיניות היא הכרחית:

(FLT:0) הערכת אחריות ושקיפות.IRLT:1) אזרחים ובעלי עניין מצפים כי קרנות ציבוריות ישמשו ביעילות.
(FLT:0) אישור תכנון מדיניות עתידי ויישום.IRLT:1 , שיעורים מן ההערכות הקודמות מודיעים על עיצוב יוזמות חדשות, צמצום הסיכון של טעויות חוזרות.
(FLT:0) זיהוי תוצאות בלתי צפויות.10.1 מדיניות מייצרת לעיתים קרובות אפקטים משבשים – הן חיוביות והן שליליות – שניתן להתעלם מהם ללא ניתוח קפדני.
(הדגשה:0) הקצאת משאבים יעילה יותר.הערכת ה- 1FLT) מסייעת למתן עדיפות להתערבות הגורמת לתשואות הגבוהות ביותר על ההשקעה.

ממשלות בכל הרמות, כמו גם ארגונים בינלאומיים, ללא מטרות רווח, וקרנות פרטיות, עכשיו להטביע באופן שגרתי דרישות הערכה למתן הסכמים ומנדטים חקיקה.הדחף לעבר מדיניות מבוססת ראיות מעלה הערכה מאימון אקדמי נישה ועד לעמוד מרכזי של ניהול ציבורי מודרני.

מסגרות מפתח ל-Aveting Policy Outcomes

כמה מסגרות מבוססות מדריך את תהליך ההערכה.כל אחד מציע גישה מובנית לשאול את השאלות הנכונות ולאסוף ראיות רלוונטיות.

מודל CIPP (הקשר, Input, Process, Product)

פותח על ידי דניאל סטריפלאבאם, מודל CIPP מספק עדשה מקיפה להערכה.זה בוחן את ההקשר שבו פועלת מדיניות, קלטות (מקורות ואסטרטגיות), תהליכי יישום, ואת המוצרים (outcomes and Effects) מסגרת זו היא שימושית במיוחד עבור הערכות שמטרתן לשפר תוכניות במהלך מחזור החיים שלהם, לא רק לשפוט אותם בסוף.

מודלים לוגיים ותאוריות של שינוי

מודל לוגי ממפה את המשאבים, הפעילויות, התפוקה והתוצאות של מדיניות.זה מבהיר את ההנחות הסיבתיות העומדות בבסיס התערבות. תיאוריה של שינוי הולכת עמוק יותר על ידי הטמעת המנגנונים שדרכם צפוי להתרחש.כלים אלה מסייעים להעריך אילו נתונים לאסוף והיכן לחפש הצלחה או כישלון.הם משמשים באופן נרחב בחינוך, בריאות, בריאות, ותכניות פיתוח קהילתיות.

עלויות-Benefit ו- Cost-Effectiveness Analysis

למדיניות עם ממדים כלכליים ברורים, ניתוח עלות-תועלת (CBA) מדביק את עלויות והטבות כדי לקבוע ערך חברתי נטו. Cost-יעילות ניתוח (CEA), מצד שני, משווה את העלות ליחידת התוצאה (למשל, עלות לחיים שנשמרו, עלות לכל תלמיד בוגר). מסגרות אלה הן חיוניות בעת הערכת תשתיות, בריאות, מדיניות סביבתית, שבה הקצאת משאבים היא עיקרית.

גישות מתודולוגיות וסחרחורים

בחירת שיטת ההערכה מעצבת את הממצאים באופן מעמיק את הממצאים.אין גישה אחת מושלמת; כל אחד מהם נושא כוחות ומגבלות טעונים.הבנת הקונפלטורים הללו היא קריטית לתכנון הערכות אמינות.

ניתוח טכני

הערכה קוונטית מסתמכת על נתונים מספריים ושיטות סטטיסטיות.ניסויים מבוקרים אקראיים (RCTs) נחשבים תקן הזהב עבור הקצאות סיבתיות, אבל הם יקרים ולעתים גם אתיים או כמעט בלתי סבירים. עיצובים Quasi-experimental (למשל, הבדל-in-differences, Regressionהפסקתity) מציעים חלופות כאשר אקראיות אינה אפשרית.

(ב) ⁇ :0) ⁇ : ⁇ : 1:1 ,החזקות פנימית גבוהה; היכולת להכללת הממצאים לאוכלוסיות גדולות יותר; גודל השפעה מדידה.
(ב) ⁇ :0) ⁇ : 1 במאי יפספס קצבאות קונטקסטואליות; דורשות גדלים מדגם גדולים; יכול להיות יקר וזמני.

ניתוח Qualitative Analysis

שיטות Qualitative לחקור את החוויות, התפיסות, ומשמעותם של בעלי העניין מייחסים למדיניות.טכניקות כוללות ראיונות מעמיקים, קבוצות מיקוד, התבוננות במשתתפים וניתוח מסמך.

(ב) ⁇ :0) ⁇ : ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇
(ב) ⁇ :0) ⁇ : 1FLT 1 , ניתן להשפיע על התוצאות על ידי הטיה חוקרת; קשה לצבור אתרים.

גישות מעורבות-Methods

שילוב שיטות כמותיות ואיכותיות יכול לספק תמונה מלאה יותר.לדוגמה, סקר (שלאנטי) עשוי להראות כי תוכנית הכשרה עבודה שיפרה את שיעורי התעסוקה, בעוד ראיונות (qualitative) חושפים כי המשתתפים העריכו את רשת התמיכה החברתית כמו ההכשרה מיומנויות.

(ב) [ה]ההסברים: [ה] [ה]] [ה] [ה]] [ה]] [ה]]] [ה]] [ה]]]הההההההה'] [ה']'[ה']'[ה']'''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''
(ב) ⁇ :0) ⁇ : ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇

ההערכות חייבות לשקול את ההסכמים הללו נגד ההקשר הספציפי, משאבים זמינים, ואת הצרכים של מקבלי ההחלטות. הערכה מעוצבת היטב משתמשת לעתים קרובות בשיטות מרובות באופן אסטרטגי.

הצלחה בהערכה מדיניות על פני מגזרים

הערכת מדיניות מחשבה הובילה לשיפורים מוחשיים בתחומים רבים.הדוגמאות הבאות ממחישות כיצד הערכות גרמו לשינוי חיובי.

רפורמות בריאות

חוק הטיפול המאפיין (ACA) בארצות הברית היה נושא להערכה נרחבת. החוקרים תיעדו הפחתה משמעותית בשיעור הלא מבוטח, שיפורים בגישה לטיפול מונע, ורווחים צנועים בתוצאות הבריאות.ההערכה גם זיהו אזורים הזקוקים להתאמה, כגון זמינותן של פרמיות עבור משקי בית בעלי הכנסה נמוכה.

יוזמת חינוך

בחינוך, הערכות של התערבויות ילדות מוקדמות כמו תוכנית פרי פרסנ"ס ופרויקט Abecedarian הראו החזרות גבוהות על ההשקעה, מה שהוביל להרחבת תוכניות קדם-K במדינות רבות. לאחרונה, הערכות קפדניות של מערכות הערכה למורה, רשתות בית הספר למשפטים, ותוכניות גישה במכללה סיפקו ראיות לגבי אילו אסטרטגיות למעשה לשפר את תוצאות התלמידים.

מדיניות סביבתית ואנרגיה

הערכה גם מילאה תפקיד מרכזי במדיניות סביבתית.סוכנות הגנת הסביבה בארה"ב מעריכה באופן קבוע את תוצאות תיקונים של חוק אוויר נקי, תוך מתן מימון של מיליוני מקרי מוות מוקדמים ומיליארדים בהטבות כלכליות לצמצום זיהום האוויר.במגזר האנרגיה, הערכות של סובסידיות אנרגיה מתחדשות ותוכניות יעילות אנרגיה עזרו לעצב את המבנים עלות יעילות של ממשלות המזרזות את המעבר לכלכלת פחמן נמוכה.

התנגשויות ואתגרים בולטים בהערכה למדיניות

למרות ערכו, הערכת המדיניות אינה ללא אתגרים משמעותיים, הכרה במסחרפים אלה מסייעת למתרגלים לנהל ציפיות ועיצוב הערכות חזקות יותר.

המונחים: Allocation

ביצוע הערכה באיכות גבוהה דורש זמן רב, מימון ומומחיות.משאבים אלה הם לעתים קרובות בקושי, במיוחד בהגדרות בעלות נמוכה יותר.המסחר בין השקעה בהערכה לעומת השקעה בשירותים ישירים או לצרכים דחופים אחרים.ארגונים חייבים לאשר הערכות כי סביר להניח להניב מידע בעל ערך גבוה לשקול גישות בעלות נמוכה (למשל, באמצעות נתונים אדמיניסטרטיביים, הערכה מהירה מחזורית) שבו מתאים.

הגבלת נתונים

גישה לנתונים אמינים, בזמן, וגביע היא לעתים קרובות המחסום הגדול ביותר להערכה יעילה.הנתונים עשויים להיות שלמים, שנאספו באמצעות הגדרות לא עקביות, או לא זמין עבור תת-קבוצות מפתח. חששות פרטיות והגבלות משפטיות יכול להגביל עוד שיתוף נתונים.כאשר איכות נתונים היא עני, אפילו שיטות אנליטיות המתוחכמות ביותר יפיקו תוצאות לא אמינות.

סליחות ו-Deaduals

קביעת מדיניות שגרמה לתוצאה נצפית – ולא גורמים חיצוניים אחרים – חקירה שבנתה ניגוד לגיטימיות: מה היה קורה בהיעדר המדיניות.בהגדרות רבות בעולם האמיתי, יצירת ניגוד אמין היא קשה.מגבלות אתיות או פוליטיות עלולות למנוע הקצאה אקראית, וניסויים טבעיים עשויים שלא להתקיים.

לחצים פוליטיים וארגוניים

תוצאות הערכה יכולות להיות מאיימים על בעלי העניין שהשקיעו במדיניות.יתכן שיהיה לחץ לדכא ממצאים שליליים, לתכנן הערכות בדרכים שאינן צפויות לזהות כשלון, או להתעלם מתוצאות המנוגדות לנרטיבים המועדפים עליהם, שמירה על עצמאות ואמינות דורשות מבני ממשל חזקים, תוכניות הערכה מותקנות מראש, ודיווח שקוף של ארגונים כמו FLT:0U.S של הערכת ניהול הפרט ואמינות דורש מבנים חזקים של ממשל, ו- 1FWTORWIFWOW.

זמן ורלוונטיות

החלטות מדיניות לעתים קרובות צריך להיעשות במהירות, בעוד הערכות קפדניות יכולות לקחת חודשים או שנים. המתח הזה יכול להוביל להערכה להסתיים לאחר שהם כבר לא שימושיים. תגובה אחת היא לאמץ גישה "אמיתית" או "מעגל אונס" הערכה, באמצעות איסוף נתונים וניתוח כדי לספק משוב בעוד מדיניות עדיין מיושמת.

Best Practices for Robust Policy Assessment

בהתבסס על עשרות שנים של ניסיון מסוכנויות ממשלתיות, מוסדות מחקר וארגונים בינלאומיים, השיטות הטובות ביותר הבאות יכולות להגדיל את הסבירות כי הערכות יהיו אמינות ושימושיות.

(FLT:0Engage בעלי העניין בתהליך ההערכה.FreaLT:1) מעורבים אלה המעצבים, ליישם, מושפעים מהמדיניות, מבטיחים כי שאלות ההערכה רלוונטיות, השיטות הן סבירות, והממצאים פועלים על ידי.
(FLT:0) מטרות ברורות ותוצאות לפני תחילת ההערכה.FLT 1 ואג מטרות להוביל להערכה מעורפלת.מטרות צריכות להיות ספציפיות, ניתנות למדידה, רלוונטיות, וזמן רב (SMART).
(הופנה מהדף ההרחבה) (הופנה מהדף AFPI) של גישה מעורבת להבנה מקיפה.10.10.10.LT מספרים בלבד מספרים בודדים מספרים את הסיפור המלא.שלב שיטות מספק הן רוחב והן עומק של תובנה.
(FLT:0) לקדם את תוכנית ההערכה.FreaLT:1 רשם בפומבי את המתודולוגיה, התוצאות ותכנית הניתוח המיועדת מפחיתה את הסיכון לתוצאות של צלע הדובדבן או שינוי השערות לאחר צפייה בנתונים.
(FLT:0) ממצאים קומוניסטיים ביעילות לכל בעלי העניין.I.E.veFLT:1 מצגות, מצגות ועצות לקהלים שונים - פוליטיקאים, מתרגלים, והציבור. השתמש בשפה ברורה וויזואליזציה כדי להעביר מסרים מרכזיים ללא גירוי יתר.
(FLT:0Build iterative למידה לתוך מחזור המדיניות.BuildFLT:1) הערכה לא צריכה להיות פעילות חד-לשונית. ניטור רציף ושיקום תקופתי מאפשרים מדיניות להסתגל לתנאים משתנים.
[ה]הממשלה והארגונים צריכים להכשיר צוות, לממן יחידות הערכה עצמאיות וליצור תרבות שמעריכה ראיות.ה-FLT:2academic Literature on Organizational LearningFLT 3LT, Foundation Based Assessment Units, and Create a Culture that Values evidence.

עתיד הערכת מדיניות

הטכנולוגיה מרחיבה במהירות את האפשרויות להערכה מדיניות.הצמיחה של נתונים מנהליים הקשורים במערכות (עם אמצעי הגנה נאותים לפרטיות) מאפשרת ניתוחים זולים, בקנה מידה גדול של למידת מכונות ואינטליגנציה מלאכותית יכולה לעזור לזהות דפוסים וחיזוי תוצאות, אם כי הם גם להעלות חששות לגבי הטיה והסבירה. ניטור בזמן אמת באמצעות מכשירים ניידים וחיישנים יכול לספק משוב מיידי על איכות יישום מדיניות.

מגמה מתפתחת נוספת היא שילוב של תובנות התנהגותיות להערכה.על ידי לימוד האופן שבו ההטיות הקוגניטיביות והנורמות החברתיות משפיעות על ההתנהגות, הערכה יכולה לעצב הערכות רבות יותר של מדוע מדיניות מצליחה או להיכשל.בסוף, מודלים של הערכה ממוקדת באזרחים צוברים מתח, מה שמעצים קהילות להגדיר הצלחה בתנאים שלהם ולקיים את קבלת ההחלטות.

תחום הערכת המדיניות מתפתח ממומחיות טכנית לתפקוד של ממשל הליבה.כפי דרישות לשקיפות ויעילות לצמוח, היכולת להעריך בקפדנות והוגנות תוצאות מדיניות יהפכו אפילו יותר חיוניות.

מסקנה

הערכת תוצאות מדיניות היא תרגול מורכב אך חיוני עבור הממשל המודרני.ההצלחות של רפורמות מונעות ראיות בתחום הבריאות, החינוך והסביבה מוכיחות כי הערכה זהירה יכולה להוביל לחיים טובים יותר ושימוש יעיל יותר של משאבי ציבור.אך הבורסות - מגבלות מקור, מגבלות משאבים, מגבלות נתונים, אתגרים תגמול, ולחצים פוליטיים - מימשו אותנו כי הערכה היא לא מושלמת.