เอกสาร กลยุทธ์ การประเมิน การฝึกอบรม

กลยุทธ์การประเมินผลสำหรับ โปรแกรมบริการมนุษย์ คู่มือสำหรับผู้กำหนดนโยบายและผู้ให้ ในความพยายามอย่างต่อเนื่องที่จะปรับปรุงโปรแกรมบริการมนุษย์เงินทุนผู้กำหนดนโยบายและผู้ให้บริการมีมากขึ้นตระหนักถึงความสำคัญของการประเมินผลโครงการอย่างเข้มงวด พวกเขาต้องการที่จะรู้ว่าสิ่งที่โปรแกรมบรรลุสิ่งที่พวกเขาเสียค่าใช้จ่ายและวิธีการที่พวกเขาควรจะดำเนินการเพื่อให้บรรลุความคุ้มค่าสูงสุด พวกเขาอยากรู้ว่าโปรแกรมที่ทำงานให้กับกลุ่มและพวกเขาต้องการข้อสรุปบนพื้นฐานของหลักฐานมากกว่าคำรับรองและอ้อนวอนเร่าร้อน กระดาษนี้จะออกวางสำหรับ nontechnician และหลักการพื้นฐานของการออกแบบการประเมินผลโครงการ มันส่งสัญญาณผิดพลาดทั่วไประบุข้อ จำกัด ที่ต้องได้รับการพิจารณาและนำเสนอความคิดในการแก้ปัญหาที่อาจเกิด หลักการเหล่านี้เป็นทั่วไปและสามารถนำไปใช้ที่หลากหลายของโปรแกรมบริการมนุษย์ เราแสดงให้เห็นถึงหลักการเหล่านี้ที่นี่มีตัวอย่างจากโปรแกรมสำหรับเด็กและเยาวชนที่มีความเสี่ยง การประเมินผลของโปรแกรมเหล่านี้เป็นสิ่งที่ท้าทายโดยเฉพาะอย่างยิ่งเพราะพวกเขาอยู่ที่ความหลากหลายของปัญหาและการแก้ปัญหาที่เป็นไปได้มักจะมีหลายหน่วยงานและลูกค้าและเปลี่ยนแปลงตลอดเวลาเพื่อตอบสนองความต้องการขยับบริการ ขั้นตอนในการเลือกที่เหมาะสมการออกแบบการประเมินผล ขั้นตอนแรกในกระบวนการของการเลือกการออกแบบการประเมินผลคือการชี้แจงคำถามที่ต้องตอบ ขั้นตอนต่อไปคือการพัฒนารูปแบบตรรกะที่ออกวางการเชื่อมโยงสาเหตุคาดว่าระหว่างโปรแกรม (หรือองค์ประกอบของโปรแกรม) และเป้าหมายโปรแกรม โดยไม่ต้องมีการติดตามการเชื่อมโยงเหล่านี้คาดว่าจะเป็นไปไม่ได้ที่จะตีความหลักฐานการประเมินผลที่มีการรวบรวม ขั้นตอนที่สามคือการทบทวนโครงการเพื่อประเมินความพร้อมสำหรับการประเมินผล ทั้งสามขั้นตอนสามารถทำได้ในเวลาเดียวกันหรืออยู่ในขั้นตอนที่ทับซ้อนกัน เพื่อความชัดเจน expositional เราจะหารือกันของพวกเขาในทางกลับกัน จากนั้นเราจะอธิบายถึงวิธีการเลือกการออกแบบที่ดีที่สุดสำหรับวัตถุประสงค์ที่ได้รับจากบรรดาประเภทหลักของการประเมินผลที่มีอยู่ ชี้แจงคำถามการประเมินผล การออกแบบของการประเมินผลใด ๆ เริ่มต้นด้วยการกำหนดผู้ชมสำหรับผลการวิจัยการประเมินผลสิ่งที่พวกเขาจำเป็นต้องรู้และเมื่อ คำถามเหล่านี้ตรวจสอบว่าต่อไปนี้สี่ประเภทหลักของการประเมินผลควรจะเลือก: การประเมินผลกระทบมุ่งเน้นไปที่คำถามของเวรกรรม ไม่โปรแกรมมีผลตั้งใจของตนหรือไม่ ถ้าเป็นเช่นนั้นคนที่ถูกช่วยและสิ่งที่กิจกรรมหรือลักษณะของโปรแกรมที่สร้างผลกระทบหรือไม่ โปรแกรมไม่ได้มีผลที่ไม่ตั้งใจใด ๆ บวกหรือลบ? การตรวจสอบประสิทธิภาพให้ข้อมูลเกี่ยวกับลักษณะสำคัญของวิธีระบบหรือโปรแกรมที่มีการดำเนินงานและขอบเขตที่ระบุวัตถุประสงค์ของโปรแกรมที่มีการบรรลุ (เช่นตัวเลขของเยาวชนเสิร์ฟเมื่อเทียบกับเป้าหมายเป้าหมายลด dropouts โรงเรียนเมื่อเทียบกับเป้าหมายเป้าหมาย) ผลการค้นหาจะใช้โดยผู้ให้บริการเงินทุนและกำหนดนโยบายในการประเมินผลการดำเนินงานของโครงการและความสำเร็จ การประเมินผลกระบวนการตอบคำถามเกี่ยวกับวิธีการที่โปรแกรมและเอกสารการดำเนินขั้นตอนและกิจกรรมที่ดำเนินการในการส่งมอบบริการ การประเมินผลดังกล่าวช่วยในการระบุปัญหาที่ต้องเผชิญในการส่งมอบบริการและกลยุทธ์สำหรับการเอาชนะปัญหาเหล​​่านี้ พวกเขาจะมีประโยชน์ในการปฏิบัติงานและผู้ให้บริการในการจำลองหรือการปรับกลยุทธ์โปรแกรม การประเมินค่าใช้จ่ายอยู่ที่เท่าไหร่องค์ประกอบของโปรแกรมหรือโปรแกรมค่าใช้จ่ายโดยเฉพาะอย่างยิ่งในส่วนที่เกี่ยวกับการใช้ทางเลือกของการทรัพยากรเดียวกันและเพื่อผลประโยชน์ที่ถูกผลิตโดยโปรแกรม ในสภาพแวดล้อมบัญชีปัจจุบันโปรแกรมจะต้องคาดหวังที่จะปกป้องค่าใช้จ่ายของพวกเขากับการใช้ทางเลือก การประเมินผลที่ครอบคลุมจะรวมถึงกิจกรรมทั้งหมดเหล่านี้ บางครั้งคำถามที่เกิดขึ้นกลุ่มเป้าหมายสำหรับการค้นพบหรือทรัพยากรที่มีอยู่ จำกัด มุ่งเน้นการประเมินผลอย่างใดอย่างหนึ่งหรือสองของกิจกรรมเหล่านี้ ไม่ว่าจะเป็นเพื่อให้การประเมินผลเบื้องต้นให้กับเจ้าหน้าที่เพื่อใช้ในการปรับปรุงการดำเนินงานและการพัฒนาโปรแกรมบริการเพิ่มเติมเป็นปัญหาที่ต้องเผชิญ ผลการศึกษาเบื้องต้นสามารถนำมาใช้อย่างมีประสิทธิภาพเพื่อแจ้งปัญหาการดำเนินงานและพัฒนาขีดความสามารถของพนักงานของโครงการที่จะดำเนินการประเมินผลอย่างต่อเนื่องของตัวเองและกิจกรรมการตรวจสอบ. (1) แต่การใช้ผลการวิจัยการประเมินผลนี้เรียกว่าการประเมินผลการก่อสร้างนำเสนอความท้าทายที่จะประเมินผลที่จะต้องเผชิญกับ งานที่ยากมากขึ้นจากการประเมินผลกระทบของการแทรกแซงการพัฒนา เมื่อโปรแกรมของตัวเองอย่างต่อเนื่องเพื่อการเปลี่ยนแปลงส่งผลกระทบต่อการวัดต้องวัดอย่างต่อเนื่องของประเภทและระดับของการให้บริการ อันตรายในการประเมินผลการก่อสร้างก็คือเส้นแบ่งระหว่างการดำเนินงานโครงการและการประเมินผลจะเบลอ ต้องใช้ความพยายามและทรัพยากรที่จำเป็นสำหรับการวิเคราะห์ผลกระทบในการประเมินผลการก่อสร้างจะต้องมีการวัดกับกำไรที่มีศักยภาพในการเขียนโปรแกรมจากการปรับปรุงอย่างต่อเนื่องและมีประโยชน์มากขึ้นจากผลการวิจัยการประเมินผลขั้นสุดท้าย พัฒนารูปแบบตรรกะ เป็นไปไม่ได้ที่จะตีความผลการวิจัยการประเมินผลโดยไม่ต้องมีความเข้าใจที่ชัดเจนในเป้าหมายของโปรแกรมลำดับการดำเนินงานและการเชื่อมโยงคาดว่าระหว่างพวกเขาและผลประโยชน์ที่คาดว่าโปรแกรม ความคาดหวังเกี่ยวกับความเชื่อมโยงเหล่านี้จะทำอย่างชัดเจนโดยการพัฒนารูปแบบตรรกะ รูปแบบดังกล่าวได้รับการพัฒนาโดยการพูดคุยกับผู้ให้บริการและผู้สนับสนุนเงินทุนของเป้าหมายและเหตุผลที่อยู่เบื้องหลังองค์กรโปรแกรมและเนื้อหาการตรวจสอบเอกสารการวางแผนและรายงานของโปรแกรมและทบทวนผลการวิจัยเกี่ยวกับโปรแกรมที่คล้ายกันหรือมีปัญหา การทบทวนวรรณกรรมที่อาจจะเป็นประโยชน์โดยเฉพาะอย่างยิ่งในการระบุการเชื่อมโยงสาเหตุที่เป็นไปได้และปัจจัยอื่น ๆ นอกเหนือจากโปรแกรมที่ควรพิจารณาในการประเมินผล รูปแบบตรรกะให้คำอธิบายที่เรียบง่ายของโปรแกรมผลตามวัตถุประสงค์และผลที่ตั้งใจไว้ ลักษณะโครงการรวมถึงประชากรที่จะไปถึงทรัพยากรที่จะใช้และบัตรประจำตัวของประเภทและระดับขององค์ประกอบบริการ เอาท์พุทเป็นผลิตภัณฑ์โปรแกรมทันทีที่เกิดจากการดำเนินงานภายในของโปรแกรมเช่นการส่งมอบบริการที่วางแผนไว้ ตัวอย่างของตัวชี้วัดการส่งออกในพื้นที่ของโปรแกรมสำหรับเด็กและเยาวชนที่มีความเสี่ยงอาจจะรวมถึงตัวเลขของเด็กที่รับวัคซีนเข้าชมบ้านโดยกรณีผู้จัดการหรือเยาวชนที่จบโปรแกรมการฝึกอบรมงาน เหล่านี้เป็นผลโปรแกรมในการเปิดรถในการผลิตผลลัพธ์ที่โปรแกรมที่ต้องการตัวอย่างเช่นการเจ็บป่วยลดลงในวัยเด็กลดลงในกรณีการละเมิดและการละเลยหรือการเพิ่มขึ้นของการจ้างงานเยาวชน ความเอาใจใส่และระมัดระวังจะต้องจ่ายให้เมื่อผลที่คาดว่าควรจะคาดว่าจะเกิดขึ้น ด้วยเหตุนี้มันมักจะเป็นประโยชน์ในการแบ่งผลลงในระยะกลางเมื่อเทียบกับอีกต่อไป ยกตัวอย่างเช่นการเข้าร่วมประชุมโรงเรียนในระดับที่ดีขึ้นในช่วงต้นอาจจะมีผลกลางที่เกี่ยวข้องกับผล longerterm ของการป้องกันการออกกลางคัน การดูแลจะต้องได้รับการมุ่งเน้นไปที่ผลที่จะเกิดขึ้นภายในระยะเวลาการศึกษา คลาสสิกความล้มเหลวในการเลือกผลที่คาดว่าจะเกิดขึ้นภายในกรอบเวลาของการศึกษาที่เกิดขึ้นในการประเมินผลของโปรแกรมป้องกันยาเสพติด DARE โปรแกรมการศึกษาสำหรับนักเรียนระดับประถมที่ห้าและหกออกแบบมาเพื่อป้องกันการใช้ยา ผลการประเมินพบว่าไม่มีการป้องกันที่สำคัญของการใช้ยาเสพติดในตอนท้ายของโปรแกรม ผลที่ได้นี้ควรได้รับการคาดการณ์ไว้เนื่องจากการใช้ยาที่ไม่ได้มักจะเริ่มต้นในหมู่เยาวชนในประเทศนี้จนถึงปีวัยรุ่นกลาง (14-17) ผลกลางอายุที่เหมาะสมควรจะได้รับเลือกให้เป็นตัวชี้วัดผลลัพธ์หลักเช่นทักษะต้านทานเพียร์ที่ดีขึ้นและการเปลี่ยนแปลงในความเชื่อเกี่ยวกับความเสี่ยงในการใช้ยาเสพติด รูปแบบตรรกะยังควรรวมถึงการทำแผนที่ที่ชัดเจนของเงื่อนไขที่อยู่ในสภาพแวดล้อมที่โปรแกรมหรือลักษณะของกลุ่มเป้าหมายหรือชุมชนที่อาจส่งผลกระทบต่อความสามารถของโปรแกรมเพื่อให้บรรลุเป้าหมายของตน ลักษณะที่ไม่ใช่โปรแกรมโปรแกรมขององค์กรชุมชนหรือกลุ่มเป้าหมายที่มีแนวโน้มที่จะมีอิทธิพลต่อผลและผลและ / หรือการใช้บริการโปรแกรมที่เรียกว่าตัวแปรก่อน เงื่อนไขหรือเหตุการณ์ที่เกิดขึ้นในโปรแกรมประชากรกลุ่มเป้าหมายหรือชุมชนที่อาจจะ จำกัด หรือขยายขอบเขตที่เอาท์พุทโปรแกรมจริงผลิตผลลัพธ์ที่ต้องการจะเรียกว่าตัวแปรไกล่เกลี่ย ยกตัวอย่างเช่นโปรแกรมการป้องกันยาเสพติดอาจจะมีประสิทธิภาพน้อยลงหากพนักงานโปรแกรมที่มีประสบการณ์หรือถ้าชุมชนท้องถิ่นมีทางเลือกน้อยลงเพื่อการพักผ่อนหย่อนใจสารเสพติดและ / หรือการใช้งานมากขึ้นในตลาดยาเสพติดเปิด (ตัวแปรก่อน) นำเสนอบริการสนับสนุนอื่น ๆ ในการรวมกันกับโปรแกรมที่อาจเพิ่มผลกระทบของมัน (ตัวแปร mediating) ในการประเมินผลกระทบต่อรูปแบบตรรกะที่ใช้ในการสะกดออกวิธีการและผู้ให้บริการบางอย่างที่คาดว่าจะสร้างการเปลี่ยนแปลงที่เฉพาะเจาะจง / ประโยชน์ ตัวอย่างเช่นถ้าโปรแกรมรวมถึงการเรียนการเลี้ยงดูแบ​​บตรรกะจะระบุกิจกรรมนี้เป็นองค์ประกอบของโปรแกรมที่สำคัญและแสดงประเภทของการเปลี่ยนแปลงในการอบรมเลี้ยงดูที่จะใช้ในการวัดผลลัพธ์โปรแกรม (เช่นโดยการปรับปรุงการให้ความช่วยเหลือผู้ปกครองที่มีบ้านหรือช่วยสื่อสารพ่อแม่ มีประสิทธิภาพมากขึ้นกับวัยรุ่น) ในการตรวจสอบประสิทธิภาพการทำงานรูปแบบตรรกะที่ใช้ในการมุ่งเน้นไปที่ชนิดของการส่งออกและตัวชี้วัดผลที่มีความเหมาะสมสำหรับประชากรเป้าหมายที่เฉพาะเจาะจงชุมชนหรือช่วงเวลา ตัวอย่างเช่นในหมู่ตัวชี้วัดของการพัฒนาเด็กในโรงเรียนหนึ่งอาจคาดหวังการเข้าร่วมประชุมในการปรับปรุงในภาคการศึกษาแรกของโปรแกรม แต่การปรับปรุงคะแนนการทดสอบทางวิชาการเฉพาะหลังจากที่ช่วงเวลาสำคัญของโปรแกรมการมีส่วนร่วมกับการกำหนดเวลาอาจจะแตกต่างกันตามอายุและขั้นตอนการพัฒนา ของเด็ก กระบวนการในการประเมินผลรูปแบบตรรกะที่ใช้ในการระบุความคาดหวังเกี่ยวกับวิธีการที่โปรแกรมจะทำงาน-เหมาะชนิดซึ่งจากนั้นจะสามารถใช้ในการประเมินการเบี่ยงเบนในการปฏิบัติทำไมเบี่ยงเบนเหล่านี้ได้เกิดขึ้นและวิธีการเบี่ยงเบนอาจส่งผลกระทบต่อผลโปรแกรม นี้จะช่วยผู้จัดการโครงการ (และประเมินผล) เพื่อระบุความแตกต่าง (รวมถึงผลที่ไม่ตั้งใจบวกและลบ) พิจารณากลไกที่เป็นไปสำหรับการดำเนินงานโครงการปรับจูนในการจัดโปรแกรมที่เกิดขึ้นจริงด้วยวิธีการวางแผนหรือกลยุทธ์โปรแกรมใหม่เข้าชมที่จะต้องพิจารณาทางเลือก (2) รูปแบบลอจิกจะถูกสร้างขึ้นมาเพื่อแสดงให้เห็นลำดับชั่วคราวอาคารซ้ายไปขวาและพวกเขามักจะมีความสัมพันธ์แผนภาพที่มีลูกศร ตัวอย่างของรูปแบบตรรกะจะถูกแสดงในงานนิทรรศการเอได้รับการพัฒนาโดยสถาบันในเมืองในระหว่างการวางแผนการประเมินผลของเด็กที่ในโปรแกรมความเสี่ยง (CAR) รถเป็นโปรแกรมการแทรกแซงอย่างเข้มข้นออกแบบมาเพื่อป้องกันการมีส่วนร่วมในยาเสพติดและอาชญากรรมและเพื่อส่งเสริมให้เกิดการพัฒนาสุขภาพในหมู่วัยรุ่นวัย 13-15 ที่แสดงตัวชี้วัดความเสี่ยงร้ายแรงและอาศัยอยู่ในละแวกใกล้เคียงที่มีความสุขอย่างรุนแรงในเมือง การแทรกแซงประกอบด้วยองค์ประกอบของโปรแกรมแปดจำเป็นต้องใช้: ผู้จัดการกรณีการจ้างงานโดยโปรแกรมทำแผนบริการสำหรับสมาชิกทุกคนในครอบครัวของเด็กและเยาวชนที่เข้าร่วมโครงการและให้เร่งรัดติดตามการอ้างอิงถึงบริการที่จำเป็น, การจัดการ caseload 15; บริการครอบครัวรวมถึงการฝึกอบรมทักษะการเลี้ยงดูพ่อแม่ทุกคนและอ้างอิงไปยังบริการอื่น ๆ ตามความจำเป็น (อย่างเข้มข้นให้คำปรึกษาครอบครัวการจัดการความเครียด / การรับมือการฝึกอบรมทักษะการระบุและการรักษาสารเสพติด, การดูแลสุขภาพ, การฝึกอบรมงานและโปรแกรมการจ้างงานที่อยู่อาศัยและการสนับสนุนรายได้ บริการ); รวมถึงการบริการการศึกษาการสอนหรือความช่วยเหลือบ้านสำหรับเด็กและเยาวชนทุกคนและอ้างอิงไปยังบริการอื่น ๆ ตามความจำเป็น (การทดสอบการศึกษาการเรียนการศึกษาพิเศษ); หลังเลิกเรียนและกิจกรรมภาคฤดูร้อนสำหรับเด็กและเยาวชนรถทั้งหมดรวมถึงโปรแกรมที่พักผ่อนหย่อนใจและชีวิตทักษะ / ความเป็นผู้นำกิจกรรมการพัฒนารวมกับการฝึกอบรมหรือการศึกษา; การให้คำปรึกษาที่ให้บริการโดยองค์กรท้องถิ่นสำหรับเด็กและเยาวชนในความต้องการของการดูแลความสัมพันธ์กับผู้ใหญ่ บทบาทของที่ปรึกษาคือการ (ก) แจ้งเยาวชนเกี่ยวกับทางเลือกทางเลือกที่มีอยู่ (เช่นกิจกรรมและเป้าหมาย); (ข) การทำความรู้จักพวกเขาด้วยกลยุทธ์ที่มีอยู่สำหรับการใฝ่หาทางเลือกเหล่านั้น (ค) การให้การฝึกอบรมโอกาสสำหรับการปฏิบัติและข้อเสนอแนะในการพัฒนาทักษะการใช้กลยุทธ์โดยเฉพาะอย่างยิ่ง และ (ง) ให้ความสัมพันธ์ผ่านที่เยาวชนได้รับการยืนยันเป็นแรงบันดาลใจและการสนับสนุนที่จะให้ทางเลือกที่มีสุขภาพดี สิ่งจูงใจเช่นของขวัญและกิจกรรมพิเศษที่ใช้ในการสร้างกำลังใจในการทำงานและความผูกพันกับเป้าหมายโปรสังคมของโปรแกรม (เช่นบัตรของขวัญเดินทางและบัตรกำนัลสำหรับพิซซ่า, ร้านค้ากีฬา, ภาพยนตร์และเงินเดือนสำหรับการให้บริการชุมชนในช่วงโปรแกรมฤดูร้อน); ชุมชนการรักษา / การบังคับใช้กฎหมายที่เพิ่มขึ้นถูกนำมาใช้ในละแวกใกล้เคียงเป้าหมายเพื่อสร้างสภาพแวดล้อมที่ปลอดภัยยาเสพติดที่มีฤทธิ์น้อย กิจกรรมการบังคับใช้กฎหมายรวมถึงการออกจากตำรวจประจำในโรงเรียนและสถานที่ใกล้เคียงที่จะรักษาความสงบเรียบร้อยและเสริมสร้างความสัมพันธ์กับกลุ่มชุมชน พิจารณาความอาญา / แทรกแซงยุติธรรมเด็กและเยาวชนที่เกี่ยวข้องกับการทำงานร่วมกันระหว่างผู้บริหารและบุคลากรกรณีศาลเยาวชนจะให้โอกาสในการบริการชุมชนและการกำกับดูแลที่เพิ่มขึ้นของเยาวชนในระบบยุติธรรม ตัวแปรก่อนรวมถึงระดับและประเภทของพื้นที่ใกล้เคียงในครอบครัวกลุ่มเพื่อนและปัจจัยความเสี่ยงสำหรับผู้เข้าร่วมเช่นเดียวกับลักษณะทางประชากรของพวกเขา เหล่านี้มีอิทธิพลที่มีอยู่ก่อนที่จะแทรกแซงโปรแกรม ตัวแปรไกล่เกลี่ยรวมถึงการสัมผัสกับบริการอื่น ๆ ทางสังคมหรือการศึกษาการรับรู้ของโอกาสและบรรทัดฐานทางสังคม เหล่านี้มีอิทธิพลที่ ลอจิกรุ่นที่ใช้ในการประเมินผลของเด็กในโครงการมีความเสี่ยง ดำเนินการในเวลาเดียวกันเป็นโปรแกรมที่มีการดำเนินงาน ส่วนประกอบที่โปรแกรมถูกออกแบบมาเพื่อให้เกิดการลดลงของผล-กลางในปัจจัยเสี่ยงและการเพิ่มประสิทธิภาพของปัจจัยป้องกันในตอนท้ายของการมีส่วนร่วมโปรแกรม ผลกลางเหล่านี้วัดในตอนท้ายของการมีส่วนร่วมในโปรแกรมที่มีการตั้งสมมติฐานว่าจะเป็นขั้นตอนที่จำเป็นต่อการที่ต้องการในระยะยาวผลการป้องกันการใช้ยาเสพติดยาเสพติดขายการกระทำผิด, ความล้มเหลวในการเรียนและการออกกลางคันและบิดามารดาวัยรุ่น ผลโปรแกรมไม่ได้แสดงในแผนภาพนี้รวมถึงตัวชี้วัดของการปฏิบัติงานเช่นจำนวนของการประชุมการสอนที่ให้จำนวนการเข้าชมบ้านโดยกรณีผู้จัดการและจำนวนของผู้ปกครองมีส่วนร่วมในครั้งกิจกรรมของโครงการ การประเมินความพร้อมในการประเมินผล การประเมิน Evaluability เป็นขั้นตอนเป็นระบบสำหรับการตัดสินใจว่าการประเมินผลโครงการเป็นธรรมที่เป็นไปได้และมีแนวโน้มที่จะให้ข้อมูลที่เป็นประโยชน์ คำถามที่ได้รับการพิจารณาในการประเมิน evaluability รวมถึง: (3) เป็นรูปแบบตรรกะของโปรแกรมที่น่าเชื่อถือได้รับทรัพยากรที่มีอยู่และคำแนะนำจากวรรณกรรมที่เกี่ยวข้องหรือไม่ หากเป้าหมายของโปรแกรมไม่สมจริงหรือกลยุทธ์การแทรกแซงไม่ได้มีเหตุผลที่ดีในทฤษฎีและ / หรือหลักฐานก่อนแล้วไม่ได้ประเมินผลการลงทุนที่ดี สิ่งที่ชนิดของข้อมูลที่จะต้องจากสิ่งที่จำนวนของอาสาสมัครและข้อมูลที่มีแนวโน้มที่จะมีอยู่แล้ว? การประเมินผลควรจะออกแบบมาเพื่อเพิ่มการใช้ข้อมูลที่มีอยู่ตราบใดที่เหล่านี้เป็นตัวชี้วัดที่ถูกต้องของแนวความคิดที่สำคัญและมีความน่าเชื่อถือ ข้อมูลที่มีอยู่อาจยกตัวอย่างเช่นรวมถึงสถิติของรัฐบาลแต่ละหน่วยงานและบันทึกสรุปและสถิติและข้อมูลที่เก็บรวบรวมโดยนักวิจัยสำหรับการศึกษาอื่น ๆ หากมีข้อมูลสำคัญความต้องการไม่ได้พบกับข้อมูลที่มีอยู่ทรัพยากรจะต้องมีการเก็บรวบรวมข้อมูลใหม่ที่จำเป็น มีทรัพยากรที่เพียงพอและสินทรัพย์เผื่อเงินเวลาความเชี่ยวชาญและชุมชนและการสนับสนุนของรัฐบาล? มีปัจจัยใด ๆ ที่ จำกัด หรือ จำกัด การเข้าถึงทรัพยากรเหล่านี้หรือไม่ การประเมินผลสามารถทำได้ในกรอบเวลาที่จะอนุญาตให้ผลการวิจัยที่จะเป็นประโยชน์ในการทำโปรแกรมและการตัดสินใจนโยบายของรัฐบาลกลาง, รัฐและเจ้าหน้าที่ท้องถิ่น? สิ่งที่ขอบเขตการประเมินผลข้อมูลที่ไม่อยู่แล้วที่แห่งหนึ่งในเดียวกันหรือแทรกแซงเกี่ยวข้องอย่างใกล้ชิด? คำตอบสำหรับคำถามนี้สามารถมีผลกระทบที่สำคัญสำหรับการดำเนินการ ใด ๆ ที่ประสบความสำเร็จพยายามก่อนหน้านี้อาจให้รุ่นที่มีแนวโน้มสำหรับการจำลองแบบ บทเรียนที่ได้เรียนรู้จากความพยายามที่ไม่ประสบความสำเร็จก่อนหน้านี้อาจจะแจ้งความพยายามในปัจจุบัน หากหลักฐานเพียงพออยู่แล้วจากความพยายามก่อนหน้านี้ค่าของการประเมินผลใหม่อาจจะร่อแร่ สิ่งที่ขอบเขตเป็นผลจากการประเมินผลที่มีแนวโน้มที่จะ generalizable ให้กับชุมชนอื่น ๆ และดังนั้นจึงมีประโยชน์ในการประเมินว่าโปรแกรมที่ควรจะขยายไปสู่​​การตั้งค่าอื่น ๆ หรือพื้นที่? จะมีลักษณะเฉพาะของโครงการที่ได้รับการประเมินว่าอาจจะไม่ได้นำไปใช้กับโครงการอื่น ๆ มากที่สุด? ลักษณะโครงการที่ไม่ generalizable ลดมูลค่าของผลการวิจัยใด ๆ การเลือกการออกแบบการประเมินผล การเลือกของการออกแบบการประเมินผลดังต่อไปนี้การพิจารณาระบบของคำถามเหล่านี้ ดังที่ระบุไว้มีสี่ประเภทหลักของการประเมินผล: ผลกระทบต่อการตรวจสอบประสิทธิภาพของกระบวนการและค่าใช้จ่าย เราหารือในทางกลับกัน การประเมินผลกระทบต่อการออกแบบ สามการออกแบบที่เป็นไปได้เป็นไปได้สำหรับการประเมินผลกระทบ: การทดลองกึ่งทดลองและไม่ทดลอง พวกเขาทั้งหมดแบ่งปันกลยุทธ์ที่ใช้ในการเปรียบเทียบผลโปรแกรมที่มีตัวชี้วัดของสิ่งที่จะเกิดขึ้นโดยโปรแกรมบาง การออกแบบการทดลองที่มีประสิทธิภาพมากที่สุดและหลักฐานที่แข็งแกร่ง เหล่านี้เป็นไปไม่ได้เสมอ แต่ในกรณีที่เป็นหนึ่งในสองทางเลือกอื่น ๆ จะต้องเลือก (ส่วนต่อมากล่าวถึงวิธีการให้ทางเลือกที่.) ทดลองออกแบบ องค์ประกอบสำคัญ. การออกแบบการทดลองได้รับการพิจารณามาตรฐานทองคำในการประเมินผลกระทบ การทดลองกำหนดให้บุคคลหรือกลุ่มเช่นห้องเรียนหรือโรงเรียนได้รับการกำหนดโดยการสุ่ม (โดยพลิกเหรียญหรือขั้นตอนการ randomizing เทียบเท่า) เพื่อกลุ่มหนึ่งหรือก่อนที่จะเริ่มการให้บริการ กลุ่มการรักษาหรือกลุ่มจะได้รับการกำหนดให้ได้รับบริการที่ได้รับการออกแบบโดยเฉพาะเพื่อให้บรรลุผลอย่างชัดเจน หากกลุ่มการรักษาหลายที่กำหนดผลสำหรับกลุ่มการรักษาอาจจะเทียบกับอีกคนหนึ่งที่จะประเมินผลกระทบต่อความสัมพันธ์ของการให้บริการที่แตกต่างกันหรือญาติที่จะส่งผลกระทบต่อกลุ่มควบคุม กลุ่มควบคุมได้รับการบริการที่ไม่มี ผลกลุ่มการรักษาเมื่อเทียบกับกลุ่มควบคุมผลลัพธ์ที่จะประเมินผลกระทบ เพราะโอกาสที่จะเป็นตัวกำหนดคนเดียวที่ไ​​ด้รับบริการโปรแกรมกลุ่มสามารถสันนิษฐานว่าจะเป็นที่คล้ายกันในลักษณะที่อาจส่งผลกระทบต่อผลมาตรการยกเว้นโปรแกรม ความแตกต่างระหว่างการรักษาและกลุ่มควบคุมใด ๆ จึงสามารถนำมาประกอบกับความเชื่อมั่นต่อผลกระทบของโปรแกรม รูปแบบการออกแบบ การออกแบบรูปแบบหนึ่งจะขึ้นอยู่กับการสุ่มเลือกของช่วงเวลาระหว่างที่มีการให้บริการ ยกตัวอย่างเช่นบริการใหม่ ๆ อาจจะนำเสนอในสัปดาห์ที่สุ่มเลือกวันที่หรือ รุ่นของวิธีนี้คือการใช้สัปดาห์ / สัปดาห์ออกจากขั้นตอนที่ได้รับมอบหมาย แม้ว่าจะไม่ได้สุ่มอย่างแท้จริงวิธีนี้อย่างใกล้ชิดใกล้เคียงกับการกำหนดลักษณะสุ่มถ้าลูกค้าไม่ได้แตกต่างกันไปอย่างเป็นระบบในแต่ละสัปดาห์ มันมีประโยชน์ที่พนักงานโปรแกรมมักจะพบว่ามันง่ายกว่าที่จะใช้ในการตัดสินใจเกี่ยวกับการเข้าโปรแกรมโดยการพลิกของเหรียญบนพื้นฐานกรณีโดยกรณีที่สำคัญ การเปลี่ยนแปลงการออกแบบที่สองเป็นวิธีการเริ่มต้นเซ - in ซึ่งสมาชิกบางคนของกลุ่มเป้าหมายที่มีการสุ่มเลือกที่จะได้รับบริการที่มีความเข้าใจว่าส่วนที่เหลือจะได้รับบริการในเวลาต่อมา (ในกรณีของโรงเรียนหรือชั้นเรียนที่ภาคการศึกษาต่อไป หรือเดือน) ข้อเสียอย่างหนึ่งของการออกแบบเริ่มต้นเซเป็นที่สังเกตของผลจะถูก จำกัด ให้ช่วงระหว่างเวลาที่กลุ่มแรกเสร็จสมบูรณ์โปรแกรมและกลุ่มที่สองจะเริ่มขึ้น เป็นผลให้มันถูก จำกัด โดยทั่วไปจะประเมินกำไรในช่วงการมีส่วนร่วมในโปรแกรมค่อนข้างระยะสั้น ข้อ จำกัด / ข้อควรพิจารณา แม้ว่าการทดลองที่มีการออกแบบที่ต้องการสำหรับการประเมินผลกระทบต่อพื้นที่ทางวิทยาศาสตร์, การประเมินผลการพิจารณาแต่งตั้งไม่ได้เสมอตัวเลือกที่เหมาะในการตั้งค่าในชีวิตจริง บางคนมีการแทรกแซงโดยเนื้อแท้เป็นไปไม่ได้ที่จะศึกษาผ่านการทดลองแบบสุ่ม เยาวชน curfews ตัวอย่างเช่นไม่สามารถบังคับใช้กับเซตสุ่มเลือกของเด็กในชุมชน และในสัปดาห์เปิด / ปิดการบังคับใช้สัปดาห์มีแนวโน้มที่จะก่อให้เกิดการดูถูกทั้งกฎหมายและการบังคับใช้ การพิจารณาที่สองคือไม่ว่าจะได้รับมอบหมายสุ่มจริยธรรมและเป็นที่ยอมรับของชุมชน ความคิดเห็นของประชาชนอาจต้านทานการรักษาเด็กที่คล้ายกันแตกต่างกันบนพื้นฐานของการพลิกเหรียญหรืออาจจะดูเป็นแบบสุ่มได้รับมอบหมายการใช้ประโยชน์จากประชากรที่เปราะบางและคนที่ไม่มีอำนาจ ขั้นตอนการออกแบบอย่างระมัดระวังสำหรับการสุ่มอาจจะสามารถเอาชนะความต้านทานเช่น กลยุทธ์หนึ่งคือการสุ่มเลือกเหล่านี้จะได้รับการบริการจากรายชื่อของผู้ที่ตอบสนองความต้องการการมีสิทธิ์เมื่อทรัพยากรจะไม่สามารถที่จะให้บริการทุกคนที่มีสิทธิ์ รูปแบบของการวาดภาพจำนวนมากนี้อยู่ใกล้พอที่จะมาก่อนเสิร์ฟแรกที่ได้รับการยอมรับในฐานะที่เป็นธรรมในหลาย ๆ สถานการณ์ ให้บริการสำหรับลูกค้าบางรายในเวลาต่อมา (เดือนถัดไปหรือภาคการศึกษาตามที่อธิบายไว้ข้างต้น) อาจตอบสนองความกังวลเกี่ยวกับความเป็นธรรมกับชุมชนและสอดคล้องกับพนักงานที่มีอยู่และทรัพยากร บางครั้งได้รับมอบหมายสุ่มสามารถเกี่ยวข้องกับการผ่อนคลายความต้องการแทนการเพิ่มหนึ่งซึ่งจะทำให้การสุ่มขัดแย้งน้อย การดูแลที่ดีจะต้องมีการดำเนินการเพื่อให้มั่นใจว่ากลุ่มควบคุมที่ไม่ได้ปฏิเสธการบริการที่จำเป็นที่พวกเขาจะเป็นอย่างอื่นได้ว่าผลประโยชน์ที่จะเข้าร่วมและชุมชนมีการอธิบายอย่างระมัดระวังและพนักงานโปรแกรมที่และผู้เข้าร่วมเข้าใจและสนับสนุนการวิจัย เงินทุนจำนวนมากต้องมีการทบทวนอย่างเป็นทางการของการออกแบบการวิจัยโดยคณะการฝึกอบรมในการพัฒนาแนวทางในการป้องกันเข้าร่วมการวิจัย แม้ในขณะที่การตรวจสอบดังกล่าวไม่จำเป็นต้องพิจารณาอย่างชัดเจนของปัญหานี้เป็นสิ่งจำเป็น ปัญหาสำคัญที่สามคือไม่ว่าจะเป็นผลที่มีแนวโน้มที่จะได้รับแสดงให้เห็นถึงการลงทุน การทดลองมักจะต้องใช้ระดับสูงของทรัพยากร - เงินเวลาและความเชี่ยวชาญและการสนับสนุนจากเจ้าหน้าที่โครงการหน่วยงานภาครัฐและเงินทุนชุมชน วางแผนการประเมินผลจะต้องถามตัวเองไม่ว่าจะเป็นคำตอบสำหรับรายการของคำถามและการประเมินผลการตัดสินใจในการต่อเนื่องโปรแกรมการขยายตัวหรือการเปลี่ยนแปลงที่จะทำบนพื้นฐานของผลการวิจัยที่ - อาจจะขึ้นอยู่กับค่าใช้จ่ายน้อยที่ชัดเจนน้อยลง แต่ ยังคงกลยุทธ์การประเมินผลที่ยอมรับได้ ปัญหาในทางปฏิบัติ การออกแบบการทดลองเรียกใช้มากที่สุดมีความเสี่ยงที่จะถูกปนเปื้อนเพราะความผิดพลาดโดยเจตนาหรืออุบัติเหตุที่เกิดขึ้นในสนาม เพื่อลดอันตรายนี้จะต้องมีการทำงานร่วมกันอย่างใกล้ชิดระหว่างทีมการประเมินผลและพนักงานโปรแกรมในการระบุวัตถุประสงค์การตั้งค่าตารางการแบ่งความรับผิดชอบในการเก็บบันทึกข้อมูลและการเก็บข้อมูลการตัดสินใจเกี่ยวกับการติดต่อลูกค้าและการแบ่งปันข้อมูลเกี่ยวกับความคืบหน้าและปัญหา สนับสนุนการใช้งานของผู้บริหารโครงการที่สำคัญการฝึกอบรมพนักงานอย่างต่อเนื่องและการสื่อสารผ่านการประชุมการประชุมทางโทรศัพท์หรือ e-mail ที่มีความจำเป็น ความล้มเหลวที่จะปฏิบัติตามแผนสำหรับการกำหนดแบบสุ่มเป็นปัญหาที่พบบ่อย พนักงานมักจะมีความมุ่งมั่นอย่างแรงกล้าให้กับลูกค้าของพวกเขาและจะต้องการที่จะตัดสินใจเข้าโปรแกรมฐานในการรับรู้ของพวกเขาที่ต้องการหรือจะได้รับประโยชน์จากโปรแกรม เพื่อป้องกันอันตรายนี้ขั้นตอนควรจะตั้งขึ้นเพื่อให้ผู้ประเมินพนักงานโปรแกรมไม่ได้อยู่ในความดูแลของการจัดสรรเพื่อการรักษาหรือการควบคุมกลุ่ม การปรับเปลี่ยนทางสถิติในการวิเคราะห์อาจมีความจำเป็นในกรณีที่มีความล้มเหลวในการดำเนินงานเพื่อรักษากระบวนการสุ่มนี้ (4) และแม้กระทั่งเหล่านี้อาจจะไม่เพียงพอที่จะลบอคติที่นำมาจึง อีกพื้นที่ปัญหาที่อาจเกิดข้อมูล noncomparable สำหรับการรักษาและการควบคุมสมาชิกในกลุ่ม พนักงานโปรแกรมพร้อมที่สามารถเก็บรวบรวมข้อมูลและการให้ข้อมูลที่ติดต่อสำหรับสมาชิกกลุ่มการรักษาเพราะพวกเขามีการติดต่ออย่างต่อเนื่องกับลูกค้าหน่วยงานอื่น ๆ และชุมชน การเก็บรวบรวมข้อมูลที่เทียบเคียงและข้อมูลการติดต่อในสมาชิกกลุ่มควบคุมอาจเป็นเรื่องยาก หากการทดลองที่สูญเสียการติดตามทั้งหมดของการควบคุมมากกว่าสมาชิกในกลุ่มรักษาข้อมูลการประเมินผลจะไม่เพียง แต่จะมีข้อบกพร่องก็จะให้ข้อมูลที่บิดเบือนและดังนั้นจึงทำให้เข้าใจผิดในสิ่งที่ส่งผลกระทบต่อโปรแกรมที่มี วิธีที่ดีที่สุดที่จะหลีกเลี่ยงอคติจากปัญหานี้ (เรียกว่าการขัดสีที่แตกต่าง) คือการวางแผนขั้นตอนการติดตามและการเก็บรวบรวมข้อมูลในช่วงเริ่มต้นของการประเมินผลที่รวบรวมข้อมูลจากสมาชิกในกลุ่มควบคุมในวิธีที่พวกเขาสามารถอยู่และการพัฒนาข้อตกลงกับหน่วยงานอื่น ๆ ในชุมชน โดยเฉพาะอย่างยิ่งในการเขียนหนังสือเพื่อขอความช่วยเหลือในการเก็บรวบรวมข้อมูลและการติดตามสมาชิกตัวอย่าง ข้อตกลงเหล่านี้จะเป็นประโยชน์ในการรักษาความต่อเนื่องของกลุ่มตัวอย่างในหน้าของการหมุนเวียนพนักงานที่หน่วยงานที่เกี่ยวข้อง หากการให้บริการโปรแกรมและการเปลี่ยนแปลงเนื้อหาในช่วงเวลาที่มันอาจจะเป็นเรื่องยากที่จะตรวจสอบสิ่งที่ระดับหรือประเภทของบริการที่ผลิตผลลัพธ์ กลยุทธ์ที่ดีที่สุดคือการระบุการเปลี่ยนแปลงที่สำคัญในโปรแกรมและระยะเวลาของการเปลี่ยนแปลงที่เป็นส่วนหนึ่งของการประเมินผลกระบวนการและใช้ข้อมูลนี้เพื่อกำหนดประเภทของรูปแบบโปรแกรมในประสบการณ์ของผู้เข้าร่วมโปรแกรมที่แตกต่างกันสำหรับการวิเคราะห์ผลกระทบ ปัญหาที่อาจเกิดอื่น ๆ อาจจะแก้ไขได้โดยการใช้เทคนิคทางสถิติพิเศษ ปัญหาดังกล่าวรวมถึงระยะเวลาการติดตามไม่เพียงพอหรือไม่เท่ากันสำหรับการรักษาเมื่อเทียบกับการควบคุม (5) และความเสี่ยงของเหตุการณ์ที่เกิดขึ้น (เช่นความล้มเหลวในโรงเรียนจำคุกบาดเจ็บย้าย) ที่มีแนวโน้มที่จะเอาบางชนิดของสมาชิกจากกลุ่มตัวอย่างกว่าคนอื่น ก่อนที่จะสิ้นสุดระยะเวลาการวางแผนติดตามได้. (6) ตัวอย่าง. การประเมินผลโครงการการแจ้งเตือนเป็นจูเนียร์แปดสัปดาห์หลักสูตรของโรงเรียนสูงสำหรับการเรียนการสอนนักเรียนชั้นมัธยมศึกษาปีที่จะหลีกเลี่ยงการใช้ยาเสพติดที่ใช้ในการออกแบบการทดลอง (7) สามสิบแคลิฟอร์เนียและโอเรกอนโรงเรียนถูกสุ่มให้ได้สามกลุ่มคือ 1) นักศึกษาได้รับคำแนะนำจากนักการศึกษาสุขภาพการศึกษา 2) นักเรียนได้รับคำสั่งจากวัยรุ่นที่มีอายุมากกว่าและ 3) ไม่มีการรักษากลุ่มควบคุมแม้ว่าสี่ในโรงเรียนที่ไม่ได้รักษาให้ยาเสพติดอื่น ๆ การป้องกันโปรแกรมการเรียนการสอน เพื่อเพิ่ม generalizability ของการค้นพบที่โรงเรียนถูกดึงออกมาจากแปดเมืองชานเมืองและชุมชนชนบทและเกือบหนึ่งในสามของโรงเรียนมีประชากรชนกลุ่มน้อยร้อยละ 50 หรือสูงกว่า เพื่อเพิ่มความคล้ายคลึงกันก่อนกำหนดของทั้งสามกลุ่มทดลองและเสริมสร้างพลังทางสถิติของการวิเคราะห์ (ได้รับตัวอย่างที่ค่อนข้างเล็กของโรงเรียน) แต่ละกลุ่มทดลองถูกรวมอยู่ในอย่างน้อยหนึ่งโรงเรียนในแต่ละชุมชนและโรงเรียนที่รวมอยู่ใน การทดลองถูกจับคู่ในขอบเขตที่เป็นไปได้ที่จะลดความแตกต่างระหว่างกลุ่มต่าง ๆ ในลักษณะเช่นคะแนนทดสอบภาษาพูดที่บ้านใช้ยาในกลุ่มนักเรียนระดับประถม 8 และชาติพันธุ์และองค์ประกอบของรายได้ ขั้นตอนเหล่านี้ผลิตที่สำคัญคล้ายคลึงกันก่อนการทดลองในปัจจัยที่เกี่ยวข้องกับการใช้ยาในกลุ่มทดลอง ตั้งแต่โรงเรียนนักเรียน แต่ไม่ได้รับการสุ่มปรับสถิติถูกนำมาใช้ในการแก้ไขสำหรับการจัดกลุ่มของนักเรียนที่อยู่ในโรงเรียน นักเรียนเสร็จแบบสอบถามเกี่ยวกับการใช้ยาเสพติดของพวกเขาเจ็ดครั้งระหว่างเกรด 7 และ 12; ผู้ที่โอนไปยังโรงเรียนอื่น ๆ หรือหัวเมืองเสร็จ mail และการสัมภาษณ์ทางโทรศัพท์เพื่อลดการขัดสีตัวอย่าง มาตรการผลรวมปัจจัยเสี่ยงองค์ความรู้ที่เกี่ยวข้องกับการใช้ยาเสพติด: ความเชื่อเกี่ยวกับผลกระทบของการใช้บรรทัดฐานเกี่ยวกับการใช้ยาเสพติดต้านทานเพียร์ด้วยตนเองประสิทธิภาพและคาดว่าการใช้ยาในอนาคต การประเมินผลการทดลองมีค่าใช้จ่าย เด็กในการประเมินความเสี่ยงเช่นค่าใช้จ่าย $ 1,500,000 แต่การออกแบบที่ได้รับอนุญาตอย่างเข้มงวดข้อสรุปที่แข็งแกร่งเกี่ยวกับประสิทธิภาพในระยะยาวของการศึกษาป้องกันยาเสพติดในช่วงวัยรุ่นตอนต้นและแสดงให้เห็นว่าผลที่ไม่ได้ถูก จำกัด ให้กับชุมชนชั้นกลาง แต่สามารถนำมาใช้ในโรงเรียนที่มีสัดส่วนสูงของรายได้ที่ลดลงและนักเรียนชนกลุ่มน้อย ออกแบบกึ่งทดลอง องค์ประกอบสำคัญ. เช่นเดียวกับการทดลองการประเมินกึ่งทดลองเปรียบเทียบผลจากการเข้าร่วมโครงการไปสู่​​ผลลัพธ์ที่สำหรับกลุ่มเปรียบเทียบที่ไม่ได้รับบริการโปรแกรม ความแตกต่างที่สำคัญคือว่าการตัดสินใจเกี่ยวกับโปรแกรมที่ได้รับไม่ได้เป็นแบบสุ่ม กลุ่มเปรียบเทียบที่ทำขึ้นจากสมาชิกของกลุ่มเป้าหมายได้เป็นอย่างที่คล้ายกันเป็นไปได้ที่จะเข้าร่วมโครงการกับปัจจัยที่อาจมีผลต่อผลการเลือกที่จะตั้งข้อสังเกต เทคนิคทางสถิติหลายตัวแปรถูกนำมาใช้ในการควบคุมความแตกต่างที่เหลืออยู่ระหว่างกลุ่ม โดยปกติแล้วการประเมินผลที่มีอยู่ใช้กลุ่มประชากรเปรียบเทียบผู้ที่อาศัยอยู่ในพื้นที่ใกล้เคียงกันหรือกำลังเรียนอยู่ในโรงเรียนเดียวกันในห้องเรียนที่แตกต่างกันหรือเข้าร่วมโรงเรียนเดียวกันกับครูเดียวกันในปีที่ผ่านมา ในบางสถานการณ์พนักงาน (หรือโรงเรียนหรือชุมชน) มีความยินดีที่ได้รับการฝึกฝนหรือจะลองรักษาใหม่ในขณะที่คนอื่น ๆ ไม่ได้ แต่กฎเดียวกันสำหรับการมีสิทธิ์ใช้บริการโดยทั้งหมด รูปแบบการออกแบบ รูปแบบหลักคือการสร้างกลุ่มเปรียบเทียบโดยการจับคู่บุคคลกับบุคคลในกลุ่มการรักษาในชุดที่เลือกของลักษณะ กระบวนการนี​​้สำหรับการเลือกกลุ่มเปรียบเทียบเป็น methodologically ยุทธศาสตร์น้อย (8) ภัยคุกคามที่จะถูกต้องตามกฎหมายจะสองเท่า 1) ตรงกับขึ้นอยู่กับความคล้ายคลึงกันที่จุดเดียวในเวลาไม่เคยส่งผลในกลุ่มของบุคคลที่มีการเทียบเคียงเมื่อเวลาผ่านไป ดังนั้นกลุ่มที่แตกต่างกันอาจจะกลายเป็นมากขึ้นในช่วงเวลาที่เป็นอิสระของโปรแกรม 2) ความแตกต่างในตัวแปรที่ไม่ได้ใช้ในการจับคู่อาจมีผลกระทบอย่างมีนัยสำคัญเป็นอิสระของโปรแกรมที่ถูกประเมิน การออกแบบกึ่งทดลองแตกต่างกันในจำนวนและระยะเวลาของการเก็บรวบรวมข้อมูลที่เกี่ยวกับโปรแกรมการวัดผล การเลือกของจำนวนและระยะเวลาของการวัดที่อยู่บนพื้นฐานของการประเมินผลของภัยคุกคามที่อาจเกิดจากการตั้งสมมติฐานการแข่งขันที่ไม่สามารถตัดออกโดยวิธีการเปรียบเทียบที่ ในหลาย ๆ สถานการณ์การออกแบบที่แข็งแกร่งเป็นคนที่เก็บรวบรวมมาตรการก่อนโปรแกรมของผลลัพธ์และปัจจัยเสี่ยงเหล่านี้และใช้ในการวิเคราะห์ที่จะมุ่งเน้นการเปลี่ยนแปลงภายในของแต่ละบุคคลที่เกิดขึ้นในช่วงระยะเวลาโปรแกรม ตัวแปรเหล่านี้ยังใช้ในการระบุกลุ่มของผู้เข้าร่วมที่ได้รับประโยชน์มากที่สุดจากการบริการ การออกแบบรูปแบบหนึ่งที่เกี่ยวข้องกับจุดตรวจวัดเพิ่มเติม (นอกเหนือจากการที่เรียบง่ายก่อนและหลัง) ในการวัดแนวโน้มอย่างแม่นยำมากขึ้น รูปแบบอื่นจะเป็นประโยชน์เมื่อก่อนโปรแกรมการเก็บรวบรวมข้อมูล (เช่นการบริหารจัดการทดสอบความรู้หรือทัศนคติ) อาจสอนให้เด็กและเยาวชนเกี่ยวกับคำถามที่จะถามหลังจากที่โปรแกรมในการวัดการเปลี่ยนแปลงและทำให้บิดเบือนการวัดของผลกระทบต่อโปรแกรม รูปแบบนี้จะเกี่ยวข้องกับการ จำกัด การเก็บรวบรวมข้อมูลที่จะสิ้นสุดระยะเวลาโปรแกรมสำหรับบางกลุ่มที่ช่วยให้คำตอบที่โพสต์โปรแกรมของพวกเขาที่จะนำมาเปรียบเทียบกับคำตอบที่โพสต์โปรแกรมของผู้ที่ยังมีส่วนร่วมในการทดสอบก่อนโปรแกรม การพิจารณา / ข้อ จำกัด การใช้งานของการออกแบบกลุ่มควบคุมที่ไม่ได้เทียบเท่าต้องให้ความสนใจระมัดระวังในการวิธีการที่ออกกฎการแข่งขันสมมติฐานเกี่ยวกับสิ่งที่เกิดจากความแตกต่างที่สังเกตใด ๆ เกี่ยวกับผลลัพธ์ที่น่าสนใจ ในการประเมินผลของโปรแกรมสำหรับเด็กที่เปราะบางและเยาวชนสามภัยคุกคามต่อความถูกต้องโดดเด่น. (9) ที่แรกก็คือภัยคุกคามของการเจริญเติบโต - ความเป็นไปได้ว่ากระบวนการที่เกี่ยวข้องกับอายุจะส่งผลให้ผลเป็นอิสระจากการแทรกแซงของโปรแกรม ในหมู่เยาวชนผลบางอย่างในเชิงบวกและเชิงลบจะเชื่อมโยงอย่างยิ่งที่จะอายุ - ผลเช่นการใช้ยาเสพติดการกระทำผิดและบิดามารดาต้น ดังนั้นจึงเป็นเรื่องจำเ​​ป็นที่จะต้องให้แน่ใจว่ากลุ่มเปรียบเทียบถูกสร้างขึ้นจากเยาวชนที่มีขั้นตอนการพัฒนาเดียวกัน ตัวอย่าง. ตัวอย่าง. ตัวอย่าง. กึ่ง การปฏิบัติ และ ตัวอย่าง. ตัวอย่าง. สรุปผลการวิจัย