]> http://www.evoluation.de/taxonomy/view/or/62 Eignung eines potentiellen Evaluationsgegenstands für eine Evaluation. Evaluierbarkeit wurde von Wholey (1979) in die Diskussion eingeführt und im Konzept der Evaluierbarkeitsanalyse operationalisiert. Demnach müssen folgende Standards erfüllt sein, damit es Sinn macht, ein Programm zu evaluieren: # Die Ziele des Programms sind so definiert, dass sie sich in Form von messbaren Leistungsindikatoren mit vernünftigem Aufwand erfassen lassen. # Die (theoretischen und pragmatischen) Annahmen und Ziele des Programms sind plausibel, d.h. es gibt Grund zur Annahmen, dass das Programm zur Zielerreichung in erwarteten Sinne beiträgt. # Die voraussichtliche Nutzung der Evaluationsergebnisse durch Programmverantwortliche ist festgelegt. Der zweite Punkt verweist auf Wholeys Rolle als Pionier der Verwendung logischer Modelle (logic models) in der Evaluation. de http://www.evoluation.de/node/view/143 <p> Ziel einer <a class="glossary_term" href="glossary#228"><acronym title="Überprüfung der Evaluierbarkeit eines Programms durch Evaluierende im Vorfeld einer Evaluation. ">Evaluierbarkeitsanalyse</acronym></a> (<a class="glossary_term" href="glossary#62"><acronym title="Eignung eines potentiellen Evaluationsgegenstands für eine Evaluation. ">evaluability</acronym></a> <a class="glossary_term" href="glossary#123"><acronym title="Feststellung der Ausprägung einer Variablen für ein gegebenes Objekt; im messtheoretischen Sinne: Zuordnung von Zahlen zu Objekten oder Ereignissen durch die homomorphe Abbildung eines empirischen Relativs in ein numerisches Relativ (Bortz &amp; Döring, 2002). ">assessment</acronym></a>) ist, die Wahrscheinlichkeit zu erhöhen, dass die <a class="glossary_term" href="glossary#23"><acronym title="Die systematische Untersuchung von Güte oder Nutzen eines Gegenstands (Joint committee on standards for educational evaluation, 1994) bzw. das Ergebnis einer solchen Untersuchung. ">Evaluation</acronym></a> rechtzeitig, relevant und responsiv (den Informationsbedürfnissen entsprechend) sein wird. Damit ist sie eine Strategie zur Kosteneffizienz, da die für <a class="glossary_term" href="glossary#23"><acronym title="Die systematische Untersuchung von Güte oder Nutzen eines Gegenstands (Joint committee on standards for educational evaluation, 1994) bzw. das Ergebnis einer solchen Untersuchung. ">Evaluation</acronym></a>en zur Verfügung stehenden <a class="glossary_term" href="glossary#52"><acronym title="Materielle und immaterielle Ausgangsbedingungen, die durch ein Programm für das Hervorbringen gewünschter Wirkungen bereitgestellt werden müssen. ">Ressourcen</acronym></a> optimal ausgenutzt werden sollen. </p> <p> Als Ergebnisse einer <a class="glossary_term" href="glossary#228"><acronym title="Überprüfung der Evaluierbarkeit eines Programms durch Evaluierende im Vorfeld einer Evaluation. ">Evaluierbarkeitsanalyse</acronym></a> sollten folgende Informationen vorliegen, auf welche die anschließende <a class="glossary_term" href="glossary#23"><acronym title="Die systematische Untersuchung von Güte oder Nutzen eines Gegenstands (Joint committee on standards for educational evaluation, 1994) bzw. das Ergebnis einer solchen Untersuchung. ">Evaluation</acronym></a> aufbauen kann: </p> <ul> <li> Konkretisierung der Ziele und Inhalte des <a class="glossary_term" href="glossary#6"><acronym title="Das, was in einer Evaluation untersucht und bewertet wird, bzw. dessen Güte oder Nutzen bestimmt wird. ">Evaluationsgegenstand</acronym></a>s. <li> Formulierung von (Leistungs-)<a class="glossary_term" href="glossary#241"><acronym title="Empirisch erfassbarer Sachverhalt, der ein empirisch nicht zugängliches Merkmal vollständig oder gemeinsam mit weiteren Indikatoren repräsentiert.">Indikator</acronym></a>en, an denen <a class="glossary_term" href="glossary#25"><acronym title="Gezielt konzipiertes Maßnahmenpaket, das eine erwünschte Wirkung auf individueller oder sozialer Ebene herbeiführen soll. ">Programm</acronym></a><a class="glossary_term" href="glossary#51"><acronym title="Durch ein Programm intendierte Veränderungen bei den Zielgruppen auf individueller oder überindividueller Ebene, oft gestaffelt in kurzfristige (short-term/initial/proximal), mittelfristige (intermediate) und langfristige (long-term/distal) Outcomes. ">wirkung</acronym></a>en festgestellt werden können. <li> Festlegung von Veränderungsoptionen in Folge der <a class="glossary_term" href="glossary#23"><acronym title="Die systematische Untersuchung von Güte oder Nutzen eines Gegenstands (Joint committee on standards for educational evaluation, 1994) bzw. das Ergebnis einer solchen Untersuchung. ">Evaluation</acronym></a> (Möglichkeiten der <a class="glossary_term" href="glossary#20"><acronym title="Verwendung von Evaluationsergebnissen durch Entscheider, Nutzer oder Abnehmer von Evaluationsberichten. ">Nutzung</acronym></a> von <a class="glossary_term" href="glossary#119"><acronym title="Ergebnisse einer Evaluationsstudie, also die methodisch begründbare Beantwortung der Fragestellungen der Evaluation und weitere Erkenntnisse, niedergelegt in der Berichterstattung. ">Evaluationsergebnis</acronym></a>sen) </ul> <p> Datenquellen für eine <a class="glossary_term" href="glossary#228"><acronym title="Überprüfung der Evaluierbarkeit eines Programms durch Evaluierende im Vorfeld einer Evaluation. ">Evaluierbarkeitsanalyse</acronym></a> sind </p> <ul> <li> Dokumente, die im <a class="glossary_term" href="glossary#224"><acronym title="Faktoren in der Programmumwelt, die einen Einfluss auf den Evaluationsgegenstand und seine Wirkmechanismen haben. ">Kontext</acronym></a> des <a class="glossary_term" href="glossary#6"><acronym title="Das, was in einer Evaluation untersucht und bewertet wird, bzw. dessen Güte oder Nutzen bestimmt wird. ">Evaluationsgegenstand</acronym></a>s vorliegen, wie etwa <a class="glossary_term" href="glossary#26"><acronym title="Eine Vorhaben, das eine konkrete Zielsetzung verfolgt, zeitlich begrenzt ist, neuartig ist, organisatorisch komplex ist, meist mehrere Personen bzw. Personengruppen umfasst und eine gezielte Veränderung herbeiführen will. ">Projekt</acronym></a>konzepte, Anträge etc. <li> Informationen von <a class="glossary_term" href="glossary#4"><acronym title="Personen, Personengruppen und Institutionen, die einen Einfluss auf die Evaluation oder den Evaluationsgegenstand haben (Auftraggeber, Entscheider), die an Entwicklung oder Umsetzung des Evaluationsgegenstands beteiligt sind (Praktiker) oder die vom Evaluationsgegenstand beeinflusst werden (Zielgruppe, Benachteiligte). ">Betroffene</acronym></a>n und <a class="glossary_term" href="glossary#4"><acronym title="Personen, Personengruppen und Institutionen, die einen Einfluss auf die Evaluation oder den Evaluationsgegenstand haben (Auftraggeber, Entscheider), die an Entwicklung oder Umsetzung des Evaluationsgegenstands beteiligt sind (Praktiker) oder die vom Evaluationsgegenstand beeinflusst werden (Zielgruppe, Benachteiligte). ">Beteiligte</acronym></a>n </ul> <p> Literatur: Wholey (1979), Trevisan &amp; Huang (2003) </p> <p> Kritik am ursprünglichen Konzept der <a class="glossary_term" href="glossary#62"><acronym title="Eignung eines potentiellen Evaluationsgegenstands für eine Evaluation. ">Evaluierbarkeit</acronym></a>, aus Sicht der <a class="glossary_term" href="glossary#16"><acronym title="Evaluationsansatz, bei dem der Evaluation eine Programmtheorie des evaluierten Programms zugrunde gelegt wird und als Ausgangspunkt des Evaluationsdesigns, der Dateninterpretation, der Untersuchung von Schwachstellen und/oder der Überprüfung von Wirkungen des Programms dient. ">theory-based evaluation</acronym></a>: </p> <ul> <li> Reduktion auf Ziele/<a class="glossary_term" href="glossary#51"><acronym title="Durch ein Programm intendierte Veränderungen bei den Zielgruppen auf individueller oder überindividueller Ebene, oft gestaffelt in kurzfristige (short-term/initial/proximal), mittelfristige (intermediate) und langfristige (long-term/distal) Outcomes. ">Outcome</acronym></a>s eines <a class="glossary_term" href="glossary#25"><acronym title="Gezielt konzipiertes Maßnahmenpaket, das eine erwünschte Wirkung auf individueller oder sozialer Ebene herbeiführen soll. ">Programm</acronym></a>s <li> Verzicht auf Formulierung der <a class="glossary_term" href="glossary#232"><acronym title="Differenzierte Darstellung der Wirkmechanismen eines Programms in Form von Kausalannahmen, die zeigen, auf welchem Weg das Programm seine Outcomes erreicht und welche Einflüsse dabei wirksam sind. ">Programmtheorie</acronym></a> <li> gehen offenbar von quasi-experimentellen "black-box" <a class="glossary_term" href="glossary#23"><acronym title="Die systematische Untersuchung von Güte oder Nutzen eines Gegenstands (Joint committee on standards for educational evaluation, 1994) bzw. das Ergebnis einer solchen Untersuchung. ">Evaluation</acronym></a>en aus </ul> <p> In späteren Revisionen greift Wholey (1987) neuere Entwicklungen auf. Auch die Formulierung der <a class="glossary_term" href="glossary#232"><acronym title="Differenzierte Darstellung der Wirkmechanismen eines Programms in Form von Kausalannahmen, die zeigen, auf welchem Weg das Programm seine Outcomes erreicht und welche Einflüsse dabei wirksam sind. ">Programmtheorie</acronym></a> gehört nun zur <a class="glossary_term" href="glossary#228"><acronym title="Überprüfung der Evaluierbarkeit eines Programms durch Evaluierende im Vorfeld einer Evaluation. ">Evaluierbarkeitsanalyse</acronym></a>. </p> Wed, 15 Dec 2004 23:05:12 +0100