Nicht der Plan wirkt, sondern seine Umsetzung: Ein feldübergreifendes Kriteriensystem der Implementationstreue

Abstract

Gießen Zusammenfassung: Implementationstreue bezeichnet das Ausmaß, in dem die Umsetzung eines Programms mit dem urspriinglich Geplanten iibereinstimmt. Die Implementationsforschung zeigt, dass eine konzepttreue Umsetzung von Programmen eher Ausnahme als Regel ist, wofür unterschiedliche Gründe verantwortlich sein können. Für Evaluationen ergibt sich die Notwendigkeit, Implementationstreue in geeigneter Weise zu berücksichtigen. Denn Abweichungen in der Implementationstreue können in formativen Evaluationen auf Verbesserungsmöglichkeiten hinweisen und in summativen Evaluationen führt ihr Ignorieren zu Fehlschlüssen über Programmeffekte. Bisher fehlt ein feldübergreifendes, möglichst generisches und theoretisch begründbares Kriteriensystem zur Operationalisierung von Implementationstreue. Der Beitrag gibt einen Überblick über den Stand der Literatur und präsentiert einen Vorschlag für ein umfassendes Kriteriensystem zur Erfassung der Implementationstreue in Evaluationsstudien, das theoretisch auf dem in der Evaluation wohletablierten Ansatz des logischen Modells

Alternate abstract:

Fidelity Abstract: Implementation fidelity is the degree of overlap between the actual execution of a program and the programs initial plan. Implementation research shows that due to a number of reasons programs can deviate from their initial plan more often than not. Accordingly, evaluations have to consider implementation fidelity adequately. In formative evaluation, deviations from a program's concept can suggest possible improvements, while in summative evaluations, neglecting implementation fidelity can lead to erroneous attributions of effectiveness. While a number of approaches for operationalizing implementation fidelity have been proposed in the literature, a domain independent, as far as possible generic, and theoretically derived system of criteria for measuring implementation fidelity is still missing. The article reviews the state of the literature and proposes a comprehensive system of criteria for determining implementation delity in evaluation studies which is theoretically based on the well-established logic model approach.