Widmer, T., De Rocchi, T. (2012). Evaluation: Grundlagen, Ansätze und Anwendungen. Zürich: Rüegger.

ISBN: 978-3-7253-0980-1 Preis: 16,50 Euro/22 CHF (unverbindliche Preisangabe) Rezensiert von Verena Friedrich, November 2012 Amazon / buch.de / Verlag

Zusammenfassung der Inhalte

Der Band umfasst acht Kapitel. In der Einleitung (1) werden kurz die Entwicklung der Evaluation, der gegenwärtige Stand der Professionalisierung, aber auch problematische Tendenzen skizziert: Aufgrund von Unkenntnissen und Missverständnissen sehen die Autoren „teilweise überrissene Erwartungshaltungen gegenüber Evaluationen“ (S. 7) und wollen hier Aufklärung leisten. Im Kapitel ‚Grundbegriffe der Evaluation‘ (2) werden zunächst die Merkmale der Evaluation (Wissenschaftlichkeit, Dienstleistung, Bewertung) beschrieben, und die Evaluation wird von alltäglicher Bewertung, von wissenschaftlicher Forschung und von verschiedenen Instrumenten der Verwaltungspraxis (Audit, Controlling, Qualitätsmanagement etc.) abgegrenzt. Die Autoren gehen außerdem auf mit der Evaluation verwandte Ansätze ein (Gesetzes- und Regulierungsfolgenabschätzung, Nachhaltigkeitsbeurteilung etc.). Das Kapitel schließt mit der Klärung zentraler evaluatorischer Begrifflichkeiten. Das Kapitel ‚Entwicklung der Evaluation‘ (3) befasst sich zunächst mit der thematischen Entwicklung der Evaluation, v.a. in der Schweiz. Im Absatz zur konzeptionellen Entwicklung wird anhand des Guba-Lincoln’schen Modells der „vier Generationen“ die Entwicklung vom ‚Messen‘ über das ‚Beschreiben‘ bis zum ‚Bewerten‘ und ‚Verhandeln‘ nachgezeichnet und auch auf neuere Entwicklungen (z.B. multi-method Ansätze) Bezug genommen. Zum Schluss des Kapitels werden politische Rahmenbedingungen und ihre jeweiligen Einflüsse auf die Evaluation anhand von fünf „Evaluationskonjunkuren“ beschrieben. Das Kapitel ‚Theorien, Konzepte und Modelle‘ der Evaluation (4) ist mit 34 Seiten das umfangreichste im Buch. Abgestützt auf eine ähnliche Systematik von E. Vedung werden Effektivitäts-Modelle, ökonomische und akteursorientierte Modelle der Evaluation ausführlich dargestellt. Im Vergleich zum vorhergehenden Kapitel ist das Kapitel zu den ‚Methoden‘ (5) mit nur acht Seiten recht kursorisch. Entsprechend knapp wird auf Untersuchungsanlagen und  techniken, Datenerhebungs-, -aufbereitungs- und  auswertungsverfahren sowie auf methodische Besonderheiten der Evaluation eingegangen. Das Kapitel ‚Evaluationsprozess – Schritt für Schritt‘ (6) beschreibt anhand von vier Phasen (Planung, Ausarbeitung des Pflichtenhefts und Auftragsvergabe, Durchführung und Begleitung der Evaluation, Berichterstattung und Verbreitung der Resultate) den Evaluationsprozess für extern beauftragte Evaluationen, und zwar aus der Perspektive sowohl des Auftraggebenden als auch des Evaluierenden. Das Kapitel ‚Evaluation im Kontext‘ (7) ist in vier Absätze gegliedert: Im ersten Teil geht es um die institutionelle Einbettung der Evaluationsfunktion im schweizerischen politischen System; der zweite Teil befasst sich mit der Evaluationspraxis in der Schweiz; der dritte widmet sich der Evaluationsnutzung (Nutzungsforschung, „Theory of Influence“ und „Evidence-based policy making“), und der letzte Absatz behandelt das Thema Qualität der Evaluation (hier werden u.a. die Stärken und Grenzen der SEVAL-Standards kritisch gewürdigt). Im Kapitel ‚Diskussion‘ (8) stellen die Autoren „einige übergreifende Überlegungen zum Zustand der Evaluation“ (S. 164) an. Hier werden einige positive und negative Entwicklungen skizziert; die Autoren votieren dafür, dass „noch selektiver, zielorientierter und differenzierter“ (S. 167) evaluiert werden solle, damit sich die Zukunftsaussichten der Evaluation optimieren lassen.

Das Buch eignet sich für

Das Buch will ausdrücklich kein Lehrbuch im engeren Sinne sein, sondern informieren und aufklären; insofern sind die in der Checkliste (s.u.) aufgelisteten Kriterien nur teilweise anwendbar. Einen Schwerpunkt und eine Stärke des Buchs stellt das Kapitel vier zu den Evaluationsansätzen dar. Hier werden die unterschiedlichen Ansätze mit ihren wichtigsten Merkmalen übersichtlich, nachvollziehbar und ausführlich beschrieben, wobei jeweils auch ihre Stärken und Schwächen diskutiert werden. Zahlreiche Beispiele illustrieren die jeweiligen Herangehensweisen. Ein weiterer Fokus liegt auf der Institutionalisierung und der Praxis der Evaluation im schweizerischen politischen System; allerdings scheinen diese Darstellungen auf teilweise bereits etwas älteren Befunden zu beruhen.

Stärken und Schwächen

Durch den kompakten Umfang und den Einsatz von Grafiken und Praxisbeispielen ist mit dem Band ein übersichtlicher Einblick in den gesamten Ablauf von Evaluation gelungen. Es werden alle wichtigen Schritte angesprochen und in knapper aber professioneller Form erläutert. Einige Arbeitsschritte werden verkürzt dargestellt, jedoch durch Verweise auf vertiefende Texte unterfüttert. Im Fokus des Textes stehen handlungsrelevante Hinweise zur Planung und Durchführung von Evaluation. Theorien der Evaluation, aktuelle Ansätze in der Evaluationsforschung oder auch die geschichtliche Entwicklung von Evaluation werden kaum thematisiert. Auch auf die Darstellung von spezifischem Kontextwissen, wie Organisations- und Feldkenntnisse, wird verzichtet, was den Band aber für eine breite Zielgruppe öffnet. Der Band ist kein Lehrbuch im klassischen Sinne, er enthält keine Übungen oder Aufgaben, sondern ist stark auf eine direkte praktische Anwendung fokussiert. Für die intendierte Zielgruppe der Praktikerinnen und Praktiker stellt er eine sinnvolle Einstiegslektüre dar.

Besonderheiten

Die Autoren verstehen unter Evaluation ein „Instrument zur systematischen und transparenten Bewertung eines Gegenstands im öffentlichen Raum“ (S. 7); Evaluation wird mit Politikevaluation gleichgesetzt, und die politikwissenschaftliche Perspektive ist die vorherrschende. Entsprechend ausführlich wird auch auf die Entwicklung und Einbettung der Evaluation im schweizerischen politischen System eingegangen. Andere Gegenstände und disziplinäre Perspektiven werden kaum angesprochen.

Standardisierte Checkliste für die Rezension

A – Inhalte

Die folgende Liste zeigt mögliche Inhalte eines Lehrbuchs für Evaluation. Es muss nicht unbedingt ein Vorteil sein, wenn ein Buch alle Inhalte abdeckt, bzw. ein Nachteil, sollten nicht alle Inhalte behandelt werden. Vielmehr kommt es darauf an, dass die Inhalte vor dem Hintergrund des Anspruchs und der Zielsetzung des Buches in genügender Breite und Tiefe dargestellt sind.

B – Didaktik

Bei dem zu rezensierenden Buch handelt es sich (im weitesten Sinne) um ein Lehrbuch, d.h. um ein Medium, das explizit mit didaktischen Intentionen gestaltet wurde und allgemein oder themenspezifisch zu einzelnen Anwendungs- oder Teilbereichen der Evaluation informieren und die aktive Auseinandersetzung mit den dargestellten Inhalten anregen soll. Vor diesem Hintergrund stellen sich im Rahmen der Rezension die folgenden Fragen: 

C – Textgestaltung

Mit Blick auf die Zielgruppe(n) bzw. den Anwendungskontext des Lehrbuches können auch gestalterische Kriterien an das Medium gestellt werden.

D – Formale Kriterien

Abschliessend werden noch einige formale Kriterien aufgeführt, die bei einer Buchbeurteilung zu berücksichtigen sind:

Weitere Rezensionen dieser Publikation:
• von Verena Friedrich
• von Katharina Klockgether