Gollwitzer, M., Jäger, R. S. (2007). Evaluation kompakt. Weinheim, Basel: Beltz PVU.

ISBN: 978-3-621-27758-7 Preis: 26,95 Euro (unverbindliche Preisangabe) Rezensiert von Jörg Rech, März 2013 Amazon / buch.de / Verlag

Zusammenfassung der Inhalte

Das Buch behandelt in drei Teilen grundlegende Evaluationsbegrifflichkeiten und -modelle, relevante Fragestellungen bezüglich Zweck und Zeitpunkt von Evaluationen sowie methodische Aspekte von Evaluationen. Der letztgenannte, methodische Teil der Publikation legt den Fokus auf quantitativ-empirische Erhebungsmethoden und statistische Auswertungsverfahren.
Teil 1 des Buches gibt in zwei Kapiteln einen einführenden Überblick über das Themengebiet der Evaluation (S. 1-38). Er beinhaltet eine Klärung des Begriffs und möglicher Zielsetzungen von Evaluation sowie damit zusammenhängenden Aspekten (z.B. Wirksamkeit). Weiterhin werden die historische Entwicklung von Evaluation, Gütekriterien und Evaluationsstandards sowie verschiedene Evaluationsmodelle überblicksartig dargestellt.

Der zweite und umfangreichste Teil widmet sich in sechs Kapiteln verschiedenen Fragestellungen unter Berücksichtigung von Zeitpunkt und Zweck der Evaluation (S. 39-132). Er beginnt mit der Evaluation von Ist-Zuständen – auch in vergleichender Perspektive (Kapitel 3). Dieses Kapitel zeigt unterschiedliche Erwartungen auf, die im Evaluationsprozess bestehen können. Zudem wird erörtert, wie ein Evaluationsauftrag näher bestimmt werden kann und welche Stakeholder hierbei einzubeziehen sind. Neben der Einführung von Kennwerten und Vergleichskriterien zur Beschreibung von Ist-Zuständen wird dargestellt, wie Gruppenvergleiche statistisch berechnet werden. Kapitel 4 beschäftigt sich mit der Evaluation von Veränderungen. Darin wird – unter Berücksichtigung methodischer Probleme – gezeigt, welche Arten von Veränderungen existieren und wie diese statistisch beschrieben werden können. Kapitel 5 beleuchtet Themen in Zusammenhang mit der Evaluation von Wirkungen, wie z.B. Wirkungsmodelle, Hypothesen, Nachhaltigkeit von Wirkungen, Neben- und Folgewirkungen, Kausalität und Robustheit. Die Effizienzanalyse ist Gegenstand von Kapitel 6, wobei u.a. die Bestimmung von Kosten und der Unterschied zwischen Nutzen und Wirkung erläutert werden. Zudem werden zwei Modelle der Effizienzanalyse (Kosten-Nutzen- und Kosten-Effektivität-Analyse) beschrieben. Die sog. ‚Prospektive Evaluation‘ (Kapitel 7) beschäftigt sich mit der Frage, ob überhaupt ein Interventionsbedarf besteht. Gegenstand des Kapitels ist daher die Bedarfsanalyse und wie diese dazu beiträgt, Problem, Zielgruppe und Zielformulierung sowie ein Maßnahmenkonzept zu bestimmen. Der zweite Teil des Buches endet schließlich mit der Darstellung formativer Evaluationen (Kapitel 8). Dabei geht es um die Frage, wie Evaluation zur Programmoptimierung und Implementationskontrolle während der Maßnahmendurchführung beitragen kann.
Methodische Aspekte von Evaluationen sind Bestandteil des dritten und letzten Buchteils (S. 133-208). In drei Kapiteln werden quantitative und qualitative Methoden der Datengewinnung (Kapitel 9), verschiedene Evaluationsdesigns (Kapitel 10) und statistische Datenauswertungsverfahren (Kapitel 11) vorgestellt. Auf Instrumente zur Auswertung qualitativer Daten wird jedoch nicht eingegangen.

Das Buch eignet sich für

Das Buch richtet sich an Studierende der Sozialwissenschaften und Personen, die sich im beruflichen Kontext mit Evaluation auseinandersetzen und sich Methodenkenntnisse zur Durchführung von Evaluationen aneignen möchten (S. XII). Wird das Buch zum Selbststudium genutzt, sollte ein Grundwissen in den Bereichen quantitative Methoden und Statistik vorhanden sein.

Stärken und Schwächen

Das Buch ist als Lehrbuch konzipiert. Jedes Kapitel beginnt mit einem Überblick darüber, was in dem Kapitel zu erwarten ist. Das Buch ist systematisch aufgebaut und enthält ein Glossar. Das Evaluationsthema wird durch viele Beispiele, übersichtliche Darstellungen sowie eine verständliche Sprache anschaulich näher gebracht. Zudem beinhaltet jedes Kapitel Angaben zu weiterführender Literatur und Übungsaufgaben, die den Leser(inne)n die Möglichkeit bieten, das durch das Buch erworbene Wissen zu vertiefen.
Insbesondere zwei Schwächen können identifiziert werden. Erstens wird die über weite Strecken des Buches übersichtliche und verständliche Aufarbeitung von Evaluationsthemen dadurch getrübt, dass gerade in den Abschnitten, die zentral für ein Lehrbuch sind (Konzepte und Begriffe), die Ausführungen unvollständig bleiben bzw. nicht in die Tiefe gehen. Zweitens fehlen im methodischen Bereich wichtige Bestandteile, da qualtitative Erhebungsmethoden zu knapp und qualitative Auswertungsverfahren überhaupt nicht behandelt werden. Darüber hinaus bleibt zu beachten, dass ein methodisches Grundwissen von Vorteil für den Leser ist.

Besonderheiten

CD mit Übungsbeispielen

Standardisierte Checkliste für die Rezension

A – Inhalte

Die folgende Liste zeigt mögliche Inhalte eines Lehrbuchs für Evaluation. Es muss nicht unbedingt ein Vorteil sein, wenn ein Buch alle Inhalte abdeckt, bzw. ein Nachteil, sollten nicht alle Inhalte behandelt werden. Vielmehr kommt es darauf an, dass die Inhalte vor dem Hintergrund des Anspruchs und der Zielsetzung des Buches in genügender Breite und Tiefe dargestellt sind.

B – Didaktik

Bei dem zu rezensierenden Buch handelt es sich (im weitesten Sinne) um ein Lehrbuch, d.h. um ein Medium, das explizit mit didaktischen Intentionen gestaltet wurde und allgemein oder themenspezifisch zu einzelnen Anwendungs- oder Teilbereichen der Evaluation informieren und die aktive Auseinandersetzung mit den dargestellten Inhalten anregen soll. Vor diesem Hintergrund stellen sich im Rahmen der Rezension die folgenden Fragen: 

C – Textgestaltung

Mit Blick auf die Zielgruppe(n) bzw. den Anwendungskontext des Lehrbuches können auch gestalterische Kriterien an das Medium gestellt werden.

D – Formale Kriterien

Abschliessend werden noch einige formale Kriterien aufgeführt, die bei einer Buchbeurteilung zu berücksichtigen sind: