Beywl, W., Kehr, J., Mäder, S., & Niestroj, M. (2007). Evaluation Schritt für Schritt: Planung von Evaluationen. Münster: hiba.

ISBN: 978-3-89751-226-9 Preis: 14,00 Euro/20,90 CHF (unverbindliche Preisangabe) Rezensiert von Heike Steckhan, Dezember 2012/Januar 2013 Verlag

Zusammenfassung der Inhalte

Der Band, erschienen in der Reihe Weiterbildung des heidelberger institut beruf und arbeit (hiba), ist als kompakter Leitfaden zur systematischen Planung und Umsetzung von Evaluation konzipiert. Die Autorinnen und Autoren definieren Evaluation als „spezifische wissenschaftsbasierte Dienstleistung“ (S. 5). Basierend auf diesem Grundverständnis stellen sie auf 80 Seiten dar, wie die anfallenden Arbeitsschritte bewältigt werden können. Der Evaluationsprozess wird dabei in sechs Leistungsschritte eingeteilt: „Mit Beteiligten Zwecke und Nutzen festlegen“, „Gegenstand & Bedingungen sowie Fragestellungen klären“, „Untersuchungsplan festlegen“, „Daten erheben & auswerten“, „Schlussfolgern und bewerten“ und „Ergebnisverwendung einleiten“. Nach Vorbemerkungen und Einleitung ist jedem Schritt ein Kapitel gewidmet. Die Kapitel beginnen jeweils mit einem Überblick über die Aufgaben, wobei Bezug auf die relevanten Standards für Evaluation genommen wird, stellen dann die nötigen Planungs- und Durchführungsschritte dar und schließen mit einer Checkliste. Das Vorgehen anhand dieses Leitfadens soll sicher stellen, dass kein relevanter Arbeitsschritt vergessen wird. Innerhalb einzelner Kapitel werden verschiedene Möglichkeiten und Instrumente dargestellt, aus denen das für die jeweilige Evaluation und die dafür zur Verfügung stehenden Ressourcen bestmöglich passende Vorgehen ausgewählt werden kann Bei allen Schritten wird der Einbezug von Beteiligten und Betroffenen, mit den darin liegenden Vorteilen und Schwierigkeiten angesprochen. Im letzten Kapitel wird ein besonderer Schwerpunkt auf den Nutzen und die Nutzung von Evaluationen durch Auftraggebende und Beteiligte gelegt.

Die Autorinnen und Autoren geben an, der Band solle Praktikerinnen und Praktikern als Handreichung dienen, „wie Evaluation qualifiziert vergeben, geplant und durchgeführt werden kann“ (S. 5). Der Text wird diesem Anspruch gerecht, indem er konsequent auf Praxis und Umsetzung hin orientiert ist, ohne dabei zu geringe Ansprüche an eine qualifizierte Durchführung zu stellen. In knapper Form und verständlicher Sprache wird der Ablauf von Evaluation beschrieben und durch Beispiele, Grafiken und Tipps illustriert. Auf theoretische Hintergründe und vertiefte Darstellungen wird zu Gunsten des kompakten „Kochrezept-Formats“ verzichtet. Wo eine umfangreichere Auseinandersetzung mit einem Thema nötig wäre, zum Beispiel zu Datenerhebungs- und Auswertungsmethoden, wird auf Literatur und weitere Informationsquellen verwiesen. Einsteigerinnen und Einsteiger, die lernen möchten, selbstständig Evaluationen durchzuführen, sollten sich mit Hilfe dieser Quellen über die Lektüre des Bandes hinaus weiterbilden.

Das Buch eignet sich für

Die Autorinnen und Autoren nennen als Zielgruppe Praktikerinnen und Praktiker, wobei keine direkten Angaben zum Vorwissen der Zielgruppe gemacht wird. Implizit werden aber Personen angesprochen, die bisher keine oder sehr geringe Erfahrung mit Evaluation haben. Durch seine kompakte Form ist der Band attraktiv für Einsteigerinnen und Einsteiger, die einen schnellen Überblick über den Ablauf von Evaluationen erhalten möchten und weniger an ausführlichen Darstellungen von Theorien, Ansätzen und Methoden von Evaluation interessiert sind. Der Band beschränkt sich nicht auf ein Anwendungsgebiet von Evaluation und eignet sich daher für Evaluierende in verschiedenen Kontexten. Neben der Nutzung im praktischen Kontext wäre auch eine akademische Nutzung als Lektüre und Handlungsleitfaden in praxisorientierten Lehrveranstaltungen zu Evaluation denkbar.

Stärken und Schwächen

Durch den kompakten Umfang und den Einsatz von Grafiken und Praxisbeispielen ist mit dem Band ein übersichtlicher Einblick in den gesamten Ablauf von Evaluation gelungen. Es werden alle wichtigen Schritte angesprochen und in knapper aber professioneller Form erläutert. Einige Arbeitsschritte werden verkürzt dargestellt, jedoch durch Verweise auf vertiefende Texte unterfüttert. Im Fokus des Textes stehen handlungsrelevante Hinweise zur Planung und Durchführung von Evaluation. Theorien der Evaluation, aktuelle Ansätze in der Evaluationsforschung oder auch die geschichtliche Entwicklung von Evaluation werden kaum thematisiert. Auch auf die Darstellung von spezifischem Kontextwissen, wie Organisations- und Feldkenntnisse, wird verzichtet, was den Band aber für eine breite Zielgruppe öffnet. Der Band ist kein Lehrbuch im klassischen Sinne, er enthält keine Übungen oder Aufgaben, sondern ist stark auf eine direkte praktische Anwendung fokussiert. Für die intendierte Zielgruppe der Praktikerinnen und Praktiker stellt er eine sinnvolle Einstiegslektüre dar.

Besonderheiten

Die praxisorientierte, leicht lesbare und dabei trotzdem professionelle Darstellung des Ablaufs einer Evaluation zeichnet diesen Band aus. Die enthaltenen, anschaulichen Grafiken könnten auch in anderen Kontexten als der Weiterbildung für PraktikerInnen zur Erläuterung von Evaluation und ihrem Vorgehen genutzt werden. Mit den umfangreichen Praxistipps und Checklisten kann er auch erfahrenen EvaluatorInnen noch Anregungen bieten.

Standardisierte Checkliste für die Rezension

A – Inhalte

Die folgende Liste zeigt mögliche Inhalte eines Lehrbuchs für Evaluation. Es muss nicht unbedingt ein Vorteil sein, wenn ein Buch alle Inhalte abdeckt, bzw. ein Nachteil, sollten nicht alle Inhalte behandelt werden. Vielmehr kommt es darauf an, dass die Inhalte vor dem Hintergrund des Anspruchs und der Zielsetzung des Buches in genügender Breite und Tiefe dargestellt sind.

B – Didaktik

Bei dem zu rezensierenden Buch handelt es sich (im weitesten Sinne) um ein Lehrbuch, d.h. um ein Medium, das explizit mit didaktischen Intentionen gestaltet wurde und allgemein oder themenspezifisch zu einzelnen Anwendungs- oder Teilbereichen der Evaluation informieren und die aktive Auseinandersetzung mit den dargestellten Inhalten anregen soll. Vor diesem Hintergrund stellen sich im Rahmen der Rezension die folgenden Fragen: 

C – Textgestaltung

Mit Blick auf die Zielgruppe(n) bzw. den Anwendungskontext des Lehrbuches können auch gestalterische Kriterien an das Medium gestellt werden.

D – Formale Kriterien

Abschliessend werden noch einige formale Kriterien aufgeführt, die bei einer Buchbeurteilung zu berücksichtigen sind: