Wenn Sie mir einen Auftrag zur Evaluation geben, Besprechen wir zuerst zusammen folgende Themen in folgender Reihenfolge:

Diese Reihenfolge ist wichtig, denn es gilt, nicht den weit verbreiteten „Evaluationsmythen“ zu verfallen, deren Aussagen in etwa lauten:

Dabei helfen folgende Fragen zur Klärung:

Zum Evaluationszweck:

• Was ist das konkrete Ziel der Evaluation?

• Wenn die Ergebnisse da sind – was werden Sie als nächstes damit machen?

• Wenn die Evaluation gar nicht durchgeführt würde, was würde Ihnen dann fehlen?

• Warum soll gerade jetzt eine Evaluation durchgeführt werden?

Zu den Fragestellungen der Evaluation:

• Wenn es das Programm / die Ausbildung / die Vorlesung nicht gäbe – mit welchen Argumenten würden Sie es / sie einfordern?

• Gibt es etwas, was Sie schon lange über...wissen, was Ihnen aber praktisch niemand glaubt?

• Welche Informationen wozu wären für Sie so wertvoll, dass Sie dies um jeden Preis gegenüber Ihren Konkurrenten verheimlichen würden?

zu den geeigneten Instrumenten der Evaluation

• Wer muss befragt werden, um die geeigneten Informationen bzw. Daten zu erhalten?

• Welches Instrument ist geeignet? (Fragebogen, Focusgruppe, qualitatives Interview)

• Wie umfangreich soll die Erhebung sein?

• Wenn die Antwort auf diese Frage XY ist – was nützt es Ihnen, das zu wissen?

Der folgende „Programmbaum“ nach Beywl et al. (2006, Univation) zeigt die verschiedenen Ebenen und möglichen Evaluationsbereiche eines Projekts. Die Grafik ist hilfreich, sich den ganzen Umfang eines Projekts zu vergegenwärtigen und genau festzulegen, auf welchen Ebenen des Programms evaluiert werden soll. Damit werden auch die Grenzen der Aussagekraft von entsprechenden Evaluationsresultaten bildhaft dargestellt.

Quelle:
Beywl, Wolfgang (2006): "Demokratie braucht wirkungsorientierte Evaluation. Entwicklungspfade im Kontext der Kinder und Jugendhilfe". In: DJI – Deutsches Jugendinstitut (Hg.): Wirkungsevaluation in der Kinder- und Jugendhilfe. Einblicke in die Evaluationspraxis. München: DJI, S. 25-46
Grafik: cc-Lizenz Quelle:http://eval-wiki.org/glossar/Programmbaum