Generelle Hinweise

Bei der Programmevaluation sind folgende Punkte zu beachten:

• Die Programmevaluation ist immer darauf angewiesen, dass Projektnehmer Auskunft über ihr Projekt geben und bestimmte Projektdaten zur Verfügung stellen. Daher ist es sehr wichtig, dass zwischen Programmevaluatoren und Projektmitarbeitern ein gutes, vertrauensvolles Verhältnis besteht.

• Ziel der Programmevaluation ist nicht, Ergebnisse zu einzelnen Projekten zu generieren. In der Regel werden Daten daher in anonymisierter Form weiterverarbeitet, so dass keine Rückschlüsse auf einzelne Projekte möglich sind. Teilen Sie den Projektnehmern auf jeden Fall mit, welche Daten in welcher Form verwendet und kommuniziert werden!

• Bei der Evaluation auf Ergebnis- und Wirkungs-Ebene werden idealerweise Daten aus der Projektevaluation genutzt; die eigentliche Datenerhebung findet also auf Projektebene statt - und daher in den meisten Fällen durch die Projektmitarbeiter. Diese müssen deshalb rechtzeitig (möglichst schon zu Beginn ihrer Projekte!) darauf hingewiesen werden, wann welche Daten aus der Projektevaluation in welcher Form vorliegen müssen.

• Überlegen Sie, wie Sie die Projektmitarbeiter bei der Projektevaluation unterstützen können. Dadurch helfen Sie nicht nur den Projektnehmern, sondern Sie können auch leichter sicherstellen, dass die für die Programmevaluation benötigten Daten in der erforderlichen Qualität zur Verfügung stehen.

Ausserdem sind folgende allgemeine Punkte wichtig:

• Sind bereits Instrumente für die Datenerhebung vorhanden? Leichter und schneller als eine vollständige Neuentwicklung ist meist das Verwenden und Anpassen von vorhandenen Instrumenten. Schauen Sie im Kapitel Instrumente auswählen nach, ob für Sie etwas relevantes dabei ist.

• Beherrschen Sie den Umgang mit dem Instrument? Üben Sie das Führen eines Interviews anhand eines Interviewleitfadens oder die Anwendung eines Beobachtungsschemas, bevor die „echte“ Datenerhebung stattfindet.

• Erheben Sie nur die Daten, die für die Beantwortung der Evaluationsfragestellung benötigt werden, die auswertbar und interpretierbar sind. Überlegen Sie vorher genau, welche Daten wirklich notwendig sind, um die Zeit der Auskunftgebenden nicht über Gebühr zu beanspruchen.

• Stellen Sie einen Zeitplan auf. Überlegen Sie, wann das Instrument einsatzbereit ist und von wann bis wann die Datenerhebung stattfinden kann bzw. wann welche Daten aus den Projekten vorliegen sollen. Definieren Sie dazu die Verantwortungen und überprüfen Sie die Deadlines.