Wir legen Ergebnisse offen und lernen daraus

Evaluationen bei Brot für die Welt sollen dazu führen, dass Partner, die Projekte durchführen, und Mitarbeitende, die Projekte begleiten, aus den gemachten Erfahrungen und den Erkenntnissen von unabhängigen Gutachterinnen und Gutachtern lernen. Dadurch wird die Qualität und die Wirksamkeit der Projekte verbessert und die Programmarbeit weiter entwickelt. Dies bezeichnen wir als die Lernfunktion der Evaluationen.

Darüber hinaus leisten Evaluationen auch einen Beitrag dazu, dass die Arbeit der Partnerorganisationen und von Brot für die Welt transparent wird und wir gegenüber unseren Geldgeberinnen und -gebern Rechenschaft ablegen. Dies nennen wir die Legitimitätsfunktion der Evaluationen.

Die „Leitlinien zur ziel- und wirkungsorientierten Erfolgskontrolle im Bereich der Förderung entwicklungswichtiger Vorhaben der Kirchen“ des Bundesministeriums für wirtschaftliche Zusammenarbeit und Entwicklung (BMZ) und das Evaluationskonzept von Brot für die Welt bilden die Richtlinien, anhand derer evaluiert wird. Der Leitfaden Evaluation, bestehend aus verschiedenen Handreichungen zu den einzelnen Schritten während des Evaluationsprozesses, dient der Qualitätssicherung von Evaluationen. Um die Unabhängigkeit des Prozesses zu gewährleisten, ist das Team Evaluation – außerhalb des Vorstandsbereichs Internationale Programme – im Präsidialbereich von Brot für die Welt angesiedelt.

Evaluationen von Brot für die Welt orientieren sich an den Standards der Deutschen Gesellschaft für Evaluation und an den internationalen OECD/DAC-Evaluationskriterien. Das heißt, in Evaluationen fragt Brot für die Welt danach, ob

• im Projekt das Richtige getan wurde? (Relevanz)
• die geplanten Projektziele erreicht wurden? (Effektivität)
• die Projektziele wirtschaftlich erreicht wurden? (Effizienz)
• die Maßnahmen die angestrebten Wirkungen erreicht haben? (Impact)
• die positiven Wirkungen von Dauer sind? (Nachhaltigkeit)

Bei der Auswahl von Gutachterinnen und Gutachtern ist Brot für die Welt in erster Linie ihre regionale, sektorale und Methodenkompetenz sowie ihre Unabhängigkeit wichtig. Zusätzlich achten wir darauf, dass sie die Menschenrechte und die Würde aller Beteiligten respektieren (ethische Erhebungspraxis) und partizipativ arbeiten. In allen Evaluationen wird das Querschnittsthema Gender berücksichtigt und wo möglich auch die Querschnittsthemen Inklusion und Umwelteinwirkungen. Außerdem legen wir Wert darauf, dass die Gutachterteams aus männlichen und weiblichen Evaluierenden und Evaluierenden aus dem Norden und dem globalen Süden zusammengesetzt sind.

Neben den Projektevaluationen, die von den Partnerorganisationen in Auftrag gegeben werden, evaluieren wir auch mehrere Projekte übergreifend. Wir unterscheiden zwischen folgenden Evaluationsarten:

• Programmevaluationen bewerten mehrere Projekte, die zusammen an einem thematischen Schwerpunkt arbeiten.
• Unternehmensstrategische Evaluationen bewerten den Einsatz eines Instruments der Entwicklungszusammenarbeit sowie hausinterne Strategien, Policies und Strukturen.
• Metaevaluationen bewerten die Qualität der Evaluationen einzelner Projekte und/oder Leistungen der Gutachtenden. Jede Metaevaluation hat einen zusätzlichen inhaltlichen Fokus zum Beispiel die Nutzung von und das Lernen aus Evaluationen.
• Querschnittsevaluationen bewerten mehrere Projekte oder Programme hinsichtlich einer bestimmten Fragestellung oder Thematik. Oft richten sie sich an einen bestimmten Sektor oder eine Region, zum Beispiel berufliche Bildung in Westafrika. Sie können jedoch auch eine Maßnahmenart betreffen.
• Förderbereichsevaluationen bewerten Projekte eines Förderbereichs und sind zwischen dem Bundesministerium für wirtschaftliche Zusammenarbeit und Entwicklung (BMZ) und den kirchlichen Zentralstellen für Entwicklungszusammenarbeit als ein gemeinsames Instrument zur Erfolgskontrolle der kirchlichen Entwicklungszusammenarbeit vereinbart.

Die Gutachterinnen und Gutachter fassen ihre Evaluationsberichte in anonymisierter Form zusammen. Diese Zusammenfassungen enthalten eine Kurzbeschreibung der Organisation, die das Projekt durchgeführt hat, und des evaluierten Projekts selbst. Sie beschreiben die Ziele der Evaluierung sowie wie die Gutachterinnen und Gutachter methodisch vorgegangen sind und fassen die zentralen Erkenntnisse und Empfehlungen nach OECD/DAC-Kriterien zusammen. Zusammenfassungen von ab 2017 durchgeführten Evaluationen, die vom Team Evaluation begleitet wurden, stellen wir hier zur Verfügung.

Wir veröffentlichen regelmäßig eine Liste der geplanten Evaluationen, die vom Team Evaluation in Auftrag gegeben werden, und die aktuellen Bekanntgaben.