Das Auswärtige Amt (AA) und das Bundesministerium für wirtschaftliche Zusammenarbeit und Entwicklung (BMZ) stellen die aktuelle Evaluierungspraxis in beiden Ministerien vor, gehen auf Neuigkeiten ein, und auf Gemeinsamkeiten, Unterschiede und Gründe für teils unterschiedliche Ansätze. Themen sind u.a. ressortüberschneidende und internationale Zusammenarbeit im Bereich der Evaluierung, jeweilige Veröffentlichungspraxis, Formate, Kommunikation, politische Prioritäten nach den Strukturreformen in beiden Häusern.

Diese Veranstaltung ist weniger als Vortrag konzipiert. Vertreterinnen und Vertreter aus beiden Häusern stehen für eine offene Diskussion zur Verfügung.

Die Evaluation steht aktuell vor zahlreichen, existentiellen Herausforderungen: Der Evaluationsfachlichkeit fehlt es seit längerem an neuen Impulsen. Wesentliche Innovationen zum Wissensbestand der Evaluation sind in den letzten Jahren nicht aufgefallen. Die Evaluation wird zudem durch konkurrierende Ansätze (wie Qualitätsmanagement oder transdisziplinäre Forschung) bedrängt und ist durch das Aufkommen generativer Künstlicher Intelligenz gefordert. Studiengänge zur Evaluation werden eingestellt oder stehen wegen mangelnder Nachfrage unter Druck. Die Evaluationspraxis ist durch massive Budgetkürzungen eingeschränkt – nicht nur, aber besonders ausgeprägt in der Entwicklungszusammenarbeit. Populistische politischen Bewegungen und zunehmend autoritär agierende Regierungen benötigen keine durch Evaluation bereitgestellte, fundierte Entscheidungsgrundlagen.

Dieser Beitrag setzt sich vertieft mit diesen und weiteren Herausforderungen auseinander und stellt sich die Frage, ob die Zeit der Evaluation abgelaufen ist. In einem ersten Teil werden die anstehenden Herausforderungen und die damit für die Evaluation verbundenen Gefahren diskutiert.

Die Evaluation war bereits in der Vergangenheit immer wieder mit Hindernissen konfrontiert, konnte diese aber zumeist weitgehend erfolgreich bestehen. In einem zweiten Teil soll deswegen beleuchtet werden, wie in der bisherigen Geschichte eine erfolgreiche Krisenbewältigung erreicht werden konnte.

In einem abschliessenden dritten Teil werde ich aufgrund dieser Überlegungen Empfehlungen formulieren, die zu einer gedeihlichen Zukunft der Evaluation beitragen könnten. The show must go on!

Evaluation ist im Wesentlichen anwendungsorientierte Auftragsforschung. Die Auftraggebenden sind in aller Regel öffentliche Einrichtungen oder durch öffentliche Mittel finanzierte Organisationen des Dritten Sektors. Diese unterliegen dem europäisch geprägten Vergabe- und Beihilferecht – einem Rechtskorpus, der ursprünglich für materiale Beschaffungsakte und Baumaßnahmen entworfen wurde. Entsprechend reicht die Ausschreibungspraxis von überspezifizierten Ausschreibungen, die eher einer Baumaßnahme gleichen, bis hin zu unterspezifizierten, die Anbieter:innen in Unsicherheit über Leistungsumfang und Methoden lassen. Beide Extreme zeugen von mangelndem Verständnis für die professionellen Kompetenzen von Evaluator:innen und ihre Geschäftsmodelle. Auch Zeitvorstellungen in Ausschreibungen fordern Anbietende mit unterschiedlichen Geschäftsmodellen verschieden heraus und strukturieren so den Evaluationsmarkt mit.

Die Ausgestaltung von Ausschreibungen variiert damit stark nach Kompetenz der Auftraggebenden – eine Problematik, die auch die aktuellen Diskussionen in der DeGEval zur Revision der Empfehlungen für Auftraggebende widerspiegeln (vgl. Nowack et al., ZfEv 2/2024). Der Beitrag schließt daran an und entwirft ein Qualitätskonzept für Ausschreibungen, das die der Evaluation immanenten Spannungsverhältnisse zwischen Zielorientierung und methodischer Offenheit, zwischen der Fachkompetenz der Ausschreibenden und den konzeptionell-methodischen Kompetenzen der Evaluierenden sowie Finanzierungsmöglichkeiten und Geschäftsmodelle berücksichtigt. Dieses Konzept wird in einer qualitativen Inhaltsanalyse von 55 systematisch ausgewählten Ausschreibungen aus bundesweiten Vergabeplattformen angewendet und entlang von sechs Dimensionen bewertet. Mittels hierarchischer Clusteranalyse werden Ausschreibungstypen identifiziert, die als Grundlage für einen bedarfsorientierten Kompetenzaufbau von Auftraggebenden dienen können. Der Beitrag führt einen im vergangenen Jahr präsentierten konzeptionellen Beitrag weiter und präsentiert erstmalig die vollständigen Ergebnisse.