Praxisnahe Forschung zur Wirkung und Wirksamkeit von Angeboten in der Sozialen Arbeit hat in den letzten Jahren an Umfang und Bedeutung gewonnen. Folglich werden im Sozialwesen auch vermehrt Wirkungsanalysen und Wirkungsevaluationen durchgeführt. Eine zentrale methodische Herausforderung bei Wirkungs- und Evaluationsforschung in Handlungsfeldern der Soziale Arbeit stellen zeitliche Aspekte dar. Bereits bei der Entwicklung von Wirkmodellen muss der zeitliche Verlauf berücksichtigt werden, etwa bei der Einschätzung, wann für eine bestimmte Zielgruppe der Eintritt der intendierten Wirkungen nach Durchführung des Angebots zu erwarten ist. Ein weiterer Aspekt ist die zeitliche Begrenzung von Evaluationsprojekten, mit der Folge, dass Evaluierende und Auftraggeber zum Projektstart realistisch klären sollten, ob und wenn ja, welche Wirkungen man – vor dem Hintergrund zeitlicher Restriktionen – empirisch valide erfassen kann. Gerade im Hinblick auf längsschnittliche Designs, die für einen validen Nachweis von Veränderungen und Stabilisierungen benötigt werden, ergeben sich Herausforderungen bei begrenzten Laufzeiten von Evaluationsprojekten.

Im Rahmen des Vortrags werden die zeitbezogenen Herausforderungen in Evaluationsprojekten in der Sozialen Arbeit vorgestellt und mögliche Lösungen diskutiert. Es wird dargestellt, wie die Zeitperspektive bereits zum Start von Wirkungsanalysen bzw. im Prozess der Wirkungsorientierung bei der Entwicklung von Wirkmodellen berücksichtigt werden kann. Weiterhin wird diskutiert, wie man das Dilemma zwischen begrenztem Zeitrahmen für eine Evaluation und der Umsetzung eines längsschnittlichen Designs lösen kann bzw. wann dies unmöglich erscheint und so auch offen kommuniziert werden muss. Auch wird im Beitrag darauf eingegangen, wie eine verstärkte Evaluations- und Datenkompetenz in Organisationen sowie eine langfristig angelegte Implementierung von Erhebungssystemen diese Herausforderungen in der Zeitperspektive von Wirkungsanalysen und Wirkungsevaluationen lösen können.

Das Förderprogramm „Betriebliches Mobilitätsmanagement“ (BMM) zielt darauf ab, Unternehmen bei der Entwicklung und Implementierung nachhaltiger Mobilitätsstrategien zu unterstützen. Ziel ist es, den Verkehr umweltfreundlicher zu gestalten, CO₂-Emissionen zu reduzieren und die betriebliche Mobilität effizienter zu organisieren. Die nach Bundeshaushaltsordnung (BHO) geforderte Evaluation des Programms dient dazu, die Wirksamkeit der Maßnahmen zu überprüfen, die Zielerreichung zu bewerten und Handlungsempfehlungen für zukünftige Förderprogramme abzuleiten.

Die Sicherstellung einer hohen Qualität und Aussagekraft der Evaluation muss unter Einhaltung des vorgegebenen zeitlichen Rahmens erfolgen. Dieser wird durch die vertraglichen Rahmenbedingungen unseres Auftrages definiert, die den Zeitraum sowie den zeitlichen Umfang für Konzeption, Datenerhebung, Auswertung und Schlussfolgerungen festlegen. Kern unserer Wirkungsevaluation ist es, den Impact zu ermitteln.

Hier liegt ein grundsätzlicher Zielkonflikt in der Evaluation von Förderprogrammen, da sich der Impact erst langfristig und im Regelfall erst nach dem Ende des Evaluationsauftrags erheben lässt. Erschwerend kommt hinzu, dass erfahrungsgemäß geförderte Maßnahmen in Förderprogrammen später als geplant umgesetzt werden können, sodass sie zum Zeitpunkt der Evaluation nur geringe oder noch keine Wirkungen erzielen können.

Der Vortrag richtet sich insbesondere an Auftraggeber und Auftragnehmer von Evaluationen finanzwirksamer Maßnahmen nach den Vorgaben der BHO, wie z.B. von Förderprogrammen. Wir zeigen in diesem Vortrag, wie wir mit diesem Zielkonflikt umgehen und geben Inspiration für die praktische Umsetzung einer Evaluation. Dazu gehen wir auf die methodische und empirische Implementierung des Wirkmodells und auf unser Vorgehen zur Ermittlung des Impacts ein. Die durchgeführte Evaluation liefert wertvolle Erkenntnisse sowohl zur Wirkung der umgesetzten Maßnahmen als auch für die Weiterentwicklung von Förderprogrammen.

Die bisherigen Ergebnisse aus der Evaluation des Förderprogramms BMM unterstreichen die Bedeutung eines methodisch robusten und praxisnahen Evaluationsansatzes, der sowohl kurzfristige als auch langfristige Wirkungen abbilden kann, und während des Erhebungsprozesses laufend kritisch geprüft wird.