Zu Beginn der Arbeit soll versucht werden, „Evaluation“ näher zu definieren und zu skizzieren. Hierbei werden die unterschiedlichen Definitionen aus der Soziologie, der Psychologie und der Pädagogik nicht unterschieden, sondern zusammengeführt (vgl. Trebing 2006, 146-148).
„Der Begriff Evaluation stammt von dem lateinischen Wort ,valor’, d.h. ,Wert’, und der Vorsilbe e / ex, d.h.: aus, und bedeutet übersetzt ,Bewertung’, ;einen Wert aus etwas ziehen’.“ (Meyer 2002, 2) Zum Wortfeld Evaluation gehören u. a. „Erfolgskontrolle, Effizienzforschung, Begleitforschung, Bewertungsforschung, Wirkungskontrolle, Qualitätskontrolle usw.“ (Wottawa und Thierau 1998, 13). Evaluation hat mit Bewertun-gen und Beschreibungen innerhalb von Handlungsalternativen zu tun; ist ziel- und zweckorientiert, überprüft, verbessert und entscheidet über praktische Maß-nahmen. „Evaluation kann sich sowohl auf den Kontext (Voraussetzungen, Rahmenbedingungen), die Struktur, den Prozess als auch das Ergebnis (Produkt) beziehen.“ (http://de.wikipedia.org/wiki/Evaluation) Evaluationsmaßnahmen sollen an den ak-tuellen Stand wissenschaftlicher Techniken und Forschungsmethoden angeschlossen sein: „ ,Die allgemein anerkannten sozialwissenschaftlichen Definitionen von ,Evaluation’ unterstreichen die explizite Verwendung wissenschaftlicher Forschungsmethoden und verstehen unter ,Evaluationsforschung’ die ,systematische Anwendung sozialwissenschaftlicher Forschungsmethoden zur Beurteilung der Konzeption, Ausgestaltung, Umsetzung und des Nutzens sozialer Interventionsprogramme.’ “ (nach Meyer 2002, 2-3) Wissenschaftliche Evaluationen unterscheiden sich von Alltagsevaluationen lediglich durch den Gebrauch empirischer Forschungsmethoden und der Einhaltung der Evaluationsstandards (vgl. ebd., 3).
Da man die „endgültigen“ Folgen einer Maßnahme nicht bewerten kann, ist es wichtig, Zwischenziele festzulegen (vgl. Wottawa und Thierau 1998, 20).
Inhaltsverzeichnis
2 Einleitung
3 Historische Einordnung
4 Evaluationsforschung
4.1 Allgemeines zur Evaluationsforschung
4.2 Evaluatoren
4.3 Evaluationsstandards und Guiding Principles
5 Planung einer Evaluation
5.1 Wahl der Untersuchungsart
5.1.1 Evaluation durch Erkundung
5.1.2 Evaluation durch Populationsbeschreibung
5.1.3 Evaluation durch Hypothesenprüfung
5.2 Operationalisierung von Maßnahmewirkungen
5.2.1 Varianten für unabhängige Variablen
5.2.2 Erfassung der abhängigen Variablen
5.2.3 Überlegungen zur Nutzenbestimmung
5.3 Abstimmung von Maßnahme und Wirkung
5.4 Stichprobenauswahl
5.4.1 Interventionsstichprobe
5.4.2 Evaluationsstichprobe
5.5 Abstimmung von Intervention und Evaluation
5.6 Exposé und Arbeitsplan
6 Durchführung, Auswertung und Berichterstellung
6.1 Projektmanagement
6.2 Ergebnisbericht
6.3 Evaluationsnutzung und Metaevaluation
7 Ausblick
Zielsetzung & Themen
Die vorliegende Studienarbeit dient als einleitendes Handbuch zur Evaluationsforschung und vermittelt grundlegende theoretische Konzepte sowie methodische Vorgehensweisen, um den Erfolg von Maßnahmen in sozialen und pädagogischen Kontexten wissenschaftlich beurteilen zu können.
- Historische Entwicklung und Einordnung der Evaluationsforschung
- Methodische Planung einer Evaluation (Untersuchungsarten und Designs)
- Operationalisierung von Maßnahmen und deren Wirkungsmessung
- Qualitätssicherung durch Evaluationsstandards und ethische Richtlinien
- Strukturierung von Projektmanagement und Berichterstattung
Auszug aus dem Buch
4.1 Allgemeines zur Evaluationsforschung
Evaluationsforschung ist zu verstehen als ein Teilbereich der empirischen Forschung. Sie untersucht und bewertet Maßnahmen oder Interventionen im Hinblick auf deren Erfolg. Sie kann als „Anwendungsvariante“ empirischer Forschungsmethoden auf eine spezielle Gruppe von Fragestellungen verstanden werden (vgl. Bortz und Döring 2006, 96) und schaut sich Auswirkungen gezielt eingesetzter Maßnahmen (z.B. Wandel in Natur, Kultur, Technik und Gesellschaft oder den Wandel in bestehenden Institutionen oder Strukturen) an. Nach Rossi und Freeman (1993) ist es die Aufgabe der Evaluationsforschung, Interventionsprogramme zu evaluieren: „ ,Evaluationsforschung beinhaltet die systematische Anwendung empirischer Forschungsmethoden zur Bewertung des Konzeptes, des Untersuchungsplanes, der Implementierung und der Wirksamkeit sozialer Interventionsprogramme.‘ “ (nach Bortz und Döring 2006, 96)
Die Funktionen von Evaluationen können in drei Punkten zusammengefasst werden (Wesseler o.J., 739):
- Rechtfertigung/Legitimierung
- Verbesserung/Optimierung
- Überwachung/Kontrolle.
Die Evaluationsforschung beschäftigt sich also mit der Bewertung von Maßnahmen, welche zuvor von der Interventionsforschung entwickelt worden sind: „Die Interventionsforschung befasst sich auf der Basis technologischer Theorien mit der Entwicklung von Maßnahmen und die Evaluationsforschung mit deren Bewertung.“ (Bortz und Döring 2006, 102)
Zusammenfassung der Kapitel
2 Einleitung: Dieses Kapitel führt in den Begriff der Evaluation ein und erläutert dessen Bedeutung sowie die Abgrenzung zu anderen Forschungsbereichen.
3 Historische Einordnung: Das Kapitel skizziert die Entstehung und Entwicklung der Evaluationsforschung, insbesondere in den USA und später in Europa.
4 Evaluationsforschung: Hier werden Grundlagen, Aufgaben von Evaluatoren und die Relevanz von Evaluationsstandards und ethischen Richtlinien erörtert.
5 Planung einer Evaluation: Dieses umfangreiche Kapitel detailliert die Vorbereitungsschritte, von der Wahl der Untersuchungsart bis hin zur Stichprobenplanung.
6 Durchführung, Auswertung und Berichterstellung: Das Kapitel behandelt das Projektmanagement, die Analyse von Daten sowie die zielgruppengerechte Aufbereitung der Ergebnisse.
7 Ausblick: Der abschließende Teil reflektiert kritisch über den Nutzen, die Grenzen und die gesellschaftlichen Implikationen der Evaluationsforschung.
Schlüsselwörter
Evaluationsforschung, Evaluation, Interventionsforschung, Empirische Forschung, Evaluationsstandards, Maßnahmenbewertung, Effektivität, Wirkungskontrolle, Qualitätssicherung, Sozialwissenschaft, Methoden, Stichprobenplanung, Metaevaluation, Datenerhebung, Projektmanagement
Häufig gestellte Fragen
Worum geht es in dieser Arbeit grundsätzlich?
Die Arbeit bietet einen strukturierten Überblick über die theoretischen Grundlagen und praktischen Anwendungsmöglichkeiten der Evaluationsforschung, insbesondere im sozial- und erziehungswissenschaftlichen Kontext.
Was sind die zentralen Themenfelder der Arbeit?
Zentrale Themen sind die historische Genese der Evaluation, die methodische Planung und Durchführung von Evaluationsstudien sowie die Qualitätssicherung durch Standards.
Was ist das primäre Ziel der Arbeit?
Das Ziel ist es, als „Handbuch“ zu dienen, das Interessierten einen methodischen Leitfaden an die Hand gibt, um Projekte professionell zu evaluieren und deren Wirksamkeit nachzuweisen.
Welche wissenschaftliche Methode wird primär verwendet?
Die Arbeit stützt sich auf eine fundierte Literaturanalyse und fasst sozialwissenschaftliche Forschungsmethoden zusammen, um den Prozess der systematischen Programmbewertung darzustellen.
Was wird im Hauptteil behandelt?
Der Hauptteil gliedert sich in die theoretische Verankerung der Evaluationsforschung, die systematische Planung (Design, Stichproben) sowie die Durchführung und Berichterstattung.
Welche Schlüsselwörter charakterisieren die Arbeit?
Die Arbeit wird durch Begriffe wie Evaluationsforschung, Wirkungskontrolle, empirische Methoden, Qualitätsstandards und Interventionsforschung geprägt.
Was unterscheidet eine wissenschaftliche Evaluation von einer Alltagsevaluation?
Der entscheidende Unterschied liegt im Gebrauch wissenschaftlich anerkannter empirischer Methoden sowie in der strikten Einhaltung definierter Evaluationsstandards zur Sicherung der Qualität.
Welche Rolle spielt die Metaevaluation?
Die Metaevaluation dient dazu, eine durchgeführte Evaluation selbst kritisch zu hinterfragen, um Verbesserungspotenziale in der methodischen Umsetzung zu identifizieren und die Qualität der Ergebnisse zu prüfen.
- Citar trabajo
- M.A. Jessica Schumacher (Autor), 2007, Evaluationsforschung. Ein Überblick, Múnich, GRIN Verlag, https://www.grin.com/document/279942
