WANDEL DURCH EVALUATION UND WANDEL DER EVALUATION - JAHRESTAGUNG DER DEGEVAL - GESELLSCHAFT FÜR EVALUATION E.V.
←
→
Transkription von Seiteninhalten
Wenn Ihr Browser die Seite nicht korrekt rendert, bitte, lesen Sie den Inhalt der Seite unten
Wandel durch Evaluation
und Wandel der Evaluation
Grafik: Tanja Labs – artefont.de
24. Jahrestagung der DeGEval –
Gesellschaft für Evaluation e.V.
15. – 17. September 2021
Online-Jahrestagung
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung INHALT ALLGEMEINE INFORMATIONEN UND HINWEISE 4 RAUMPLAN FÜR DIE ONLINE-KONFERENZ 11 GRUSSWORT 12 PROGRAMMÜBERSICHT 13 WEITERBILDUNGSSEMINARE 18 KEYNOTES 24 SESSIONS BLOCK A 26 SESSIONS BLOCK B 32 SESSIONS BLOCK C 38 SESSIONS BLOCK D 44 ABSCHLUSSVERANSTALTUNG 51 LISTE DER TEILNEHMENDEN 52 INSTITUTIONELLE MITGLIEDER DER DEGEVAL 61 ORGANISATION UND PLANUNG 68 IMPRESSUM 69 2
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
FÜR DAS SPONSORING DANKEN WIR:
:NK'X ZUL*GZG'TGR_YOY
3
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
ALLGEMEINE INFORMATIONEN UND HINWEISE
Allgemeine Informationen
Liebe Teilnehmende der Online-Jahrestagung 2021 der DeGEval,
wir freuen uns, Ihnen trotz der aktuellen und andauernden Situation eine umfangreiche Tagung im Online-
Format anbieten zu können. Dafür werden wir die Videokonferenzsoftware Zoom benutzen, die uns freund-
licherweise durch die Westfälische Wilhelms Universität (WWU) Münster zur Verfügung gestellt wird.
Auf den nachfolgenden Seiten finden Sie dazu einige hilfreiche Informationen sowie das komplette
Programm.
? Handbücher für Teilnehmende, Moderierende und Referierende
Wir haben die wichtigsten Informationen rund um die Nutzung von Zoom zusammengestellt. Bitte
beachten Sie auch unsere Handbücher für Moderierende, Referierende sowie Teilnehmende, die Sie auf
unserer Webseite finden:
https://www.degeval.org/fileadmin/jahrestagung/Muenster_2021/ZOOM_Handbuch_Online_Jahres-
tagung_DeGEval_2021docx.pdf
Einige Worte zu Zoom und dem Datenschutz
Nach sorgfältiger Recherche und Prüfung alternativer technischer Plattformen haben wir uns auch in
diesem Jahr bewusst für die Software-Lösung Zoom entschieden, obwohl sie im vergangenen Jahr ver-
schiedentlich u. a. wegen Aspekten des Datenschutzes in der Kritik stand. Nach unserer Einschätzung
sind diese Kritikpunkte teils durch Updates der Firma Zoom inzwischen behoben, teils für die einzelnen
Teilnehmenden nicht relevant, teils durch die Mitnutzung der Lizenz der Universität Münster relativiert,
sodass für uns letztlich das Argument der technischen Stabilität bei der zu erwartenden Teilnahmezahl
im Verbund mit den Kosten ausschlaggebend war.
Weitere Informationen zu Zoom der WWU Münster erhalten Sie hier:
https://www.uni-muenster.de/IT/services/kommunikation/wwuzoom/index.html
Technische Voraussetzungen
Sie benötigen:
• ein internetfähiges Endgerät. Wir empfehlen PC oder Laptop, da Sie hier über einen ausreichend
großen Bildschirm verfügen.
• eine stabile Internetverbindung.Geeignet ist eine LAN-Verbindung oder eine stabile WLAN-Ver-
bindung. Weniger geeignet ist z. B. eine mobile Funkverbindungen (z.B. über den Mobilfunkvertrag).
• Lautsprecher / Kopfhörer / Mikrofon. Wir empfehlen Kopfhörer mit integriertem Mikrofon auf-
grund möglicher Rückkopplungen.
4
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
Optional sind:
• eine Webcam (integriert oder extern)
• Zuschaltung per Telefon (nur Audio) bei extrem schlechter bzw. ausgefallener Internetverbin-
dung. Falls Ihre Internetverbindung unerwartet schlecht ist oder ganz ausfällt, werden Sie sich auch
per Telefon einwählen können. Die anderen Teilnehmenden werden Sie dann so hören können. Die
Telefonnummer entnehmen Sie bitte den Informationen zur Sitzung bzw. zum Sitzungsraum.
Bitte achten Sie auch darauf, dass:
• es zu keiner Rückkopplung kommt:
– Es sollten möglichst nicht zwei oder mehr Geräte, die an der Veranstaltung teilnehmen, unmit-
telbar nebeneinanderstehen.
– Minimieren Sie bitte (soweit möglich) Störgeräusche: Empfehlenswert ist hier die Benutzung
von Kopfhörern mit integriertem Mikrofon. Falls ihr Mikrofon über Rauschunterdrückung ver-
fügt, aktivieren Sie bitte diese Funktion.
• alle technischen Geräte (Kopfhörer, Lautsprecher etc.) auf den von Ihnen verwendeten Geräten
funktionieren und richtig konfiguriert sind.
• Sie die aktuellste Zoom-App auf das Gerät herunterladen, das Sie für die Tagung nutzen. Zoom
bringt häufig Updates heraus, die mögliche Fehler beheben.
Netiquette
Wie im realen Leben gibt es auch in der virtuellen Kommunikation Regeln für den respektvollen Umgang.
• Das Aufzeichnen der Seminare ist nicht möglich.
• Wir bitten Sie, Ihren Klarnamen zu verwenden
• Im Sinne des Datenschutzes möchten wir alle Teilnehmenden darauf hinweisen, dass keine Chat-
beiträge kopiert oder Screenshots angefertigt werden dürfen.
• Die Verwendung einer Webcam ist empfehlenswert. Wie beim realen Zusammensein können die
Referierenden so Ihre Reaktionen und visuelles Feedback bekommen. Außerdem sorgt es für eine
angenehmere Atmosphäre.
• Bitte nutzen Sie als Teilnehmende die „Hand heben“-Funktion, um zu signalisieren, dass Sie eine
Frage oder Anmerkung haben.
• Weitere Reaktionen finden Sie im „Teilnehmer“-Menü:
• Bitte achten Sie darauf, dass Ihr Gerät stummgeschaltet ist, wenn Sie keinen Wortbeitrag leisten.
Damit können Störgeräusche vermieden werden.
• Den Chat bitte nur für inhaltliche Beiträge verwenden, sonst leidet die Übersichtlichkeit sehr.
Tipp: Sie können auswählen, ob Sie an alle schreiben oder nur eine bestimmte Person anschreiben
wollen, falls es bilateralen Klärungsbedarf gibt.
• Klare und deutliche Wortbeiträge helfen beim gegenseitigen Verständnis.
In diesem Zusammenhang wollen wir auch auf die Verhaltensempfehlungen der WWU Münster
verweisen, die Sie hier finden können:
• https://www.uni-muenster.de/IT/services/kommunikation/wwuzoom/etikette.html
5
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
Networking
In diesem Jahr legen wir auch besonderen Wert auf Networking-Möglichkeiten. Dazu wurde uns von
HyHyve (https://www.hyhyve.com/de/) ein virtueller Raum erstellt, in welchem Sie (touristische) Be-
sonderheiten der Stadt Münster entdecken können. Dieser Raum wird die gesamte Tagung über zur
Verfügung stehen. Nutzen Sie die Gelegenheit, sich wie bei einer Präsenztagung während der Pausen
sowie vor und nach den Veranstaltungen zu treffen, auszutauschen und neue Menschen kennenzuler-
nen. In der Pause am Donnerstag in der Zeit 15:45-16:30 Uhr treffen Sie auf unsere Sponsorinnen und
Sponsoren.
Eine Abbildung der Map finden Sie auf Seite 8-9. Hier können Sie sich bereits einen Überblick verschaf-
fen und sich gegebenenfalls auch Treffpunkte überlegen.
Nutzungshinweise:
• Sie benötigen eine Webcam und ein Headset.
• Bitte beachten Sie: Ihre Kamera und Ihr Mikrofon können in der Regel nur von einer Anwendung
genutzt werden: HyHyve oder Zoom, nicht beides gleichzeitig. Das heißt, dass Sie entweder Zoom
verlassen oder die Kamera und Mikrofon in Zoom ausschalten müssen, bevor Sie HyHyve betre-
ten. In HyHyve können Sie dann Ihre Kamera sowie Ihr Mikrofon nutzen.
• Sollten Sie keine funktionsfähige Kamera haben, wählen Sie bitte „Disabled“ aus.
• Sollten Sie Probleme mit dem Zutritt in HyHyve wegen der Kamera haben, prüfen Sie noch mal, ob
Sie Zoom verlassen bzw. ob Sie die Kamera in Zoom ausgeschaltet haben. Versuchen Sie es dann
bitte erneut.
• Verwenden Sie bitte einen aktuellen Browser (z. B. Firefox ab Version 80) um Kompatibilitätspro-
bleme zu vermeiden.
• Den Link zur Hyhyve-Map erhalten Sie separat
• Es dauert circa eine Minute, bis Sie alle Einstellungen zu Mikrofon und Kamera getätigt haben:
Klicken Sie hierbei auf die Kamera- sowie die Mikrofoneinstellungen im linken oberen Bildschirm-
bereich und dann im rechten unteren Bildschirmbereich jeweils auf den grünen „weiter“-Button.
Keine Angst – HyHyve führt Sie gezielt durch die wenigen Anpassungsschritte!
Falls Sie nachträglich die Kamera- und Mikrofoneinstellungen Ihres Browsers ändern möchten, haben
wir hier ein paar hilfreiche Links für die gängigsten Browser für Sie:
Chrome: https://support.google.com/chrome/answer/2693767?hl=de&co=GENIE.Platform%3DDesktop
Firefox: https://support.mozilla.org/de/kb/kamera-und-mikrofonberechtigungen-verwalten
Edge: https://support.microsoft.com/de-de/windows/windows-kamera-mikrofon-und-datenschutz-a83257bc-e990-d54a-d212-b5e41beba857
Safari: https://support.apple.com/de-de/guide/safari/ibrw7f78f7fe/mac
In HyHyve
• Sie bewegen sich mit einem kleinen Avatar im virtuellen Tagungsraum. Halten Sie dazu die linke
Maustaste gedrückt und bewegen den Mauszeiger in die Richtung, in die Sie laufen möchten.
• Mit dem Mausrädchen können Sie aus der Map heraus oder weiter heran zoomen.
6
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
• Halten Sie optional gerne ein Foto von sich bereit, welches Sie Ihrem Avatar hinzufügen können.
• Kommen Sie anderen Teilnehmenden mit Ihrem Avatar näher, wird nach kurzer Zeit eine Konversa-
tionsblase eröffnet und Sie können sich untereinander sehen (Webcam) und unterhalten.
• Es sind auch Chats untereinander sowie das Teilen des Bildschirms möglich.
• Am unteren Bildschirmrand finden Sie eine Leiste zu den Punkten Menü, Besucherinnen und Be-
sucher, Mikrofon, Kamera und Geräte. Diese Leiste kennen Sie auch aus anderen Anwendungen
(z.B. Zoom).
• Chats können Sie wie folgt öffnen:
o Wählen Sie in der Leiste den Punkt „Besucher“ aus
o Sie können dann entweder an alle aus Ihrer Gruppe (Kommunikations-
blase) oder an eine bestimmte Person eine private Nachricht senden. Dies
kann am linken Bildschirmrand ausgewählt werden.
o Bitte beachten Sie, dass Gruppenchats temporär sind und verschwinden,
sobald Sie die Gruppe wieder verlassen.
• Änderungen an Ihrem Profil oder den Einstellungen können Sie wie folgt
vornehmen:
o Am unteren Bildschirmrand finden Sie eine Leiste (Abbildung
HyHyve-Leiste) zu den Punkten Menü, Besucher, Mikrofon, Kamera und
Geräte
o Zum Profil ändern gehen Sie zunächst auf den Punkt Menü
o Dann erscheint am linken Bildschirmrand ein neues Fenster mit den
Unterpunkten Raum, Menü, Kommunikation und Organisation.
o Dort können Sie die entsprechende Rubrik auswählen (z. B. Profil) und Änderungen vornehmen.
o Wenn Sie den Raum verlassen möchten, klicken Sie dort bitte auf „Raum verlassen“ oder
schließen Sie einfach das Browser-Fenster.
Bei Fragen und Problemen
Bei Fragen und Problemen sind wir für Sie da und werden versuchen, schnellstmöglich eine Lösung zu
finden. Sie erreichen die DeGEval-Geschäftsstelle während der Tagung im dafür eingerichteten Zoom-
Hilfe-Raum, per Telefon oder E-Mail:
Zoomraum https://us02web.zoom.us/j/89042604448
Telefonnummer: +49 (0) 152 56123078
E-Mail: info@degeval.org
Bitte geben Sie folgende Informationen an:
• Name und Rolle (z. B. Referierende, Moderierende, Teilnehmende)
• Um welche Veranstaltung geht es?
• Welche Probleme sind aufgetreten? / Welche Fragen haben Sie?
• Betriebssystem, Browser oder App?
7
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung HyHyve-Map 8
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
:NK'X ZUL*GZG'TGR_YOY
9
24. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
HyHyve-Map: Authentisches Networking während der Online-Jahrestagung
(Informationen zur technischen Voraussetzung finden Sie ab S. 6)
• Verabreden Sie sich mit anderen Tagungsteilnehmerinnen und -teilnehmern auf der
HyHyve-Map: Am Schloss, in der Juice and Smoothie Bar, der Coffee Bar, der DeGEval Lounge
oder auch dem Office. Wenn Sie nahe genug zu einer anderen Person oder Personengrup-
pe stehen, warten Sie einen kleinen Moment. Dann öffnet sich eine „Kommunikationsbla-
se“ und Sie können andere Teilnehmende hören und auch ihre Videoübertragungen sehen.
• Treffen Sie unsere Sponsorinnen und Sponsoren!
Am Donnerstag, den 16.09.2021 steht Ihnen dafür die Pause von 15:45 – 16.30 Uhr zur Verfügung !
• Vernetzen Sie sich und tauschen Sie sich aus
Datenschutz in der Evaluation
AdHoc Gruppe Datenschutz
Donnerstag, 16.09.2021, 11:45-12:15 Uhr
HyHyve-Map: DeGEval Lounge (links unten)
Ende 2020 hat sich eine ad hoc Gruppe zum Thema Datenschutz in der Evaluation gegründet.
Heute stellen wir uns gerne vor, informieren und freuen uns über Interessierte.
Organisiert durch: Katharina Klockgether (Univation Institut für Evaluation,
Dr. Beywl & Associates GmbH
Vernetzung und Austausch zwischen gemeinnützigen Organisationen und Stiftungen.
Freitag, 17.09.2021, 12:00 - 12:45 Uhr:
HyHyve-Map: Office (unten Mitte)
Als Angehörige von fördernden oder operativ tätigen gemeinnützigen Organisationen und Stiftun-
gen besteht unsere Aufgabe darin, die Wirkungen unserer Projekte zu evaluieren (oder evaluieren
zu lassen), Partnerorganisationen zu begleiten und die Wirkungsorientierung in unseren eigenen
Organisationen umzusetzen. Dabei sind unsere Organisationen oft kleiner, spezifischer ausge-
richtet und manchmal vielleicht etwas freier in ihrem Tun als Durchführungsorganisationen der
Entwicklungszusammenarbeit, der Hilfswerke, Forschungsinstitute oder Ministerien sowie der
öffentlichen Verwaltung.
Ziel des Austausches ist es, überhaupt erst Angehörige solcher Organisationen unter den Kon-
ferenzteilnehmerinnen und -teilnehmern kennenzulernen, sich zu vernetzen, Erkenntnisse der
Jahrestagung zu besprechen und Entwicklungen in der Evaluation einzuordnen.
Organisiert durch: Frieder Bürkle, (Robert Bosch Stiftung GmbH)
1024. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
RAUMPLAN FÜR DIE ONLINE-KONFERENZ
Sie erreichen die Zoom-Meeting-Räume indem Sie auf das gewünschte Angebot klicken. Sie werden in
der Regel zunächst auf eine Internetseite weitergeleitet und können dort auswählen, ob Sie über den
Browser oder die App an der Veranstaltung teilnehmen möchten.
TAGUNGSERFÖFFNUNG UND
KEYNOTE 1
Do., 12:15 – 13:45 Uhr
Meeting-ID: 640 0172 1252
KEYNOTE 2 Technik Support
Meeting-ID: 890 4260 4448
UND VERLEIHUNG DES NACHWUCHSPREISES
Fr., 09:00 – 10:15 Uhr
Meeting-ID: 618 5594 6189
Mobilnummer:
0049 (0) 152 56 123 078
ABSCHLUSS-
VERANSTALTUNG
Fr., 14:45 – 15:15 Uhr
Sessions: A4 / B4
Meeting-ID: 618 5594 6189 Do., 14:15 – 15:45 Do., 16:30 – 18:00 Uhr
Meeting-ID: 680 3026 4906
Nachwuchs-
netzwerk- &
AK Methoden in
der Evaluation
A1 / B1 C4 / D4
Fr., 10:30 – 12:00 Fr. 12:45 – 14:15 Uhr
AK-Treffen: Do., 10:15 – 11:45 Uhr
Meeting-ID: 690 3574 7400
Do., 14:15 – 15:45 Do., 16:30 – 18:00 Uhr
Meeting-ID: 672 7356 6157
Meeting-ID: 663 3415 7642
Nachwuchsnetzwerk AK Professionalisierung C1 / D1 A5 / B5
Fr., 10:30 – 12:00 Fr. 12:45 – 14:15 Uhr
Do., 14:15 – 15:45 Do., 16:30 – 18:00 Uhr
Do., 09:00 – 10:00 Uhr Do., 10:15 – 11:45 Uhr Meeting-ID: 670 2206 5977
Meeting-ID: 646 2408 4283
Meeting-ID: 648 9005 9927 Meeting-ID: 625 5829 8352
AK Berufliche Bildung AK Schulen A2 / B2 C5 / D5
Fr., 10:30 – 12:00 Fr. 12:45 – 14:15 Uhr
Do., 14:15 – 15:45 Do., 16:30 – 18:00 Uhr
Meeting-ID: 647 9965 9950
Do., 10:15 – 11:45 Uhr Do., 10:15 – 11:45 Uhr Meeting-ID: 668 7700 0317
Meeting-ID: 653 6973 9513 Meeting-ID: 682 5898 0461
AK Entwicklungspolitik AK Soziale
C2 / D2 A6 / B6
und Humanitäre Hilfe Dienstleistungen Fr., 10:30 – 12:00 Fr. 12:45 – 14:15 Uhr
Do., 14:15 – 15:45 Do., 16:30 – 18:00 Uhr
Meeting-ID: 682 8481 4390
Meeting-ID: 689 4240 9238
Do., 10:15 – 11:45 Uhr Do., 10:15 – 11:45 Uhr
Meeting-ID: 689 6410 4967
C6 / D6
Meeting-ID: 693 1836 6806
AK Forschungs-, AK Stadt- und
A3 / B3 Fr., 10:30 – 12:00 Fr. 12:45 – 14:15 Uhr
Technologie- und Regionalentwicklung Do., 14:15 – 15:45 Do., 16:30 – 18:00 Uhr Meeting-ID: 689 7221 4301
Innovationspolitik Meeting-ID: 626 2366 1344
Do., 10:15 – 11:45 Uhr Do., 10:15 – 11:45 Uhr
C3 / D3 D7
Meeting-ID: 615 2381 6376 Meeting-ID: 671 8448 3189
AK Gender Fr., 10:30 – 12:00 Fr. 12:45 – 14:15 Uhr Fr. 12:45 – 14:15 Uhr
AK Strukturpolitik Meeting-ID: 651 8395 0535
Mainstreaming Meeting-ID: 677 7625 9195
Do., 10:15 – 11:45 Uhr Do., 10:15 – 11:45 Uhr
Meeting-ID: 682 0028 2803 Meeting-ID: 667 2689 0752 GANZÄGIG NETWORKING ÜBER HyHyve
AK Gesundheitswesen AK Umwelt
MEET OUR PARTNERS
Do., 10:15 – 11:45 Uhr
Meeting-ID: 672 0481 3795
Do., 10:15 – 11:45 Uhr
Meeting-ID: 634 6067 4007
Do., 16.09., 15:45-16:30
HyHyve
AK Hochschulen AK Verwaltung
Do., 10:15 – 11:45 Uhr Do., 10:15 – 11:45 Uhr
Meeting-ID: 631 7108 2092 Meeting-ID: 695 9717 1198
:NK'X ZUL*GZG'TGR_YOY
AK Kultur und AK Wirtschaft
Kulturpolitik
Do., 10:15 – 11:45 Uhr Do., 10:15 – 11:45 Uhr
Meeting-ID: 698 9443 9588 Meeting-ID: 617 9287 8578
1124. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
GRUSSWORT
Prof. Dr. Jan Ulrich Hense
Vorstandsvorsitzender der DeGEval – Gesellschaft für Evaluation e.V.
Sehr geehrte Damen und Herren,
© privat
liebe Kolleginnen und Kollegen,
im Namen des Vorstands der DeGEval – Gesellschaft für Evaluati- trägt den Titel „Wandel durch Evaluation und Wandel der Evalua-
on e. V. begrüße ich Sie sehr herzlich zur 24. Jahrestagung unserer tion: Welche Lehren können wir aus der Pandemie ziehen?“.
Gesellschaft. Sie findet aufgrund der gegebenen Umstände er-
Für eine weitere Keynote haben wir bewusst einen Blick von au-
neut „nur“ online statt, wobei ich dieses „nur“ bewusst in Anfüh-
ßen eingeladen. Prof. Dr. Alnoor Ebrahim (Professor of Manage-
rungszeichen setze. Denn auch wenn uns allen bewusst ist, dass
ment at The Fletcher School, and the Tisch College of Civic Life,
viele Elemente, die wir bei Präsenztagungen als wichtigen Teil des
at Tufts University, USA) befasst sich in seinem Beitrag mit der
Tagungsbesuchs schätzen, im online-Format fehlen, so lassen
Frage nach dem Wandel durch Evaluationen aus einer organi-
mich in dieser Hinsicht mindestens zwei Dinge sehr zuversichtlich
sationsstrategischen Perspektive. Die Keynote trägt den Titel
auf unsere Tagung blicken: Einerseits zeigen die Erfahrungen und
„Measuring Strategically: A Managerial Perspective on Evaluati-
Rückmeldungen des vergangenen Jahres, dass auch aus dem rein
on“ und beleuchtet dabei u. a. unterschiedliche Strategien für den
digitalen Austausch ein großer Nutzen resultieren kann. Anderer-
sozialen Wandel.
seits konnten wir den in diesem Jahr längeren zeitlichen Vorlauf
nutzen, um das Tagungsformat um Elemente zu ergänzen, die das Auch neben den Keynotes erwartet Sie natürlich wieder ein um-
Networking und die persönliche Begegnung auch im Digitalen fangreiches Programm, in dem Fragen nach dem Wandel durch
ermöglichen bzw. erleichtern sollen. Näheres dazu finden Sie hier und in der Evaluation sowie andere aktuelle Themen der Evalu-
im Programmheft. ation diskutiert werden. Es umfasst in diesem Jahr vier Weiter-
bildungsseminare, 25 Sessions, davon 10 Sessions mit Einzelvor-
Thema unserer diesjährigen Tagung ist „Wandel durch Evaluation
trägen und eine Session mit Blitzvorträgen sowie das Treffen des
und Wandel der Evaluation“. Angesichts eines häufig diagnosti-
Nachwuchsnetzwerkes am Donnerstagmorgen und eine Resü-
zierten „beschleunigten und fast sämtliche Bereiche unseres Le-
mee ziehende Abschlussveranstaltung am Freitag. Am Donners-
bens berührenden gesellschaftlichen Wandels“ fragen wir damit
tag vor der Tagungseröffnung treffen sich die Arbeitskreise, wozu
nach dem Selbstverständnis unserer Disziplin. Versteht sie sich
auch Nichtmitglieder herzlich willkommen sind. Für spontane
eher als distanziert beobachtende Instanz, die ihre Aufgabe darin
und geplante Begegnungen außerhalb der Programmelemente
sieht, öffentliches Handeln vor allem begleitend und rückblickend
nutzen wir in diesem Jahr die Plattform HyHyve. Dort haben Sie
zu bewerten, um erst auf Nachfrage in der Rückkopplung wieder
auch die Möglichkeit, in direkten Kontakt mit unseren Sponsorin-
Einfluss auf das Geschehen zu nehmen? Oder sollte sie sich in
nen und Sponsoren zu treten, wozu wir Sie ausdrücklich ermun-
einer proaktiveren Rolle sehen und Wandel aktiv unterstützen?
tern wollen.
Sollte sie also ihre besonderen Kenntnisse und Erfahrungen aus
der Analyse früherer Maßnahmen sowie ihre daraus resultieren- Das Programmkomitee der diesjährigen Tagung wurde von Dr.
den Kompetenzen bei der wirkungsorientierten Gestaltung von Ute Marie Metje und Prof. Dr. Manfred Rolfes geleitet, weitere
Maßnahmen und Strategien viel offensiver in gesellschaftliche Mitglieder waren Dr. Johannes Wiesweg, Dr. Marianne Lück-Fil-
und politische Diskussions- und Entscheidungsprozesse einbrin- singer, Dr. Vera Hennefeld, Heike Steckhan, Dr. Tobias Polak und
gen? Diese Fragen aus unserem Call zur Tagung stellen sich in der Prof. (FH) PD Mag. Dr. Petra Wagner. Für die Gestaltung der Ta-
andauernden Corona-Krise sicherlich mit besonderer Dringlich- gung ist ihnen besonders zu danken, ebenso wie den DeGEval-Ar-
keit. beitskreisen, den Moderatorinnen und Moderatoren der Sessions
sowie last but not least dem Team der Geschäftsstelle der De-
Das Thema umfasst aber umgekehrt auch den Blick auf Verän-
GEval unter der Leitung von Mareike Hinz und Sandra Schopper.
derungen, die die Evaluation selbst in den vergangenen Jahren
Vielen Dank auch an die Universität Münster, die uns die Nutzung
durchlaufen hat. Gemeint ist damit nicht nur ihr oben angespro-
der Konferenzsoftware ermöglicht und somit als „virtuelle Gast-
chenes Rollenverständnis gegenüber der Gesellschaft, sondern
geberin“ fungiert.
auch fachinterne Veränderungen, die sich etwa aus veränderten
Rahmenbedingungen, methodologischen Weiterentwicklungen Zuletzt wünsche ich Ihnen und uns – trotz oder gerade wegen des
oder einer fortschreitenden Professionalisierung des Felds erge- Online-Formats – einen anregenden, interessanten und ertragrei-
ben haben. chen Austausch während unserer Tagung.
Vor dem Hintergrund dieser Themensetzung freuen wir uns sehr,
dass wir mit unserer ehemaligen Vorsitzenden Univ.-Prof. Dr. Dr.
Christiane Spiel (Professorin für Bildungspsychologie und Eva-
luation an der Fakultät für Psychologie, Universität Wien)
eine ausgewiesene Expertin und Kennerin der Evaluations- Prof. Dr. Jan Ulrich Hense
landschaft und ihrer Entwicklung in den vergangenen Jahren Vorstandsvorsitzender der DeGEval –
für eine Keynote zur Tagung gewinnen konnten. Ihr Beitrag Gesellschaft für Evaluation e.V.
1224. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
PROGRAMMÜBERSICHT
Mittwoch, 15.09.2021 Weiterbildungsseminare
08:30 – 12:30 Uhr 08:30 – 12:30 Uhr
S 1 – Dr. Maria Gutknecht-Gmeiner S 2 – Dr. Stefan Rädiker
Developmental Evaluation – Michael Pattons Evaluations- Einführung in die Analyse qualitativer Evaluationsdaten mit
ansatz zur Bewältigung von Unsicherheit und Komplexität, MAXQDA: Interviews, Dokumente und offene Surveyfragen
Eine Einführung mit Beispielen aus der Praxis computergestützt auswerten
https://wwu.zoom.us/j/650 8035 4156 https://wwu.zoom.us/j/654 3304 6864
Meeting-ID: 650 8035 4156 Meeting-ID:654 3304 6864
13:30 – 17:30 Uhr 13:30 – 17:30 Uhr
S 3 – Dr. Karin Grasenick S 4 – Mag. Harald Hutter
Für wen geplant, wie umgesetzt? – Einführung in den Datenschutz:
Gender als Evaluierungskompetenz Grundlagen und Beispiele
https://wwu.zoom.us/j/677 0618 0423 https://wwu.zoom.us/j/615 1302 6781
Meeting-ID: 677 0618 0423 Meeting-ID: 615 1302 6781
Donnerstag, 16.09.2021
09:00 – 10:00 Uhr Treffen des Nachwuchsnetzwerks
Im Nachwuchsnetzwerk finden sich Nachwuchswissenschaftlerinnen und -wissenschaftler sowie Nachwuchsevaluatorin-
nen und -evaluatoren zusammen. Ziel des Nachwuchsnetzwerkes ist es, einen an die Bedürfnisse der Zielgruppe angepassten
Rahmen für den Austausch über theoretische, methodologische, methodische und inhaltliche Fragen im Zusammenhang mit
Evaluation und Evaluationsforschung zu bieten.
https://wwu.zoom.us/j/648 9005 9927
Meeting-ID: 648 9005 9927
10:15 – 11:45 Uhr Treffen der Arbeitskreise:
Berufliche Bildung Professionalisierung
https://wwu.zoom.us/j/653 6973 9513 https://wwu.zoom.us/j/625%205829%208352
Meeting-ID: 653 6973 9513 Meeting-ID: 625 5829 8352
Entwicklungspolitik und Humanitäre Hilfe Schulen
https://wwu.zoom.us/j/689 6410 4967 https://wwu.zoom.us/j/682%205898%200461
Meeting-ID: 689 6410 4967 Meeting-ID: 682 5898 0461
Forschungs-, Technologie- und Innovationspolitik Soziale Dienstleistungen
https://wwu.zoom.us/j/615 2381 6376 https://wwu.zoom.us/j/693%201836%206806
Meeting-ID: 615 2381 6376 Meeting-ID: 693 1836 6806
1324. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
Gender Mainstreaming Stadt- und Regionalentwicklung
https://wwu.zoom.us/j/682%200028%202803 https://wwu.zoom.us/j/671%208448%203189
Meeting-ID: 682 0028 2803 Meeting-ID: 671 8448 3189
Gesundheitswesen Strukturpolitik
https://wwu.zoom.us/j/672%200481%203795 https://wwu.zoom.us/j/667%202689%200752
Meeting-ID: 672 0481 3795 Meeting-ID: 667 2689 0752
Hochschulen Umweltpolitik
https://wwu.zoom.us/j/631%207108%202092 https://wwu.zoom.us/j/634%206067%204007
Meeting-ID: 631 7108 2092 Meeting-ID: 634 6067 4007
Kultur und Kulturpolitik Verwaltung
https://wwu.zoom.us/j/698%209443%209588 https://wwu.zoom.us/j/695%209717%201198
Meeting-ID: 698 9443 9588 Meeting-ID: 695 9717 1198
Methoden in der Evaluation Wirtschaft
https://wwu.zoom.us/j/690%203574%207400 https://wwu.zoom.us/j/617%209287%208578
Meeting-ID: 690 3574 7400 Meeting-ID: 617 9287 8578
11:45 – 12:15 Uhr Pause und Gelegenheit zum Treffen in der HyHyve-Map: Datenschutz in der Evaluation
12:15 – 13:45 Uhr Tagungseröffnung, Begrüßung und 1. Keynote
Tagungseröffnung und Begrüßung durch den Vorsitzenden der DeGEval
1. Keynote:
Prof. Dr. Alnoor Ebrahim,
Professor of Management at The Fletcher School, and the Tisch College of Civic Life, at Tufts University.
Measuring Strategically: A Managerial Perspective on Evaluation
https://wwu.zoom.us/j/640%200172%201252
Meeting-ID: 640 0172 1252
13:45 – 14:15 Uhr Pause
14:15 – 15:45 Uhr SESSIONS BLOCK A
A1: Die Formulierung von Handlungsempfehlungen in FTI-Evaluationen. Typische Schwachstelle, lästige Pflicht oder
Kernstück der Politikberatung?
https://wwu.zoom.us/j/672%207356%206157
Meeting-ID: 672 7356 6157
1424. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
A2: Evaluation von komplexen und langsam ablaufenden Prozessen im Umweltbereich am Beispiel von Naturschutz,
Klimaschutz und Landwirtschaft
https://wwu.zoom.us/j/668%207700%200317
Meeting-ID: 668 7700 0317
A3: Herausforderungen für Wandel – Hemmnisse für die Professionalisierung und Weiterentwicklung von Evaluation in
verschiedenen Feldern
https://wwu.zoom.us/j/626%202366%201344
Meeting-ID: 626 2366 1344
A4: Wandel bei der internen und externen Evaluation von Schulen
https://wwu.zoom.us/j/680%203026%204906
Meeting-ID: 680 3026 4906
A5: Wandel im Gesundheitswesen durch Evaluation
https://wwu.zoom.us/j/646%202408%204283
Meeting-ID: 646 2408 4283
A6: Wandel der Evaluation – Kommunikation, Nutzung und Einfluss von Evaluation(-sergebnissen) im politischen und
gesellschaftlichen Kontext
https://wwu.zoom.us/j/689%204240%209238
Meeting-ID: 689 4240 9238
15:45 – 16:30 Uhr Pause - Treffen mit Sponsorinnen und Sponsoren
16:30 – 18:00 Uhr SESSIONS BLOCK B
B1: Prinzipien zur Evaluierung strukturbildender Förderansätze am Beispiel von Armutsprävention
https://wwu.zoom.us/j/672%207356%206157
Meeting-ID: 672 7356 6157
B2: Wechselwirkungen zwischen gesellschaftlichen Veränderungen und Evaluationsprozessen in der öffentlichen
Verwaltung – Wie wirken sich Megatrends und Krisen auf die Evaluation aus?
https://wwu.zoom.us/j/668%207700%200317
Meeting-ID: 668 7700 0317
B3: „Und plötzlich rennen sie einem die Bude ein?“ – Evaluation der Digitalsemester an Hochschulen zwischen Weiter-
entwicklungen und altbekannten Grenzen
https://wwu.zoom.us/j/626%202366%201344
Meeting-ID: 626 2366 1344
B4: Wandel durch Evaluation und Wandel der Evaluation
https://wwu.zoom.us/j/680%203026%204906
Meeting-ID: 680 3026 4906
B5: Die Frage nach dem Wie – spezielle methodische Ansätze
https://wwu.zoom.us/j/646%202408%204283
Meeting-ID: 646 2408 4283
B6: Gesellschaftlichen Wandel durch Evaluation mitgestalten
https://wwu.zoom.us/j/689%204240%209238
Meeting-ID: 689 4240 9238
1524. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
Freitag, 17.09.2021
09:00 – 10:15 Uhr 2. Keynote und Verleihung des DeGEval Nachwuchspreises 2021
2. Keynote: Univ.-Prof. Dr. Dr. Christiane Spiel,
Professorin für Bildungspsychologie und Evaluation an der Fakultät für Psychologie, Universität Wien
Wandel durch Evaluation und Wandel der Evaluation: Welche Lehren können wir aus der Pandemie
ziehen?
https://wwu.zoom.us/j/618%205594%206189
Meeting-ID: 618 5594 6189
10:15 – 10:30 Uhr Pause
10:30 – 12:00 Uhr SESSIONS BLOCK C
C1: Beitrag von Monitoring und Evaluation zur Unterstützung von strukturellem Wandel in Wissenschafts- und
Forschungseinrichtungen
https://wwu.zoom.us/j/670%202206%205977
Meeting-ID: 670 2206 5977
C2: Evaluation 2.0? Die Corona-Pandemie als Anstoß für Wandel in der Evaluation in der Entwicklungszusammenarbeit
und humanitären Hilfe
https://wwu.zoom.us/j/682%208481%204390
Meeting-ID: 682 8481 4390
C3: Die Förderung von Transformationsprozessen in der Forschungs-, Technologie- und Innovationspolitik –
aber wie messbar?
https://wwu.zoom.us/j/651%208395%200535
Meeting-ID: 651 8395 0535
C4: Evaluation in transnationalen/interkulturellen Kontexten
https://wwu.zoom.us/j/663%203415%207642
Meeting-ID: 663 3415 7642
C5: Wirkungsmodellierung als Grundlage für Wirkungsmessung in unterschiedlichen Politikfeldern
https://wwu.zoom.us/j/647%209965%209950
Meeting-ID: 647 9965 9950
C6: Evaluation digitaler Lehre an Hochschulen
https://wwu.zoom.us/j/689%207221%204301
Meeting-ID: 689 7221 4301
12:00 – 12:45 Uhr Pause und Gelegenheit zum Treffen in der HyHyve-Map:
Vernetzung und Austausch zwischen gemeinnützigen Organisationen und Stiftungen
1624. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
12:45 – 14:15 Uhr SESSIONS BLOCK D
D1: Evaluation im Dialog von Wissenschaft, Praxis und Politik – Erfolgsfaktoren und Herausforderungen
https://wwu.zoom.us/j/670%202206%205977
Meeting-ID: 670 2206 5977
D2: Wirkungen in der Sozialen Arbeit
https://wwu.zoom.us/j/682%208481%204390
Meeting-ID: 682 8481 4390
D3: Developmental Evaluation in Practice
https://wwu.zoom.us/j/651%208395%200535
Meeting-ID: 651 8395 0535
D4: Werkstattgespräch: Evaluation und Verkehrswende
https://wwu.zoom.us/j/663%203415%207642
Meeting-ID: 663 3415 7642
D5: Unterstützung von Transformation und Wandel durch komplexe Programmevaluationen
https://wwu.zoom.us/j/647%209965%209950
Meeting-ID: 647 9965 9950
D6: Evaluation aus der Ferne: Remote Evaluationen – Chancen und Herausforderungen
https://wwu.zoom.us/j/689%207221%204301
Meeting-ID: 689 7221 4301
D7: Blitzvortragssession und Diskussionsforum
https://wwu.zoom.us/j/677%207625%209195
Meeting-ID: 677 7625 9195
14:15 – 14:45 Uhr Pause: Nutzen Sie die Gelegenheit zum Networking auf HyHyve.
14:45 – 15:15 Uhr Abschlussveranstaltung
Stefan Schmidt, schmidt evaluation Köln, Vorstandsmitglied der DeGEval
https://wwu.zoom.us/j/618%205594%206189
Meeting-ID: 618 5594 6189
15:15 – 15:45 Uhr Tagungsausklang
https://wwu.zoom.us/j/618%205594%206189
Meeting-ID: 618 5594 6189
1724. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
WEITERBILDUNGSSEMINARE
S1 Developmental Evaluation – Michael Pattons Evaluationsansatz zur Bewältigung
von Unsicherheit und Komplexität, Eine Einführung mit Beispielen aus der Praxis
Mittwoch, 15.09.2021
08:30 – 12:30 Uhr
https://wwu.zoom.us/j/650%208035%204156
Meeting-ID: 650 8035 4156
Dr. Maria Gutknecht-Gmeiner
Ziele des Seminars Zielgruppe
Klassische Evaluationsansätze gehen von klar definierten Evaluierende, Auftraggeber/innen von Evaluationen sowie
Evaluationsgegenständen und relativ stabilen Umweltbedin- andere Interessierte, die Evaluationen in komplexen und
gungen aus. In der Praxis sind Evaluator*innen jedoch immer dynamischen Umfeldern durchführen (wollen).
wieder mit veränderlichen Rahmenbedingungen und sich
anpassenden, flexiblen Maßnahmen konfrontiert. Dies ist z.B.
bei innovativen Projekten der Fall oder generell im Kontext Teilnahmevoraussetzung
von adaptiven Management von Projekten und Programmen.
Die Teilnahme ist prinzipiell auch für Personen mit geringen
Für diese Fälle wurde von Michael Patton in den vergangenen Vorerfahrungen möglich. Allerdings erhöht sich die Nützlich-
mehr als 25 Jahren unter Einbezug von Konzepten aus der keit des Seminars für Teilnehmer/innen mit Evaluationser-
Komplexitätsforschung und der Systemtheorie die Deve- fahrung und mit einer grundlegenden Kenntnis von theore-
lopmental Evaluation (oder in der deutschen Übersetzung tischen Konzepten und Modellen der Evaluation. Sollten Sie
„evolutive Evaluation“) entwickelt. nicht sicher sein, ob das Seminar für Sie Sinn macht, steht
Ihnen die Referentin gerne für eine kurze persönliche Bera-
Das Seminar nimmt eine Begriffsbestimmung der Develop-
tung zur Verfügung (Kontaktdaten s. unten).
mental Evaluation vor und grenzt sie von anderen Ansätzen
ab. Es gibt einen Überblick über zentrale Elemente der
Developmental Evaluation und klärt Kriterien und Voraus-
Angabe, welche Kompetenzfelder und -bereiche der
setzungen für die Wahl dieses Evaluationsansatzes. Rolle
Empfehlungen zur Aus- und Weiterbildung in Evaluation
und Aufgaben der Evaluatorin/des Evaluators, methodische
im Wesentlichen behandelt werden
Vorgangsweisen und organisatorische Rahmenbedingungen
werden kurz vorgestellt sowie Chancen und Grenzen in der • Theoretische Grundlagen, analytische Ansätze und Mo-
Anwendung diskutiert. delle der Evaluation
Die Teilnehmerinnen und Teilnehmer • Design- und Methodenkompetenz: adäquate Berücksich-
tigung von Komplexität in der Evaluation
• verstehen die Verortung der Developmental Evaluation in
• Reflexionsfähigkeit, Problemlösekompetenz: schwierige
der Evaluationstheorie und -praxis
Entscheidungen im Evaluationsverlauf
• kennen wichtige Elemente der Developmental Evaluation
• Inhalt, Ablauf und Form sowie Dokumentation des Work-
• können Anwendungsgebiete in der Evaluationspraxis er- shops
kennen und Entscheidungskriterien für den Einsatz von
Developmental Evaluation anwenden
• kennen grundlegende Bedingungen und Herausforderun- Inhalte
gen der Developmental Evaluation
• Begriffsbestimmungen und Abgrenzung der Developmen-
• können die Rolle der Evaluatorin/des Evaluators in der De- tal Evaluation von anderen Ansätzen
velopmental Evaluation einschätzen
• Zentrale Elemente der Developmental Evaluation
• wissen über Chancen und Grenzen Bescheid und
• Anwendungskriterien und Einsatzmöglichkeiten
• erweitern ihr theoretisches und praktisches Verständnis
• Rolle und Aufgaben der Evaluator/innen
von Evaluation.
• Methodische Vorgangsweisen und organisatorische Rah-
menbedingungen
• Chancen und Grenzen der Developmental Evaluation
• Anwendung im eigenen Arbeitskontext
1824. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
Ablauf Kontakt
Das Seminar ist als interaktiver Workshop konzipiert, die Dr. Maria Gutknecht-Gmeiner
Teilnehmer/innen sind eingeladen eigene „Fälle“ und offene IMPULSE-Evaluation und Organisationsberatung
Fragen mitzubringen. Dazu wird im Vorfeld des Seminars ein
kurzer Fragebogen ausgeschickt und eine Reflexionsübung Dr.-Josef-Resch-Pl. 14/3
angeboten. 1170 Wien, Österreich
• Reflexionsübung im Vorfeld Tel.: +43 664 23 65 980
m.gutknecht-gmeiner@impulse.at
• Theoretische Kurzinputs
www.impulse.at
• Arbeiten an Fallbeispielen in Gruppen
• Ergebnispräsentation, Diskussion und Reflexion im Ple-
num
Dokumentation
• Präsentationsfolien
• Handouts
• Literatur zu Developmental Evaluation
• Ergebnisse von Gruppenarbeiten
Workshop bezogene Referenzen der Referentin
Maria Gutknecht-Gmeiner ist seit etwa Mitte der 1990er
Jahre in der Evaluation tätig. Seit Beginn der 2000er Jahre
beschäftigte sie sich intensiv mit der Entwicklung von Evalua-
tionsverfahren und mit der Forschung über Evaluation. Sie
hat sich in ihrer eigenen Evaluationspraxis mehrfach mit dem
Ansatz der Development Evaluation auseinandergesetzt.
Maria Gutknecht-Gmeiner ist seit vielen Jahren in verschiede-
nen Arbeitskreisen der DeGEval aktiv: Gender Mainstreaming
und Professionalisierung (auch als Co-Sprecherin), Berufli-
che Bildung, Umwelt. Sie ist darüber hinaus international
vernetzt und Mitglied der European Evaluation Society sowie
der American Evaluation Association.
Als Pädagogin liegt ihr die Aus- und Weiterbildung in der Eva-
luation am Herzen. Sie war Mitglied des Autor/innenteams
der „Empfehlungen zur Didaktik der Evaluation“, die vom
Arbeitskreis Aus- und Weiterbildung in der Evaluation 2011
verabschiedet wurden.
1924. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
S2 Einführung in die Analyse qualitativer Evaluationsdaten mit MAXQDA:
Interviews, Dokumente und offene Surveyfragen computergestützt auswerten
Mittwoch, 15.09.2021
08:30 – 12:30 Uhr
https://wwu.zoom.us/j/654%203304%206864
Meeting-ID: 654 3304 6864
Dr. Stefan Rädiker
Inhalt Teilnahmevoraussetzung
Das Online-Seminar behandelt alle wichtigen Grundfunkti- Alle Teilnehmenden benötigen einen Computer, auf dem eine
onen, um qualitative Evaluationsdaten mit MAXQDA auszu- aktuelle Version von MAXQDA 2020 für Windows oder Mac
werten. MAXQDA ist eine Software zur Analyse von qualita- installiert ist. Die voll funktionsfähige Demoversion (www.
tiven und Mixed-Methods-Daten, die zahlreiche Funktionen maxqda.de/demo) ist ausreichend und kann parallel zu bereits
und Visual Tools für die Analyse von Evaluationsdaten wie bestehenden älteren MAXQDA-Versionen betrieben werden.
(Gruppen-)Interviews, (PDF-)Dokumenten und Antworten
Zielgruppe
auf offene Surveyfragen zur Verfügung stellt.
Praktizierende oder angehende Evaluierende mit keinen oder
Nach einem kurzen Überblick über die Programmoberfläche
geringen Vorerfahrungen mit der Nutzung von MAXQDA
werden die Inhalte in einer Mischung aus Demonstration und
selbständiger, angeleiteter Übung erarbeitet. Der Schwer- Adressierte Kompetenzfelder der Empfehlungen zur Aus-
punkt liegt unter anderem auf folgenden Inhalten: und Weiterbildung in Evaluation
• MAXQDA-Projekte anlegen und Dokumente importieren • Methodenkompetenzen, insbesondere:
• Kategorien erstellen, Textstellen codieren und codierte • Datenverarbeitung, Datenaufbereitung und -interpretation
Segmente systematisch zusammenstellen • Anwendungskenntnisse in relevanten Softwarepaketen
• In Texten suchen und Ergebnisse automatisch codieren
Referent
• Mit Variablen arbeiten und für Gruppenvergleiche nutzen
Dr. Stefan Rädiker arbeitet seit über 20 Jahren mit MAXQDA
• Ausblick auf weiterführende Analysefunktionen (Datenvi-
und hat seine Erfahrungen an mehrere Hundert Forschende,
sualisierung, Analyse von Surveydaten, …)
Doktoranden und Studierende weitergegeben. Er kann auf
Nach Abschluss des Seminars können die Teilnehmenden In- eine fundierte universitäre Methodenausbildung zurückgrei-
terviews und Dokumente importieren, themenbezogen co- fen und hat mehrere Lehrbücher zu qualitativen und quan-
dieren und einfache Auswertungen auf Basis der Codierungen titativen Forschungsmethoden veröffentlicht – unter ande-
vornehmen. Sie können lexikalische Suchen und (graphisch rem „Analyse qualitativer Daten mit MAXQDA“ (2019) und
unterstützte) Gruppenvergleiche durchführen und kennen die „Fokussierte Interviewanalyse“ (2020, beide zusammen mit
Funktionen für den Import und die Analyse von Surveydaten. Udo Kuckartz). Er hat MAXQDA im Rahmen zahlreicher For-
Sie können den Nutzen der computergestützten Analyse mit schungs- und Evaluationsprojekte eingesetzt und berät das
MAXQDA für ihre Evaluationsprojekte einschätzen. MAXQDA-Team bei der Weiterentwicklung der Software. Sein
Anliegen ist es, die Anwendung von MAXQDA erfahrungsba-
Alle Teilnehmenden werden vorab angeschrieben und erhal-
siert, praxisnah, auf hohem Niveau und leicht verständlich zu
ten die Möglichkeit, ihre Fragen und Wünsche zur Thematik an
vermitteln.
die Seminarleitung zu übermitteln.
Kontakt: Dr. Stefan Rädiker
Um Unterschiede im Vorwissen auszugleichen und das Erler-
nen der Software zu erleichtern, erhalten die Teilnehmenden Brunnenweg 37
vorab einen kleinen Übungszettel, um sich schon einmal in D-27283 Verden (Aller)
ca. 30 Minuten mit der Oberfläche von MAXQDA vertraut zu
Tel.: +49 (0)4231 / 870 20 23
machen.
raediker@methoden-expertise.de
www.methoden-expertise.de
2024. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
S3 Für wen geplant, wie umgesetzt? –
Gender als Evaluierungskompetenz
Mittwoch, 15.09.2021
13:30 – 17:30 Uhr
https://wwu.zoom.us/j/677%200618%200423
Meeting-ID: 677 0618 0423
Dr. Karin Grasenick
Ziele des Seminars Ablauf
Teilnehmende des Seminars können 13:30 - 14:10: „Let‘s get started!“ – Ein Beispiel aus der
Praxis zum Einstieg, Erfahrungen
1. Ausschreibungen und Angebote analysieren, inwiefern
und Erwartungen der Teilnehmenden
Gender berücksichtigt wurde,
14:10 - 14:20: Pause
2. Evaluationskonzepte und Methoden für Gender-Analy-
sen wählen, 14:20 - 15:00: „Common Ground“ – Eine gemeinsames
Verständnis von Begriffen für die Gender-
3. Evaluationsberichte und Empfehlungen entsprechend
kompetenz herstellen
gestalten und prüfen.
15:00 - 15:30: Pause
Zielgruppe des Seminars
15:30 - 16:10: “Plan – Do – Check – Act“: Analyse des
Einführungsseminar für Evaluator_innen, Gutachter_innen,
Faktors Genders von der Ausschreibung
Auftrageber_innen welche in der Formulierung von Ausschrei-
bis zur Berichtslegung
bungen und Angeboten, im methodischen Design und in der
Berichterstattung Gender berücksichtigen wollen. 16:10 - 16:20: Pause
Angabe, welche Kompetenzfelder und -bereiche der Emp- 16:20 - 17:00: “Deep Dives” - Methodenbeispiele
fehlungen zur Aus- und Weiterbildung in Evaluation im
17:00 - 17:30: “Take Aways” – Zusammenfassung,
Wesentlichen behandelt werden
Reflexion, Abschluss
Der Schwerpunkt bzgl. der vermittelten Kompetenzfeldern
Dokumentation
liegt auf Methodenkompetenzen, Sozial-und Selbst-Kompe-
tenzen sowie der Evaluationspraxis anhand von Fallbeispie- Begleitende Arbeitsmaterialien und Ergebnisprotokoll werden
len. bereitgestellt.
Inhalt, Ablauf und Form sowie Dokumentation des Referentinnen/Referenten mit workshopbezogenen
Workshops Referenzen
Inhalte Karin Grasenick Gründerin und Managing Partner convelop
(technische Mathematik, biomedizinische Messtechnik, So-
Das Seminar reflektiert die Erfahrungen der Teilnehmenden
ziologie, Gender und Diversity Management)
und erläutert anhand von Praxisbeispielen, wie Genderkom-
petenz zur Qualität von Evaluierungen beiträgt. Grundle- • Lehrgänge, fachliche Begleitung, Moderation: Frühjahres-
gende Kenntnisse zu Geschlecht, Gender, Intersektionalität tagung AK GM der DeGEval, Modul Forschung des Gender
werden vermittelt. Es werden Leitfragen bereitgestellt zur und Diversity Lehrgangs sowie Diversity Management an
Analyse von Ausschreibungen und Evaluierungsberichten. Die der Technischen Universität Graz
systematische Berücksichtigung von Gender wird durch einen • Gender in der Evaluation des Programms Alexander
Evaluationszyklus erläutert. Beispiele qualitativer und quanti- von Humboldt-Professur sowie der Evaluation der For-
tativer Methoden runden das Seminar ab. schungstipendien der Alexander von Humboldt Stiftung,
Evaluierung des Frauenförderplans der Österreichischen
Akademie der Wissenschaften
2124. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
• Auswahlverfahren, Jury-Mitglied für der Europäischen
Kommission und öst. Agenturen, mit einem Fokus auf
Gender
Konstantin Melidis Managing Partner convelop (Geogra-
fie- und Raumfoschung, Soqua Lehrgang für internatio-
nale sozialwiss. Forschung, Weiterbildungen zu sozial-/
wirtschaftswissenschaftlichen Methoden (statistische/mik-
roökonometrische Methoden, Soziale Netzwerkanalyse) an
den Universitäten Bamberg, Essex, CEU Budapest, Köln GE-
SIS, Ljubljana. Projektmanagement (IPMA))
• Vorbereitung und Begleitung von Projekten im Bereich
regionaler Entwicklung und Europäischer Integration
(Österreich, Deutschland, Südosteuropa)
• Projektleitung im Rahmen von Evaluierungsstudien (EU-
Regionalpolitik)
• Planung, Evaluierung nationaler und regionaler Entwick-
lungsprogramme
• Strategie und Politikberatung im Kontext der Europäi-
schen Kohäsionspolitik
Kontakt: Karin Grasenick
convelop cooperative knowledge design gmbh
Bürgergasse 8-10
8010 Graz, Österreich
Tel.: +43 (0) 316 720 813 12
Karin.Grasenick@convelop.at
2224. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
S4 Einführung in den Datenschutz:
Grundlagen und Beispiele
Mittwoch, 15.09.2021
13:30 – 17:30 Uhr
https://wwu.zoom.us/j/615%201302%206781
Meeting-ID: 615 1302 6781
Mag. Harald Hutter
Ziele des Seminars Ablauf
Vermittlung von Basiswissen der DSGVO und Beispiele für • Einführug in die Grundlagen durch Vortrag und Frage-
Herausforderungen in der Praxis. Ausgehend von den zentra- runden
len rechtlichen Bestimmungen werden Lösungsansätze für die • Diskussion anhand konkreter Beispiele (z.B. Informed
Herausforderungen, vor denen vor allem kleine Organisatio- Consent, Befragung)
nen stehen, erarbeitet.
Dokumentation
Zielgruppe des Seminars
Foliensatz als PDF
Evaluator*innen die nicht auf eine/n Datenschutzbe-
auftragte*n zurückgreifen können und/oder über mehr Referentinnen/Referenten mit workshopbezogenen
Sicherheit in Datenschutz-Fragen verfügen möchten. Referenzen
Inhalt, Ablauf und Form sowie Dokumentation des • Harald Hutter ist seit 1998 am IHS mit Datenschutz be-
Workshops fasst und seit 2012 Datenschutzbeauftragter, Gründungs-
mitglied der IG Datenschutz der österreichischen Hoch-
Inhalte schulen und außeruniversitären Forschungsinstitute und
Prinzipien der DSGVO, Rechtsgrundlagen und Rollenvertei- Mitglied der privacyofficers.at.
lung, Herausforderungen und Beispiele im Forschungsdesign Kontakt: Harald Hutter
Institut für Höhere Studien Wien
hutter@ihs.ac.at
https://datenschutz.ihs.ac.at
2324. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
KEYNOTES
Measuring Strategically:
A Managerial Perspective on Evaluation
© 2018 Trustees of Tufts College
Donnerstag, 19.09.2021
12:15 – 13:45 Uhr
https://wwu.zoom.us/j/640%200172%201252
Meeting-ID: 640 0172 1252
Prof. Dr. Alnoor Ebrahim
is Professor of Management at The Fletcher School, and the
Tisch College of Civic Life, at Tufts University. He also co-chairs
an executive program on leadership for systems change at the
Harvard Kennedy School.
Evaluation is often seen by social change organizations as an “external” activity,
conducted by professional evaluators or third parties at the behest of funders.
Managers inside such organizations-be they nonprofits, governments, or social
enterprises-frequently see evaluation as being separate from their “real work”.
Why is this the case? And what can be done about it? In this keynote address,
I shall frame this problem as a failure to link evaluation with organizational
strategy. Drawing on research from my recent book, Measuring Social Change,
I examine how to incorporate performance measurement and evaluation in the
service of strategy. I differentiate among four different types of strategies of so-
cial change-niche, integrated, emergent, and ecosystem-and detail the types of
evaluative systems and capacities best suited to each. I also consider the roles of
funders such as impact investors, philanthropic foundations, and international
aid agencies, and how they can best enable meaningful evaluation.
2424. Jahrestagung der DeGEval | Wandel durch Evaluation und Wandel der Evaluation | 15. – 17.09.2021 | Online-Tagung
Wandel durch Evaluation und Wandel der Evaluation:
Welche Lehren können wir aus der Pandemie ziehen?
Freitag, 17.09.2021
09:00 – 10:15 Uhr
© Schmolke Gerhard
https://wwu.zoom.us/j/618%205594%206189
Meeting-ID: 618 5594 6189
Univ.-Prof. Dr. Dr. Christiane Spiel
ist Professorin für Bildungspsychologie und Evaluation an der Fakultät
für Psychologie, Universität Wien.
Evidenzbasierte Politik ist ein Begriff, der von Politiker*innen selbst zunehmend häu-
figer verwendet wird. Evaluation (siehe die Nutzensbestimmung nach Stockmann)
respektive deren Verankerung kommt dabei eine zentrale Rolle zu. Danach sollte Eva-
luation nicht nur zu einer Erhöhung der Steuerungsfähigkeit und Legitimität führen,
sondern auch zur gesellschaftlichen Aufklärung. Ohne Zweifel sind wir jedoch von ei-
ner systematischen Verankerung von Evaluation in Deutschland und Österreich noch
weit entfernt (im Gegensatz zur Schweiz, wo Evaluation in der Bundesverfassung ver-
ankert ist). Dies gilt jedoch nicht nur für Evaluation, sondern generell für die Berück-
sichtigung wissenschaftlicher Erkenntnisse bei politischen Entscheidungen.
Die Pandemie hat jedoch hier ohne Zweifel zu einer massiven Veränderung ge-
führt. Ergebnisse wissenschaftlicher Forschung – insbesondere im weiteren Feld
der Medizin, aber auch darüber hinaus – haben eine Aufmerksamkeit erfahren wie
nie zuvor. Der gesellschaftliche Wunsch nach mehr Wissen über die Pandemie und
ihre Folgen hat auch die Medien dazu gebracht, Wissenschaftler*innen als wichtige
Gesprächspartner*innen zu sehen und über Ihre Forschungsbefunde zu berichten. Be-
griffe aus dem (medizinisch) wissenschaftlichen Fachvokabular haben Eingang in den
Wortschatz vieler Menschen gefunden. Gleichzeitig mit der wachsenden Bedeutung,
die Forschung und Wissenschaft in der Öffentlichkeit erlangt hat, hat jedoch über die
Zeit ihre Glaubwürdigkeit – zumindest teilweise – gelitten. Denn die Forschungsergeb-
nisse widersprechen einander zum Teil, was von den Medien noch verstärkt wird. Grund
dafür ist, dass die Ergebnisse wissenschaftlicher Studien oft bereits sehr früh (vor einer
Diskussion in der Scientific Community) in die Öffentlichkeit gelangten und zwar zu-
meist ohne die Darstellung von Methoden, Stichproben etc., die ja häufig die Ursachen
diskrepanter Befunde sind.
Was können wir daraus für Evaluation und ihren Beitrag zur Evidenzbasierung in der
Politik sowie zur gesellschaftlichen Aufklärung lernen? Leider müssen wir wohl fest-
stellen, dass viele Evaluationen, die höchst wichtig für eine evidenzbasierte Bekämp-
fung der Pandemie und ihrer Folgen gewesen wären, gar nicht beauftragt und durchge-
führt wurden. Sie hätten vielleicht zu anderen Maßnahmen (einem Wandel?) geführt.
Haben wir uns zu wenig laut zu Wort gemeldet? Warum wurden wir von den Medien
nur wenig angesprochen? Hier gilt es offensichtlich entsprechende Kommunikations-
strategien zu entwickeln. Diese und weitere Lehren, die wir für die Evaluation und ihren
Wandel aus der Pandemie ziehen können, werden im Vortrag diskutiert.
25Sie können auch lesen
