Mit der Veröffentlichung der Standards im Jahr 2004 wurde ein Revisionsprozess angeregt um die Breite der Evaluationsfelder zu überprüfen sowie die Klarheit der Formulierungen und die Verständlichkeit der verschiedenen Nutzergruppen zu optimieren. Hierzu wurde im Sommer 2004 eine Online-Umfrage durchgeführt.
Online-Befragung: Information über den Rücklauf
- Bis Anfang Juni 2004 hatten insgesamt 241 Personen die Befragung beendet. Davon 108 persönliche Mitglieder (86 über den personalisierten, 22 über einen anonymen Link), 31 Mitarbeitende von institutionellen Mitgliedern sowie 113 Nicht-Mitglieder. 11 persönliche Mitglieder sind gleichzeitig Mitarbeitende eines institutionellen Mitglieds.
- Durchschnittlich haben pro Tag ca. drei Personen die personalisierte und ca. sechs Personen die anonyme Befragung aufgenommen.
- Die Bearbeitung des Fragebogens hat bei der personalisierten Befragung durchschnittlich gut 15 Minuten und bei der anonymen Befragung ca. 11 Minuten in Anspruch genommen.
- Die Gesamtmenge an Text aus den offenen Antworten umfasst ohne Leerzeichen 108.680 Zeichen (personalisierte Befragung: 54.110 Zeichen; anonyme Befragung: 54.570 Zeichen).
Befragungsverfahren
Die Befragung wurde über zwei verschiedene Verteilwege publiziert:
- Persönliche und institutionelle Mitglieder, sowie der DeGEval bekannte Nicht-Mitglieder, die am Revisionsprozess Interesse gezeigt hatten, wurden per Email eingeladen, an der Befragung teilzunehmen. Für diese Gruppen wurden unterschiedliche Einladungsschreiben verfasst. Alle Angeschriebenen werden gebeten, den in der Email enthaltenen anonymen Link zur Umfrage an ihnen bekannte, am Thema „Evaluation/Standards" interessierte Personen, weiterzuleiten. Hiermit solle die Befragungsgesamtheit ausgeweitet werden.
- Mit dem gleichen Ziel wurde der anonyme Umfragelink über verschiedene Berufsverbände, wissenschaftliche Fachgesellschaften, Internetforen und Mailverteilern verbreitet (eine Liste wird dem Abschlussbericht beigefügt).
Die aufgenommenen Daten wurden in zwei separaten Datensätzen gespeichert: Eine personalisierte, für die nur DeGEval-Mitglieder zugangsberechtigt waren (durch einen personalisierten Zugangslink), und eine anonyme, für die keine Zugangsbeschränkungen existierten (anonymer Zugangslink). Ursprünglich war angedacht, dass ein Datensatz die Antworten der persönlichen und institutionellen Mitglieder der DeGEval enthält, der andere die jeglicher Nicht-Mitglieder, die an der Untersuchung teilgenommen haben. Auf diese Weise sollte das Antwortverhalten von Mitgliedern und Nicht-Mitgliedern trennscharf betrachtet werden können. Es haben jedoch viele Mitglieder die Umfrage den anonymisierten Link benutzt; die Auswertung wird dies angemessen berücksichtigen.
Die Feldzeit der gesamten Online-Befragung war zunächst mit 41 Tagen (vom 15.04 – 25.05.2004) veranschlagt. Die Dauer der anonymen Befragung wurde bis zum 25.06.2004 verlängert, da auf Grund erst kürzlich erfolgter Aufrufe zur Beteiligung noch mit Rücklauf gerechnet wurde. Die personalisierte Befragung ist, der ursprünglichen Feldzeit entsprechend, inzwischen offline.
Befragungsergebnisse:
siehe unten
