Evaluierung der Lehre an der WU Wien mit KMs Evaluate

Fallbeschreibung 

Knowledge Markets hat für die Wirtschaftsuniversität eine Lösung zur vollautomatisierten Lehrveranstaltungsevaluierung entwickelt. Im Gegensatz zu den üblichen Evaluierungsmethoden erlaubt das System den Vortragenden den Evaluierungsbogen individuell zusammen zu stellen, wobei auch auf unterschiedliche Lehrveranstaltungstypen eingegangen werden kann.

LehrveranstaltungsleiterInnen können zwischen bestehenden Vorlagen sowie Fragemodulen in englischer oder deutscher Sprache wählen oder einen Teil der Fragen vollkommen eigenständig definieren. Nach Fertigstellung der Vorlage wird diese noch am selben Tag ausgedruckt und zugesandt. Die Befragung erfolgt papierbasiert, da Studierende im Hörsaal den Fragebogen ausfüllen möchten und hier in der Regel keine geeigenete IT-Infrastruktur zur Verfügung steht, die eine Online-Evaluierung möglich machen würde.  

Die ausgefüllten  Fragebögen werden inklusive der offenen Fragen mit Hilfe einer Scanner-Lösung von Kaiser Data eingelesen und anschließend von unserer Software automatisiert ausgewertet. Die Antwortbelege landen im WU-internen Data Warehouse, wo sie für die Erstellung der Studienprogrammberichte Verwendung zu finden. Das System ist in das WU-eigene Lernmanagementsystem Learn@WU integriert, wo LV-Leiter bereits am Tag nach der Evaluierung einen Detailbericht vorfinden. Diese Ergebnisse können von den Vortragenden anschließend in kommentierter Form WU-intern freigegeben werden. Am Ende eines jeden Semesters erhalten die Vortragenden zusätzlich noch Benchmarkdaten, die es Ihnen möglich machen, ihre eigene Lehrveranstaltung mit anderen zu vergleichen.

Das System wurde nach einer halbsemestrigen Beta-Testphase im Wintersemester 2006/07 in den vollen Betrieb genommen. In diesem Zeitraum wurden insgesamt 1.863 Lehrveranstaltungen evaluiert, was die Verarbeitung von 40.000 Fragebögen und 1.000.000 Einzelantworten erforderlich machte. Das System ist in der Lage pro Stunde um die 2.000 Bögen beidseitig einzuscannen. Um die hohen Anforderungen an Funktionalität und Systemleistung in einem Netto-Entwicklungszeitraum von nur 5 Monaten gewährleisten zu können, wurden als technologische Grundlage das OpenACS/DotLRN-basierte System gewählt, welches neben der WU auch an der Leopold-Franzens Universität Innsbruck [1] [2] [3] für Grossprüfungen eingesetzt wird.

Derzeit ist eine Onlinevariante der Evaluierung in Entwicklung, welche voraussichtlich in der zweiten Hälfte des Sommersemesters 2007 den Probebetrieb aufnehmen wird. Dadurch wird es möglich sein, bei Lehrveranstaltungen, bei denen eine entsprechende IT-Infrastruktur vorhanden ist, auf die papierbasierte Erhebungsmethode zu verzichten.

Screenshots 

	Auf der Startseite werden für jeden Vortragenden seine Evaluierungen übersichtlich angezeigt.
	Für die Bearbeitung des Fragebogens kann zwischen sechs vorgefertigten Vorlagen gewählt werden, welche in deutscher und englischer Sprache verfügbar sind.
	Über eine benutzerfreundliche Bearbeitungsmaske ist es für den Vortragenden ein Leichtes, seinen Fragebogen nach individuellen Wünschen zu gestalten. Dabei können aus einem Fragenkatalog zusätzliche Fragemodule eingebunden werden.
	Bevor die eigentliche Evaluierung beginnt, kann sich der Vortragende seinen Fragebogen als Muster zur Überprüfung ansehen bzw. auch ausdrucken.
	Die Ergebnisse der sogenannten "Pflichtmodule" werden für die Studierenden als auch für die Lehrenden in einer Übersichtsseite dargestellt. Die Lehrenden haben darüber hinaus die Möglichkeit, sich einen Detailbericht im PDF-Format auszudrucken.
	Die Administratoren verfügen über ein umfangreiches BackOffice, welches es Ihnen ermöglicht, den Überblick über bis zu 1.800 Evaluierungen pro Semester zu bewahren und jede einzelne Evaluierung gezielt zu bearbeiten.
	Eine Übersichtsliste zeigt in der Administration den Status mit den wichtigsten Zusatzinformationen (Lehrveranstaltung, Bezeichnung, Vortragender,...) an.
	Über die Detailansicht kann eine Evaluierung bei Bedarf nach bearbeitet werden.