Computer-Magazin

 
Buch-Rezension:

Sigmar-Olaf Tergan u.a. (Hrsg.) Qualitätsbeurteilung multimedialer Lern- und Informationssysteme: Evaluationsmethoden auf dem Prüfstand, Nürnberg 2000, BW-Verlag, ISBN 3-8214-7020-8, 350 Seiten, 58,- DM. Das Buch erscheint in der Reihe: Multimediales Lernen in der Berufsbildung

Zum Hintergrund: 

In der Zeit vom 01. Oktober 1992 bis zum 30. Mai 1996 fand ein Modellprojekt mit dem Namen „Informations- und Kommunikationstechniken in der Betriebsführung des Handwerks“ (IKHT) statt. Durchführungsträger waren die Volkshochschule München und die Handwerkskammer von München und Oberbayern, gefördert vom Bundesinstitut für Berufsbildung aus Mitteln des Bundesministerium für Bildung und Forschung. Wissenschaftliche Begleitung: Gesellschaft für Ausbildungsforschung und Berufsentwicklung, München. Wissenschaftliche Redaktion: Deutsches Institut für Fernstudienforschung an der Universität Tübingen.

Im Verlaufe des Modellprojektes entstand ein Lernprogramm auf CD-ROM,  das einen Umfang von insgesamt 51 Einheiten hat und je nach Lerntempo eine Bearbeitungszeit von 30-50 Stunden umfasst.  Das Programm erschien 1996 und hat einen Verkaufspreis von 299,- DM.

Die Inhalte des Computer-Programmes beschäftigen sich mit den Fragen, wie sich die EDV im Betrieb einsetzen läßt, die Auftragsabwicklung unterstützen kann und welche grundsätzlichen Gesichtspunkte bei der Einführung von IuK-Technologien im Betrieb beachtet werden sollten.

Die vorliegende Publikation stellt nicht nur das Modellprojekt und das darin entwickelte Lernsystem vor, sondern  versucht durch den Vergleich von Evaluierungsmethoden (Kriterienkataloge, Expertenratings oder Nutzer/-innenbefragungen) quasi zu einem Idealmodell für die Qualitätsbeurteilung multimedialer Lern- und Informationssysteme zu kommen. Diesen Versuch unternehmen hochkarätige Autoren und Autorinnen aus den Bereichen der beruflichen Bildung, der Lehrer/-innen-Fortbildung, der Erwachsenenbildung sowie der universitären Profession. Was allerdings auffällt, ist, daß die wissenschaftliche Begleitung des Modellprojektes nicht vertreten ist.

In 14 eigenständigen wissenschaftlichen Beiträgen dokumentiert das Expert/-innen-Team seine Ergebnisse. In einem fünf Kapitel umfassenden Einführungsteil werden grundlegende Fachbegriffe, Fragen und Probleme der Qualitätsbeurteilung von Lern- und Informationssoftware erläutert. Neun weitere Beiträge stellen die angewendeten Bewertungsmethoden und die damit erzielten Ergebnisse in einem kritischen Vergleich vor.

Die Beiträge im einzelnen: 

Teil A: Grundlagen der Qualitätsevaluation

  • Grundlagen der Evaluation: ein Überblick (Sigmar-Olaf Tergan)
  • Ebenen und Prozesse der Evaluation (Peter Schenkel)
  • Qualitätsbeurteilung und Kriterienkataloge. Auf der Suche nach validen Vorhersagemodellen (Reiner Fricke)
  • Vom Qualitätsbewußtsein über Selbstevaluation und maßgeschneidertes Vorgehen zur Transfersicherung (Heinz Mandl und Gabi Reinmann-Rothmeier)
  • Evaluation aus theoriegeleiteter, ganzheitlicher Sicht (Franz Schott)
Teil B: Methoden der Qualitätsevaluation
  • Die multimediale Bildungssoftware „Informations- und Kommunikationstechniken im Handwerk - IKHT“. Ein Modellversuch zur beruflichen Bildung (Alfred Lottmann)
  • Bildungssoftware im Urteil von Experten. 10+1 Leitfragen zur Evaluation. (Sigmar-Olaf Tergan)
  • MEDA und AKAB: Zwei Kriterienkataloge auf dem Prüfstand (Anne Meier)
  • Evaluation von Lernsoftware auf der Basis von SODIS (Karlheinz Korbmacher)
  • Evaluation von multimedialer Lernsoftware auf der Basis von ELISE (1.0). Ein Ansatz zu einer adressaten- und anwenderorientierten Methode zur Evaluation von multimedialen Lern- und Informationssystemen (Franz Schott, Florian Krien, Silvio Sachse und Thomas Schubert)
  • Bedarfs- und implementationsorientierte Evaluation von Lernsoftware: eine Feldstudie mit Meistern und Technikschülern (Gabi Reinmann-Rothmeier und Heinz Mandel)
  • „Der Lernerfolg bestimmt die Qualität einer Lernsoftware!“ Evaluation von Lernerfolg als logische Rekonstruktion von Handlungen (Gerhard Zimmer und Elena Psaralidis)
  • Protokolle von Lernprozessen (Hans Freibichler)
  • Vergleichende Bewertung von Methoden zur Beurteilung der Qualität von Lern- und Informationssystemen. Fazit eines Methodenvergleichs. (Sigmar-Olaf Tergan)
Spannend lesen sich die sehr unterschiedlichen Qualitätsanalysen der im Modellprojekt entwickelten Lernsoftware IKHT. Sei es mit dem ursprünglich zur Prüfung von Lernsoftware für die Automobilindustrie entwickelten Kriterenkatalog AKAB-CBT oder mit dem im Schulbereich entwickelten Software-Dokumentations- und Informationssystem (SODIS). In beiden erfährt die Software eine im Kern positive Bewertung, wobei auch kritische Aspekte nicht unter den Tisch fallen. Ein positives Beiprodukt ist die Erkenntnis des SODIS-Bewerters, Karlheinz Korbmacher, daß das Kriterienraster des Prüfsystems unter dem Blickwinkel beruflicher Fort- und Weiterbildung weiterentwickelt werden müsste.

Speziell für die Beurteilung der Software IKHT ist an der TU Dresden ein neues System mit Namen ELISE (effiziente Lern- und Informations-System-Evaluation) entwickelt worden, das ausführlich vorgestellt wird.

Besonders gefallen hat uns auch, daß eine Qualitätsbeurteilung nicht nur anhand von Kriterienkatalogen vorgenommen worden ist, sondern ergänzend durch Befragungen von Adressat/-innen aus den Zielgruppen. Hier gibt es zum einen eine Feldstudie mit Meister- und Technikschülern, 5 anschaulich geschilderte lebensweltbezogene Fallstudien zum Lernen mit der Software und "Protokolle von Lernprozessen" mit den Methoden mündlicher und schriftlicher Befragung sowie Beobachtung. 

So ist  eine insgesamt gelungene und empfehlenswerte Publikation entstanden.


Weitere Hintergrundinformationen über das damalige Modellprojekt können Sie in der Ausgabe 11 des „Computer-Magazin für berufliche Bildung und Förderunterricht“ vom Juli 1997 nachlesen:

http://www.weiterbildung.com/abh-computer-magazin/11/
11modell.html#Multimediale

(Weitere Informationen: BW Bildung und Wissen Verlag und Software, PF 820150, 90252 Nürnberg, Telefon 0911-9676-175, Telefax -189, eMail: service-team@bwverlag.de oder gabriele.klische@bwverlag.de, Internet: http://www.bwverlag.de)

Wolfgang Schmitt-Kölzer

zurück zur Übersicht