Im Plenum mit allen Schülern bzw. Testern wurde überlegt, was alles getestet werden könnte. Als Methode dazu diente ein moderiertes „Brainstorming“.
Die Schüler sollten ausgehend von ihrem individuellen persönlichen Erfahrungshintergrund ihre Gedanken frei laufen lassen: „Was ist mir bei einer Software wichtig?“. Auf diese Weise wurden sehr viele Detailfragen gefunden.
Typische Detailfragen aus dem Brainstorming waren zum Beispiel:
- Wie gut ist die Menüführung?
- Wie gut ist die Steuerung?
- Wie gut ist die Grafik?
- usw.
In einem zweiten Schritt nach dem Brainstorming wurden die Detailfragen zu Kriterien zusammengefasst. Hierbei bedienten wir uns der Moderationstechnik Gruppieren/Clustern.
Ein Beispiel für die Zusammenfassung in Kriterien:
Die Fragen
- Wie ist die Menüführung?
- Wie gut ist die Steuerung?
passen gut in ein Kriterium „Bedienungsbewertung“.
Detailfragen, die mehrfach vorkommen, werden nur einmal bei einem Kriterium aufgeführt.
Nachdem die Kriterien gefunden wurden, wurde für jedes Kriterium eine Summenfrage erarbeitet. Diese ließen sich leicht finden, da sie einfach nur eine Zusammenfassung des Kriteriums sind.
Wichtig bei Lernsoftware ist eine Aussage zu Pädagogik/Didaktik. Da die Tester Schüler sind, ist das Etablieren dieses Kriteriums eine besondere Herausforderung.
Die Nennungen aus dem Brainstorming wurden dann mit Hilfe von Experten des IBI - Institut für Bildung in der Informationsgesellschaft Berlin - und deren Kriterien für den Bildungssoftwarepreis „digita“ abgeglichen.
Ergebnis war das Kriterium Pädagogik/Didaktik mit Schwerpunkt auf die Fachdidaktik des jeweiligen Lernstoffes. Das Kriterium umfasst 5 Detailfragen und eine Summenfrage. Als Erleichterung für die testenden Schüler ist jede Detailfrage durch Anhaltspunkte weiter beschrieben.
Die Ergebnisse aus der Zusammenarbeit mit den Schülern wurden dann von uns Studenten redaktionell bearbeitet. Dabei wurden die Kriterien und Detailfragen in ihrer Logik überprüft, die Kriterien in eine grafische Struktur gebracht und die Fragen nochmals sprachlich überarbeitet.
Nach der redaktionellen Bearbeitung wurde die Einzelcheckliste für ein Review allen Beteiligten zur Verfügung gestellt.
Einige kleinere Anregungen wurden noch verändert und daraufhin die Einzelcheckliste offiziell zur Verfügung gestellt.