3

,QKDOWVYHU]HLFKQLV

$QDO\VHGHVEHVWHKHQGHQ.ULWHULHQNDWDORJHV BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

.RPPXQLNDWLRQ BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

9RUVWHOOXQJQHXHU.ULWHULHQ]XP9HUJOHLFKXQG]XU(YDOXLHUXQJYRQ6XFKPDVFKLQHQ9RQ&ODXGLD

3URVNH BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

6XFKPRGL BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

9HUZHQGXQJERROHVFKHU2SHUDWRUHQ BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

*UDQXODULWlW&DVH6HQVLWLYLWlW BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

+RWOLQH BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

,QKDOWVVSH]LILVFKH)LOWHUBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

hEHUVHW]XQJVWRRO BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

5FNVLFKWQDKPHDXIQDWUOLFKH6SUDFKH BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

2EMHNWLYH2SHUDWLRQDOLVLHUXQJGHU.ULWHULHQ BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

(UVWHU2SHUDWLRQDOLVLHUXQJVYRUVFKODJ BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

4

5

(LQOHLWXQJ

Die stetig zunehmende Menge an Informationen und ihre Verfügbarkeit über das Internet erfordert die entsprechende Programmierung und Gestaltung von Werkzeugen, um mit dieser Informationsmenge angemessen umzugehen: Suchmaschinen. Zwischen diesen bestehen bei der Bewältigung der „Informationsflut“ qualitative Unterschiede, welche durch eine entsprechende Bewertung - also Evaluation - der Suchmaschinen sichtbar werden.

Innerhalb dieser Evaluation gewinnt die Dimension der Interaktion/Kommunikation (neben Dimensionen wie z.B. Information) zunehmend an Bedeutung, bestimmen doch die Interaktionsmöglichkeiten des Benutzers mit der Suchmaschine den Erfolg, aber auch die Verbesserung seiner Suchstrategien.

Das Ziel der vorliegenden Hausarbeit ist die Erarbeitung einer zu der Evaluierung des Seminars „Evaluation von Suchmaschinen“ des Wintersemesters 2001/02 alternativen und objektiven Operationalisierung der Dimensionen Interaktion/Kommunikation.

Die Hausarbeit folgt dabei dem diesem Aufbau: Im zweiten Kapitel werden die bestehenden Kriterien, wie sie im Fragebogen des Seminars „Evaluation von Suchmaschinen“ verwendet worden sind, einer kritischen Analyse unterworfen. Aufbauend auf dieser Analyse werden die bestehenden Kriterien zum einen ergänzt, zum anderen werden neue Kriterien präsentiert, durch welche die Dimensionen Interaktion und Kommunikation präziser erfaßt werden können.

Im Anschluß an die Präsentation neuer Kriterien erfolgt ihre objektive Operationalisierung in Form von zwei Operationalisierungsvorschlägen. Dabei durchlaufen sowohl die ursprünglichen Kriterien als auch die neu hinzugefügten Kriterien einen Selektionsprozess, d.h. es werden von beiden Kriteriengruppen nur diejenigen Kriterien operationalisiert, welche die notwendige Relevanz besitzen oder diese Relevanz in Kombination mit anderen Kriterien erhalten. Es ist also nicht entscheidend, alle Kriterien zu operationalisieren, sondern eine Auswahl derjenigen

6

Kriterien zu treffen, welche die effektivste Qualitätsbeurteilung der Dimensionen Interaktion und Kommunikation ermöglichen.

In dem nun folgenden zweiten Kapitel, werden die Kriterien des Fragebogens des Seminars „Evaluation von Suchmaschinen“ kritisch hinterfragt. Zu diesem Zweck wird zu Beginn der Begriff der Evaluation erläutert und in Beziehung zu dem Begriff der Usability gesetzt, um auf dieser Basis die Dimensionen Kommunikation und Interaktion inhaltlich zu erfassen. Daran schließt sich die Analyse der bestehenden Kriterien an, welche sich in eine Analyse der Darstellung der Kriterien und in eine Analyse der inhaltlichen Relevanz und Legitimation der Kriterien unterteilt.

$QDO\VHGHVEHVWHKHQGHQ.ULWHULHQNDWDORJHV

(YDOXDWLRQXQG=LHOVHW]XQJ

In diesem Kapitel soll versucht werden, den Begriff der Evaluation genauer zu spezifizieren, um von dieser Spezifikation Konsequenzen für die inhaltliche Erfassung der Dimensionen Interaktion und Kommunikation abzuleiten.

Dabei gilt es zunächst, zwischen der Evaluation und Evaluationsmethode zu unterscheiden:

a) Evaluation: A process through which information about the usability of a system is gathered in order to improve the system or to access a completed interface.

b) Evaluation-method: A procedure for collecting relevant data about the operation and usability of a computer system. (Preece/Rogers 1994, S. 713)

Im Zentrum dieser Definition steht wiederum der Begriff der Usability, also der „Benutzbarkeit“ von Informationssystemen.

Jakob Nielsen definiert dabei Usability folgendermaßen:

„Usability is the measure of the quality of the user experience when interacting with something - wether a web-site, a traditional software application, or any other device the

7

user can operate in some way or another.“ (Nielsen 1993)

Die Zielsetzung einer erfolgreichen Evaluation von Suchmaschinen sollte also darin bestehen, sowohl diejenigen Kriterien/Features zu erkennen, welche die Qualität der Usability seitens des Nutzers erhöhen und diejenigen Kriterien zu identifizieren, welche einer Verbesserung bedürfen, um eine zufriedenstellende Usability zu gewährleisten. (vgl. www. aboutwebdesign.de/ebook/designtheorie_usability.html)

'LH'LPHQVLRQHQ,QWHUDNWLRQXQG.RPPXQLNDWLRQ

,QWHUDNWLRQ

Wie die Definition von Nielsen impliziert, hängt die Qualität der Usability von der Qualität der Interaktion des Benutzers mit dem jeweiligen Software-System ab, also der Mensch-Computer-Interaktion (MCI) oder Human-Computer-Interaction (HCI), welche sich mit der Gestaltung der Interaktionsformen von Mensch und Computer befaßt: „... human-computer-interaction is a discipline concerned with the design, evaluation and implementation of interactive computing systems for human use and with the study of major phenomena surrounding them.“ (ACM SIGCHI 1992, S. 6).

Ziel der MCI ist also die Gestaltung eines Software-Systems, das sowohl benutzungsfreundlich und sicher als auch funktional ist. Es steht also eine softwareergonomische Gestaltung im Mittelpunkt.

Diese softwareergonomische Gestaltung unterliegt einer bedingten Relationalität, d.h. sie ist in Beziehung zu setzen mit einem bestimmten Produkt in einer bestimmten Situation. Ein bestimmter Nutzer verfolgt dabei bestimmte Ziele in einem bestimmten Kontext. Dieser Kontext unterliegt den Handlungsrichtlinien Effektivität, Effizienz und Zufriedenheit.

So definiert Krömker Effektivität als „Genauigkeit und Vollständigkeit, mit welcher Benutzer ein bestimmtes Ziel erreichen“, Effizienz wird definiert als der „im Verhältnis zu Genauigkeit und Vollständigkeit eingesetzte Aufwand, mit dem Benutzer ein

8

bestimmtes Ziel erreichen.“ und Zufriedenheit als „ Freiheit von Beeinträchtigung und positive Einstellungen gegenüber der Benutzung des Produktes.“ (Krömker 1999, S. 23)

Die Indikatoren bzw. Kriterien der Dimension Interaktion sollten sich also ihrerseits an den Kriterien Effektivität, Effizienz und Zufriedenheit orientieren.

.RPPXQLNDWLRQ

Wie im vorangegangenen Kapitel erläutert, steht bei der Mensch-Computer-Interaktion die softwareergonomische Gestaltung der Benutzerschnittstelle im Mittelpunkt. In diesem Kontext ergänzt die Dimension der Kommunikation die Dimension der Interaktion.

So werden von Blattner und Danneberg vier Teilgebiete der Kommunikation zwischen Mensch und Computer unterschieden (Blattner/Danneberg, 1992):

• Computer-Computer Kommunikation

• Mensch-Mensch Kommunikation

• Computer-Mensch Kommunikation

• Mensch-Computer Kommunikation

Für die inhaltliche Bestimmung der Dimension Kommunikation ist dieses insofern entscheidend, als dass daraus Kriterien für die Evaluation abgeleitet werden können, welche die Mensch-Mensch-Kommunikation betreffen. Bei einer Benutzerberatung in Form einer Hotline erfolgt die Kommunikation über die zu bewertende Suchmaschine und findet nur bedingt mit der Suchmaschine statt.

Entsprechend der Dimension der Interaktion, so greift auch in diesem Zusammenhang das Postulat der Effizienz (vgl. http://www.vib-bw.de/eva/erg_gesamt.htm) sowie der Effektivität und der Zufriedenheit mit dem Kommunikationsprozess seitens des Nutzers innerhalb der Informationsbeschaffung.

Auch wenn sich die Dimensionen Interaktion und Kommunikation in vielerlei Hinsicht überschneiden, so ist am Punkt der Mensch-Mensch-Kommunikation eine essentielle