Abstracts
Bezugsrahmen für die Evaluation von Information Retrieval Systemen mit Visualisierungskomponenten
- Sonja Hierl -
Bezugsrahmen für die Evaluation von Information Retrieval Systemen mit Visualisierungskomponenten

Folgender Beitrag beschäftigt sich mit der Konzeption und Durchführung von nachhaltigen Evaluationen von Information Retrieval Systemen mit Visualisierungskomponenten. Bisherige Evaluationsansätze differieren sowohl in der Methodenauswahl als auch Untersuchungsanlage, wie eine State-of-the-Art-Analyse aufzeigt. Im Anschluss werden die größten Herausforderungen, die sich bei Evaluationen dieser Art ergeben mit Vorschlägen zu potenziellen Lösungsansätzen diskutiert. Auf der Grundlage eines morphologischen Rahmens wird ein Bezugsrahmen für die Evaluation von Information Retrieval Systemen mit Visualisierungskomponenten vorgeschlagen, das einen integrierten Ansatz zur Kombination geeigneter Methoden aus dem Bereich der Usability-Evaluation und der Retrievaleffektivitäts-Evaluation verfolgt. B.I.T.online 10(2007) Nr. 2

Framework for the Evaluation of visual Information Retrieval Systems

The evaluation of novel search engines with integrated visual components poses various questions concerning the choice of an appropriate methodology and an adequate evaluation setting. This paper discusses such an approach for coping with the various challenges. A comprehensive state-of-the-art-analysis indicates that up to now no consensus has been found on this area. The paper summarizes the results of the literature analysis and discusses the most emerging challenges. On the basis of a morphological framework, an integrated evaluation setting is proposed that allows the combination of usability methodologies and methods for measuring retrieval efficiency in a synergetic way. B.I.T.online 10(2007) Nr. 2

Application pour l'évaluation de moteurs de recherche avec des composantes de visualisation

Même si le développement de moteurs de recherche présentant leurs résultats visuellement avance rapidement, il n'y existe à ce jour pas de consensus sur une base pour l'évaluation de tels systèmes. Cette contribution cherche à développer une structure d'évaluation en examinant la problématique à l'aide d'une analyse des techniques actuelles et en discutant des plus grands défis. A partir de ces analyses et d'une application morphologique, une structure pour l'évaluation de moteurs de recherche avec des composantes de visualisation est proposée. Telle structure poursuive une approche intégrée en combinaisant des méthodes appropriées du domaine, notamment de l'évaluation de l'aptitude à l'usage et de l'évaluation de l'effectivité de la recherche. B.I.T.online 10(2007) Nr. 2