Konzeptionierung und Entwicklung eines Dashboards zur Evaluation von Retrieval-Systemen

Konzeptionierung und Entwicklung eines Dashboards zur Evaluation von Retrieval-Systemen

Im Rahmen des “STELLA - Infrastructures for Living Labs”-Projekts entwickelt die Arbeitsgruppe eine Infrastruktur zur Auswertung verschiedener Retrieval-Systeme. Schwerpunktmäßig soll hierbei die Evaluation der einzelnen Systeme auf Basis von realem Nutzerfeedback im Sinne des “Living lab”-Paradigmas erfolgen. Hierfür ist es notwendig, verschiedene Suchmaschinenanbieter an die Infrastruktur anzuknüpfen und die vorhandenen Suchalgorithmen mit experimentellen Systemen zu vergleichen. Diese experimentellen Systeme sollen von verschiedenen Forschergruppen (Teilnehmern) beigesteuert werden. Die Teilnehmer sollen im Laufe der Auswertungen Einsicht über die Retrieval-Performance anhand eines Dashboard-Services erhalten.

Im Rahmen dieser Abschlussarbeit soll ein solches Dashboard konzeptioniert und implementiert werden. Hierzu soll neben der Recherche zu vorhandenen Frameworks, zunächst ein grafischer Entwurf der Oberfläche angefertigt werden. In der darauf folgenden Phase kann dann nach Absprache mit den Betreuern die Implementierung vorgenommen werden. Die dafür notwendigen Daten werden zunächst simuliert und von den Betreuern bereitgestellt. Die Arbeitsgruppe verfügt über einen ersten Prototypen, der gegebenenfalls als Grundlage für diese Arbeit verwendet werden kann.

STELLA: Towards a Framework for the Reproducibility of Online Search Experiments.

Anforderungen

  • Grundkenntnisse von Git und SQL
  • Grundkenntnisse der Webprogrammierung, z.B. Javascript
  • Interesse an der Auswertung von “Information Retrieval”-Systemen

Abschlussarbeit

Abschluss
BA / MA
Bearbeiterin
n.a.
Betreuer/in
Breuer Schaer