Usability-Befragung 2010 – Ergebnisse

Im September führte ecoi.net eine Online-Befragung zur Usability durch. Klicken Sie auf „Lesen Sie mehr“ um zu sehen, wie unsere NutzerInnen geantwortet haben.

ecoi.net wird weltweit verwendet, NutzerInnen aus 50 Ländern haben den Fragebogen ausgefüllt (Gruß nach Neuseeland!). Der größte Teil der Befragten* (19%) arbeitet in Österreich, gefolgt von Deutschland, Belgien, den Niederlanden & der Schweiz. Die Top 10 werden von Irland, dem Vereinigten Königreich, Kanada und (gleichauf) Nigeria, Schweden & Spanien vervollständigt.

* Anmerkung: als Befragte werden hier und im Folgenden jene definiert, die die jeweiligen Fragen des Fragebogens auch ausgefüllt haben.

Seit wann benutzen Sie ecoi.net?

33% der Befragten verwendeten ecoi.net schon vor 2006, 17% begannen entweder 2006 oder 2007 ecoi.net zu verwenden und 37% zwischen 2008 und 2010. 11% waren zum ersten Mal auf ecoi.net als sie den Fragebogen ausfüllten.

Häufigkeit der Nutzung

13% besuchen ecoi.net weniger häufig als einmal im Monat, wobei hier die genannten 11% erstmaligen Benutzer nicht enthalten sind. 39% nutzen es einmal oder mehrmals im Monat und 37% verwenden ecoi.net einmal in der Woche bis hin zu täglich.

Beruf

44% der Befragten arbeiten für eine Regierungsbehörde, die mit Asylagenden befasst ist. Weitere 2% arbeiten für sonstige Regierungsabteilungen (die mit Asylverfahren nichts zu tun haben) und 2,5% sind RichterInnen oder sonstiges Personal an Berufungsgerichten. 24% arbeiten in NGOs im Flüchtlingsbereich, 12% sind FlüchtlingsanwältInnen oder RechtsberaterInnen und 7% arbeiten für eine internationale Organisation.

NutzerInnenzufriedenheit

Der allergrößte Teil der Befragten (etwa 90%) ist mit Benutzerfreundlichkeit, Navigation, der Suchfunktion, der Aktualität und den abgedeckten Quellen zufrieden – Abweichungen zwischen diesen Aspekten können festgestellt werden, indem NutzerInnen, welche die betreffenden Punkte “sehr zufriedenstellend” gefunden haben, mit denen, die sie “eher zufriedenstellend” gefunden haben, verglichen werden. Die folgende Darstellung zeigt dies im Detail.

Häufigkeit der Nutzung verschiedener Funktionen

Wir fragten unsere NutzerInnen, wie oft sie verschiedene Funktionen einer ecoi.net-Länderseite verwenden, nämlich:

  • die Liste neu hochgeladener Dokumente,
  • die Liste wichtiger Dokumente,
  • Links zu Länderprofilen,
  • Landkarten,
  • nationale Gesetze,
  • länderspezifische Links,
  • das Suchformular,
  • und die Themenpapiere.

Von diesen Funktionen sind die Liste der neuen Dokumente und das Suchformular die meistverwendeten, nationale Gesetze und Themenpapiere die am seltensten verwendeten. In Anbetracht der Tatsache, dass die Aktualisierung von Themenpapieren im November 2008 beendet wurde ist es nicht verwunderlich, dass sie nicht mehr oft aufgerufen werden. Bezüglich der geringen Verwendung von Landkarten und Gesetzen werden wir versuchen, die Sichtbarkeit dieser Funktionen zu verbessern.

AnwenderInnenfreundlichkeit

Wir fragten unsere NutzerInnen, wie einfach es für sie ist:

  • auf eine Länderseite zuzugreifen
  • das Veröffentlichungsdatum eines Eintrags zu erkennen
  • die Quelle/den Herausgeber eines Eintrags zu erkennen
  • den Originaltitel eines Eintrags zu erkennen

Mehr als 95% der Befragten gaben an, dass die Durchführung aller genannten Vorgänge “sehr” oder “eher“ einfach war. Keiner der Befragten fand einen der Vorgänge „sehr schwierig“. Die Unterscheidung zwischen denjenigen, die „sehr einfach“ gewählt haben und denjenigen, die „eher einfach“ gewählt haben zeigt, dass der Zugriff auf eine Länderseite am einfachsten ist, den Originaltitel eines Eintrags zu erkennen dagegen der am wenigsten einfache Vorgang.

95% aller Befragten gaben an, dass die Kurzzusammenfassungen, die ecoi.net für jeden Eintrag anbietet, „sehr“ oder „eher“ hilfreich sind, um die Relevanz eines Eintrags zu beurteilen.

Quellenbeschreibungen

Während 21% der Befragten die Quellenbeschreibungen von ecoi.net mit “sehr gut” und 43% mit “gut” bewerteten, gab ein großer Teil (22%) an, dass sie nichts von der Existenz solcher Beschreibungen wussten. Wir werden versuchen, die Sichtbarkeit unserer Quellenbeschreibungen zu verbessern.

Suchfunktion

Die Befragten beurteilten ihre Zufriedenheit mit den Suchergebnissen folgendermaßen:

  • 23% sehr zufriedenstellend
  • 72% eher zufriedenstellend
  • 4% eher nicht zufriedenstellend
  • 1% nicht zufriedenstellend

Die folgenden Darstellungen zeigen welche Funktionen der Suchmaschine die Befragten verwenden:

Wir fragten, ob die Unterstützung durch den COI-Thesaurus (automatische Miteinbeziehung von Synonymen und Quasisynonymen sowie moderierte Suche) als hilfreich erachtet wird. 42% der Befragten “stimmten voll zu”, 30% “stimmten eher zu”, während 12% “eher nicht zustimmten” und 16% die Funktion nicht kannten.

Personalisierung

56% der Befragten haben sich auf ecoi.net registriert. Von jenen Befragten, die sich NICHT registrierten, gaben 88% an, dass ihre Unkenntnis über zusätzliche Funktionen im Fall einer Registrierung der Grund gewesen sei, diese Möglichkeit nicht in Anspruch zu nehmen. 12% finden die zusätzlichen Funktionen, die eine Registrierung bietet, für sich nicht hilfreich.

Die folgende Darstellung zeigt, welche Funktionen registrierte NutzerInnen nach eigenen Angaben nutzen:

Da ecoi.net auch die Basis für die Staatendokumentationsdatenbank des österreichischen Bundesasylamts darstellt und zusätzliche Dokumente für NutzerInnen, die bei der Behörde registriert sind, bereitstellt, kann dadurch zumindest ein Teil der 16% registrierter NutzerInnen, die nie Personalisierungsfunktionen in Anspruch genommen haben, erklärt werden.

Als Folge dieser Umfrage und der gleichzeitig durchgeführten Usability-Studie möchten wir die Vorteile einer Registrierung einfacher verständlich machen. Aus diesem Grund werden wir die Möglichkeit einer „eingeloggt bleiben”-Funktion erwägen und wir werden die am seltensten verwendete Funktion, “Meine Dokumente”, entfernen. Die Usability-Studie hat gezeigt, dass diese Funktion nicht leicht zu verstehen war und dass es sich schwierig gestaltet hat, den Unterschied zwischen „Meine Dokumente“ und dem Recherchekorb zu erklären.

Konsequenzen

Als die Umfrage online war, führten wir parallel dazu auch eine Usability-Studie durch. Auf Basis der Rückmeldungen, die wir durch Umfrage und Studie erhalten haben, werden wir die folgenden Änderungen ins Auge fassen

  • Hinzufügen einer Zitiervorschlagsfunktion für jeden Eintrag. Diese Möglichkeit wurde oftmals in Kommentaren zur Umfrage gewünscht und ist bisher nur indirekt über unsere „Recherchekörbe“ verfügbar
  • Erwägen einer Änderung der ecoi.net-Startseite, um mehr Platz für Inhalte zu schaffen
  • Erwägen einer Änderung der Länderseiten, um Funktionen wie „Landkarten“ & „Gesetze“ sichtbarer zu machen
  • Entfernen der Funktion „Meine Dokumente“
  • Verbessern der Suchhilfe, besonders in Bezug auf die Thesaurus-basierte „moderierte Suche“
  • Entfernen der nicht mehr aktuellen Themenpapiere, Erwägen eines Ersatzes

Vielen Dank für Ihre Zeit & Ihr Feedback!

Sollten Sie weitere Fragen oder Anmerkungen haben zögern Sie bitte nicht uns unter info@ecoi.net zu kontaktieren.

Über dieses Blog