Skip to main content

09 Evaluationsverfahren

Arten von Ergebnissen​

Was wird evaluiert?​

Wie gut ist das System?​

Ist die Schnittstelle geeignet?​

Welche Probleme gibt es?​

Testen des Disgns und der Umseztung​

Vergleiche der Systeme​

DECIDE Framework​

Determine the goals​

Explore the question​

Choose the evaluatio paradigm and techniques​

Identify the practival Issues​

Decide how to deal twith the ethical issues​

Evaluate, interpret, and present the data​

Analytische/Empirische Evaluation​

Zustand des Systems​

Ort/Umwelt​

Labor-Tests​

  • Pro

    • Spezielle Apparate vorhanden

    • Keine Störungen

    • Wiederholbar

    • Mehr Probanden

    • meist gĂĽnstig

  • Contra

    • Kontext fehlt

    • Echtes Verhalten schwer zu generieren

    • Usability-Labor nötig

  • Gut wenn Umgebung schwer oder Gefährlich

Feldstudie​

  • Pro

    • NatrĂĽrliche Umgebung

    • Kontext vorhanden (wird aber vom Experiment beeinflusst)

    • Langzeitstudien möglich

    • (manchmal gĂĽnstiger)

  • Contra

    • Ablenkung

    • Geräusche, Störungen

    • Nicht immer reproduzierbar

    • Oft nur qualitativ

      • Probanden werden Interviewt

      • Wie geht es den Probanden nach dem test

    • Meist teuer

  • Gut wenn Kontext wichtig ist

Tagebuch Studie​

  • Dokumentation der Nutzung des Produktes

  • Probanden sollen jede Woche/ jeden Tag etwas zu dem Produkt aufschreiben

Während oder nach der Entwicklung #important​

Formativ #important​

  • Sind dafĂĽr da das Design zu verbessern

Summativ #important​

  • Um herauszufinden, wie gut das Produkt angekommen ist

  • Letzte Evaluation, die nach den Formativen Evaluationen stattfindet

Grafik​

Benutzer*innen​

Mit Benutzern​

  • “echte Benutzer”

    Benutzer kennnen sich nicht mit “usability”, “HCI” aus

  • Experten

    Benutzer*innen sind Experten in dem Bereich “Usability”, “HCi”, damit Sie gute Vorschläge machen können

    - Heuristische Evaluation

        - Phasen

            - Sammeln input

            - Bewerten Systeme

            - Sammeln Ergebnisse

            - Analysieren Ergebnisse

        - Experten müssen über Anwendungsdomäne informiert sein

        - Checklist

        - Wie gut sind die Resultate?

            5 Leute könnne reichen um 75% der Fehler zu finden

        - 10 Usability Heuristics

            - Visibility of system Status

            - Match between system abd tge real world

            - User control and freedom

            - Consistency and standards

            - Error prevention

            - Recognition rather than recall

            - Flexibility abd efficiency of use

            - Aesthetic and minimalist design

            - Help users recognize, diagnose, and recover from error

            - Help and documentation

    - Cognitive Walkthrough

        Experten gehen durch (kognitiv) Aktionen fĂĽr jeden Schritt

        - Verusch vorherzusagen wo der Benutzer Probleme haben kann

        - Schritte

            - Ist die korrekte Aktion zur AusfĂĽhrung einer Handlung ausreichend klar?

            - Ist die korrekte Aktion als solte erkennbar? Findet der Nutzer sie?

            - Erhält der Benutzer eine ausreichende Rückmeldung nach Ausführung der Aktion?

  • Discount Usability Testing

    Auch Heuristisch

    • Vereinfachtes User Testing

      Wenige Benutzer, fokus auf qualitative Studien und die Anwendung der “think-Aloud”Methode

    • Einfache/Eingeshcränkte Prototypen

      meist Papierprototypen, die einzelne Pfade durch das User Interface unterstĂĽtzen

    • Heuristische Evaluation

      in der UI Design entlang von etablierten Usability Guidelines evaluiert werden

Ohne Benutzer​