Home

User Test

1. 183 123 VU Usability Engineering SS 2008 Beispiel 3 User Test gPodder Gruppe 3991 Stefan K gl 0725134 033 534 Armin M llner 0728113 033 532 Thomas Perl 0725603 033 534 Bernhard Schussek 0625593 033 534 Management Summary Der Podcasting Client gPodder http gpodder org wurde mittels User Tests auf m gliche Usability Probleme evaluiert Dazu wurden den Testpersonen verschiedene Aufgaben gestellt die sie mit dem Programm bew ltigen mussten Anhand der Erkenntnisse dieser Tests wurden Verbesserungsvorschl ge f r die gefundenen Probleme erstellt gPodder erm glicht das Abonnieren von Podcasts das Abspielen von heruntergeladenen Epi soden sowie das bertragen dieser auf externe Ger te Das Programm ist freie Software und f r Linux verf gbar Eines der Ziele des Programms ist eine einfache und intuitive Bedienung Die Tests wurden speziell f r Personen konzipiert die noch nicht mit gPodder gearbeitet ha ben aber generell an Musik und Medien interessiert sind Dieser Personenkreis stellt unsere Zielgruppe dar Die Auswahl der Aufgaben soll einen m glichst einfachen Einstieg in das Pro gramm erm glichen Allen Testpersonen wurde zun chst eine kurze Einf hrung in die Thematik geboten Eine vir tuelle Maschine in der die Tests durchgef hrt wurden sorgte bei allen Testpersonen f r glei che Testbedingungen Nachdem die einzelnen Aufgaben erkl rt wurden war die Testperson auf sich alleine geste
2. nevennenvunnnennnannene ann nn nn ana nn nn nn un nun nn un nun nn ann nn nn an nun nn anne 20 3 2 Auswertung der Beobachtungen m E EAE EE EE 21 3 3 POACSSTES ADONNIELE RE 22 3 4 Episoden anh ren een een 25 3 5 Einstell ngen anDassen a aada laadal 27 3 6 Mit externen Ee En ie EE EEN 29 37 Bees lees ale e EI Le E 30 4 VERBESSERUNGSVORSCHL GE nuuuuunnnnunnunnnnnununnunnununnnnnunnnnnnnunnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnn 34 5 CONCLUSIO EE 43 5 1 berblick ber die Verbesserungevorschl ge an annnnannnnnnanaa 43 D ANHANG out s as t nud NSKENSELNENN ENEE EENEN SR a a a a EE SEENEN mi 44 SE HK e TEE 44 1 2 Sitte El LEE 46 6 1 Fragebogen f r demographische Daten sek ENN NENNEN ENER ann nun nn ann ENNEN RRE nn nn Han un nun nn nn nun nenn nun RENE 48 6 2 Fragebogen zur Programm Evaluierung nnnevunnnne nenn nn nun nun nn nenn nn nen nnnnnennnnnnennnn nn annan nen na nene nennen 51 183 123 VU Usability Engineering 552008 Gruppe 3991 1 Problemstellung gPodder ist ein Podcast Client der unter Linux als Open Source Software verf gbar ist Zu den wichtigsten Funktionen und Anwendungsf llen z hlen das automatisierte Aktualisieren und Herunterladen von Podcast Episoden Audio und Video das Synchronisieren mit iPods bzw MP3 Playern und das bertragen auf andere Ger te per Bluetooth Zu allen diesen Funk tionen gibt es unterschiedliche Einstellungen um das Programm an die eigenen Bed
3. AN Podcast Clients sind Programme die solche Funktionen anbieten wie zB gPodder Als Feeds werden die Dateien bezeichnet aus denen ein Podcast Client die Informa tionen ber Episoden bzw den Podcast selbst Name Cover Bild usw bezieht ePodder ist f r Linux entwickelt und wird deswegen auch darauf getestet Sollte es Probleme geben die nicht mit gPodder sondern mit der Verwendung von Linux zu tun haben wird der Testperson geholfen aber die Problemsituation wird vermerkt gPodder Bitte den Testpersonen folgende Informationen ber das Programm geben gPodder downloading one file 2 2 Podcasts Channel E View Help s sl Preferences Quit Podcasts Downloads 1 Status Episode Size Released 4 CRE075 Energiesparh user 82 5 MIB Yesterday Er JL CREO74 Hubschrauber 94 8 MIB Wednesday 43 12 E il MN CRE073 World of Warcraft 124 6 MiB 02 16 2008 w Chaosradio Express m CRE072 Moderne Webentwicklung 74 1 MIB 02 12 2008 Der Interview Podcast m 0 CREO71 One Laptop Per Child 64 9 MIB 02 07 2008 DK FLOSS Weekly D i CREO70 Mac OS X Anwendungsentwickl 101 3 MiB 02 03 2008 ee eelere G _CREO69 Der Mac OS X Kernel 58 2 MiB 01 30 2008 DND Swound 5Y DI e CREO6B KDE4 55 8 MiB 01 27 2008 5 We Daily Feed Video E m CREOS Microcontroller 91 6 MiB 01 23 2008 The ont news you naad m CREO66 Politik f r Anf nger 107 3 MiB 01 21 2008 m CREO S Elektrische Fahrr der 69 3 MiB
4. e Ver ffentlicht bsdtalk148 Jere bsdtalk News OpenBSD 4 3 7 2MiB 2008 03 02 Talking about the BSD family of free o bsdtalk147 Free The Feed Daily Video Podcast E s akt sl only news you need to know bsdtalk146 jame The Linux Link Tech Show Itunes F What are your favori The Linux Link Tech Show Aaa LAA Intro Some musing bsdtalk144 Dan Interview with Dan L bsdtalk143 BSD Interview with Debor bsdtalk142 Free Interview with FreeB 9 2 MIB 2008 04 14 3 5 MIB 2008 04 02 9 9 MiB 2008 03 21 10 4 MIB 2008 03 15 7 4 MiB 2008 02 29 Neue Episoden suchen bsdtalk141 PBI 4 Oo MiB 2008 02 26 Interview with PC RS 183 123 VU Usability Engineering SS2008 Gruppe 3991 Szenario B 3 abonnierte Podcasts erweiterte Ansicht des Hauptfensters eine neue Episode in The Feed Daily Video Podcast Aufgabe Endzustand VLC als Video Player eingestellt Eine heruntergeladene Video Episode Video wurde erfolgreich wiedergegeben Video Podcast hei t Nachrichten Videos Alle bereits angeh rten Episoden sind gel scht Formulierung f r die Stellen Sie VLC als Video Player ein und spielen Testperson Sie die neueste Episode von The Feed Daily Vi deo Podcast ab nachdem Sie diese herunterge laden haben Benennen Sie den Podcast The Feed Daily Video Podcast in Ihrer Liste in Nachrichten Videos um Finden Sie heraus wie viel Speicherpl
5. Privatsph re Netzkultur und Abseits der Matrix w chentlich mehr info Playlist Wir informieren als Netzmagazin zum H ren ber Netzthemen mit Schwerpunkt Datenschutz Privatsph re Open Source Bigbrother Awards e commerce e goverment e learning IT News Biometrie Softwarepatente Hard u Softwarenews Virennews Satire zum Schmunzeln ber Aktuelles uvm abseits des Mainstream urban u progressiv mit Daniela List Thomas Fassler und Manfred Krejcik Kooperation mit Freies Radio Salzkammergut Radio Fro Linz Radio Freirad Innsbruck und Radio ORANGE 94 0 Wien Es kommen Prominente zu Wort die zu aktuellen Themen Stellung nehmen Interviewpartner bei Netwatcher wiespaet Hip Hop Formation Hubsi Kramar K nstler amp Theaterschaffender Manuela Raidl Moderatorin v PulsTV amp Energy 104 2 Dr Hans Zeger Arge Daten Martin Blumenau FM4 Kpunkt sterr Rockgruppe Fred Turnheim Pr s JC uvm weitere Infos im Web unter http www netwatcher at Kontakt radio netwatcher at Used disk space 0 00 B Abbildung 27 Podcast Tooltips enthalten derzeit den ungek rzten Text der Feed Beschreibung Ke mm I mt II HIE TANA LA IO HM KI 20080229 D Kay EMA in the mix Dj Tag 2008 PAN Bi daily new episa radio netwatc d WE her radio netwatcher 87 kB Die http sendungsarchiw 094 at podcast php series 094sel4 disk usage aA Th Magazin ber Netzthemen Privatsph re Netzkultur u
6. 2008 85 11 15 98 gpodder translations rwxr xr x 1 usability usability 68 2008 05 11 15 87 gpodder update rwxr xr x 1 usability usability 304 2008 05 12 13 49 install bluetooth rwxr xr x 1 usability usability 263 2008 05 09 15 27 install vlc rwxr xr x 1 usability usability 955 2008 85 12 15 41 load testcase drwxr xr x 2 usability usability 4096 2008 05 09 15 27 misc Fw r r 1 usability usability 667 2608 05 12 15 29 README rwxr xr x 1 usability usability 154 2088 85 12 15 38 setup ipod TWXr xr xX 1 usability usability 434 2008 85 12 14 24 setup mp3 player usability usability laptop testumgebung load testcase load testcase Laden eines Usability Test Cases Bitte einen der folgenden Test Cases eingeben abc de gem usability usability laptop testumgebung load testcase a Abbildung 5 Einrichten von Test Cases ber die Testumgebungs Konsole Mit dem Kommando load testcase in der Testumgebungs Konsole wird die komplette Testumgebung auf einen vordefinierten Zustand gesetzt mit dem ein Testcase aus dem Test plan begonnen wird Will man beispielsweise den Testcase A durchf hren so ffnet man die Testumgebungs Konsole gibt das Kommando load testcase a ein schlie t die Konsole und kann danach den jeweiligen Testcase mit der Testperson durchspielen Das hat den Vor teil dass wirklich jeder Testcase mit den gleichen Voraussetzungen begonnen wird und dass Umstellungen von einem Testcase auf den n chsten wenig Z
7. 26 0515 C 20080229 Kido Soon I 224 DU C 20080229 Crazy Sonic Ai 025 OSILI Ki Select all Select none Total size 28 73 MB Abbildung 14 zuk nftig sollten alle verf gbaren Episoden angezeigt aber nur die neueste per Default ausgew hlt werden 35 183 123 VU Usability Engineering SS2008 Gruppe 3991 Hinzuf gen von Cover Bildern ber ffnen Dialog Lokale Dateien kann man beim Cover Editor momentan nur durch Drag n Drop nicht jedoch per ffnen Button hinzuf gen Hier sollte ein ffnen Button hinzugef gt werden mit dem man die gew nschte Datei auch per Datei Ausw hlen Dialog ffnen kann General Advanced Cover You can drag a cover file here Dopen Download J Go to website 2 Close ul GE e m y m I Crana ma rett Aar Kl Abbildung 16 zuk nftig soll es auch m glich sein eine Datei wie gewohnt ber einen Da Abbildung 15 aktuell kann man ein Cover ma E l tei ffnen Dialog auszuw hlen nuell nur per Drag and Drop einf gen Podcast Eigenschaften Im Kontext Men eines Podcasts sollte ein Eigenschaften Fenster aufrufbar sein das Informa tionen zu diesem wie den belegten Speicherplatz anzeigt Episoden per Drag and Drop als Dateien speichern Es sollte m glich sein Episoden per Drag and Drop in ein Verzeichnis bzw den Desktop als Audio Dateien zu speichern Episoden Men an Kontext Men angleichen D
8. Aufgabe w re gewesen den Podcast mit der URL http podcast user gpodder org files pass xml hinzuzuf gen Stattdessen versuchten die Benutzer den Podcast mit der in der Aufgabenstellung angegebenen URL hinzuzuf gen er hielten aber lediglich die Fehlermeldung dass der Podcast nicht hinzugef gt werden konnte Zumindest zwei Personen beides erfahrene Computer Benutzer hatten zumindest grunds tz lich die Idee Benutzername und Passwort per URL zu bergeben scheiterten jedoch an der korrekten Syntax Zwei der Tester versuchten weiters die URL im Browser zu ffnen Dort wurde nach der Ein gabe von Benutzername und Passwort verlangt was keine Probleme darstellte Der Browser fragte den Benutzer daraufhin ober die URL mit irgendeinem Feed Reader ffnen wolle Hier scheiterten diese Testpersonen die beide Windows Nutzer waren aber letztendlich beim Fin den von gPodder im Linux Dateisystem 24 183 123 VU Usability Engineering SS2008 Gruppe 3991 3 4 Episoden anh ren Diese Aufgaben betreffen die wahrscheinlich wichtigsten Tasks innerhalb von gPodder n m lich das ansehen bzw h ren von Episoden Da dies der allt glichen Verwendung von gPodder entspricht ist diese Funktionalit t mit acht Aufgaben im Testplan vertreten L sung der Aufgabe gel st Anzahl Anzahl der Hilfestel Selbstst ndig mit Hilfestellung der Prob lungen leme Ra ei OO o EE 0 LA NEA WIN m OO OO RE EE Ki Ee P N
9. Einheiten also Megabytes MB statt Mebibytes MiB und aktivieren Sie diese Tabelle 5 Taskgruppe D Aufgabe Behandlung von Fehlern bei Feeds deren URL sich ge ndert hat Synchronisierung mit MP3 Playern und iPods Hinzuf gen von Podcasts zu den Abonnements die passwortgesch tzt HTTP E Basic Auth sind Vorbedingung Podcasts Abonnements Episoden iPod Ansicht Hilfe Ta Einstellungen Beenden Podcasts Downloads Status Episode Gr e Ver ffentlicht bsdtalk148 bsdtalk m weier ee 7 2MiB 2008 05 02 Talking about the BSD family of free o bsdtalk147 F Za FM4 Soundpark UA 7 3 MIB 2008 04 18 Die Plattform f r sterreichische Musik bsdtalk146 9 MAMM LugRadio high quality mp3 What are your fa S il Object not found Bega Intro Some mu bsdtalk144 Interview with D 9 2 MIB 2008 04 14 3 5 MIB 2008 04 02 9 9 MIB 2008 03 21 bsdtalk143 B Interview with D bsdtalk142 F Interview with Fr em bsdtalk141 P my Neue Episoden suchen Interview with P 10 4 MiB 2008 03 15 7 4 MIB 2008 02 29 4 9 MiB 2008 02 26 Szenario E 3 abonnierte Podcasts davon einer mit feh lerhafter veralteter URL Oberfl che mit Toolbar und Episoden Beschreibungen Aufgabe Endzustand Der Podcast LugRadio zeigt wieder auf die kor rekte URL und enth lt Episoden Heruntergeladene Episoden befinden sich am virtuellen MP3 Player Der Podcast mit der Benutzerauthentifizie
10. Einstellung um Dateigr en in SI Einheiten also Megabytes MB statt Mebibytes MiB und aktivieren Sie diese Vor diesen Testcases bitte das Kommando load testcase e ausf hren 1 Die URL des Podcasts LugRadio high quality mp3 hat sich ge ndert ak tualisieren Sie die URL auf http lugradio org episodes rss 2 Laden Sie Episoden vom Podcast FM4 Soundpark herunter 3 Stellen Sie die Synchronisierung zu einem MP3 Player ein es sollen nur Episoden kopiert werden die noch nicht angeh rt wurden und kopieren Sie die heruntergeladenen Episoden auf den MP3 Player 4 F gen Sie einen Podcast hinzu der eine Benutzerauthentifizierung verlangt http gpodder org files pass xml Benutzername podcast Passwort user 5 Konfigurieren Sie ihren iPod in gPodder nur umstellen Pfad ist schon einge stellt und l schen Sie alle Podcasts von ihm die Sie bereits angeh rt ha ben 183 123 VU Usability Engineering SS2008 Gruppe 3991 1 2 Einf hrung Die folgenden Informationen erhielten die Testpersonen m ndlich von den Testleitern vor Be ginn der Tests um sie auf einen gemeinsamen Wissensstand zu bringen Hintergrund Informationen Podcasts regelm ig aktualisierte Audio Serien die sich meistens einem Thema widmen Wird ein Podcast abonniert erh lt der Benutzer automatisch neue Episoden angezeigt und kann s ch diese herunterladen und anh ren Podcasts werden meistens durch das unten dargestellte Symbol gekennzeichnet
11. N gt O O CO 00 rm LA rm ON 0 oO W W oO rm LA EN Task A2 Laden Sie die Episode CREO85 Nur Fliegen ist sch ner vom Podcast Chaos radio Express herunter Bei diesem Task gab es keine gr beren Probleme jedoch sind einige unangenehme Dinge aufgefallen Einer Testperson ist aufgefallen dass nach dem Abonnieren eines Podcasts nur die letzte Episode zum Herunterladen angezeigt wird Einer der Tester versuchte die Episode ber die Website des Podcasts herunterzuladen Dies ist wahrscheinlich auf fehlendes Verst ndnis f r die Aufgaben des Programms zur ckzuf h ren W re klar gewesen dass das Herunterladen von Episoden eine zentrale Aufgaben von gPodder ist h tte die Person wahrscheinlich nicht versucht dies selbst zu erledigen Task B1 Stellen Sie VLC als Video Player ein und spielen Sie die neueste Episode von The Feed Daily Video Podcast ab nachdem Sie diese heruntergeladen haben Hauptproblem bei diesem Task war dass es einen Men punkt als auch einen Tab Player im Einstellungs Dialog gibt welchen die meisten Testpersonen mit dem Video Player assoziiert haben Hinter diesem Men punkt verbergen sich jedoch die Einstellungen f r MP3 Player Meist wurde dann das ganze Men durchsucht und erst sp ter die richtige Video Player Ein stellung gefunden Hier trat noch ein weiteres Usability Problem auf welches sich durch die ganze Applikation zieht die verwendeten Comboboxen bleiben nur ge ffnet w hr
12. der ein zelnen Tasks n her zu bringen was auch im Echtbetrieb der Fall sein wird Bitte beachten Bei manchen Taskgruppen ist der Zusammenhang zwischen einzelnen Tasks nicht offensichtlich Hier haben wir die Tasks durchgemischt um f r die Anzahl der Testper sonen eine m glichst gute Streuung der Tasks zu erreichen um den Lerneffekt zu minimie ren Taskgruppe A Abonnieren Herunterladen und Aussehen ndern Aufgabe Abonnieren eines Podcasts per Angabe einer Web Seite Herunterladen von Episoden von neu abonnierten Pod casts und Einstellungen der Ansicht des Hauptfensters vornehmen 183 123 VU Usability Engineering SS2008 Gruppe 3991 Vorbedingung KI gPodder 0 TT 2 Esvn Podcasts Abonnements Episoden Ansicht Hilfe Podcasts Downloads bsdtalk Status Episode Gr e Ver ffentlicht Talking about the BSD family ge bsdtalk148 gen sdta Jeremy ite i AE K FM4 Soundpark News OpenBSD 4 3 Released RERE SANTE Die Plattform f r sterreichis Sg re bsdtalk147 FreeBSD Dev AAS LugRadio high guality mp3 Interview with FreeBSD Devel Secci The world s premiere Linux a bsdtalk146 James Cornell n The Linux Link Tech Show I What are your favorite BSD w The Linux Link Tech Show a d ar Ee RRE Intro Some musings on the c bsdtalk144 Dan Langille Interview with Dan Langille W bsdtalk143 BSD Hobbies Interview with Deborah Norlin bsdtalk142 FreeBSD Lea Interview
13. diesem Tab Einstellungen f r portable Ger te vornehmen kann Das Icon ist in Ordnung es schaut wie ein iPod MP3 Player aus Video Media Player Se c Movie Player x Player Abbildung 25 im Einstellungen Dialog gibt es derzeit eine doppelte Verwendung des Begriffs Player f r externe Ger te und f r Abspiel Programme Device Abbildung 26 externe Ger te sollen zur Vermeidungen von Unklarheiten zuk nftig einfach als Ger te bezeichnet werden 41 183 123 VU Usability Engineering SS2008 Gruppe 3991 Un bersichtliche Tooltips im Hauptfenster umgestalten Wenn man mit der Maus ber einen abonnierten Podcast f hrt werden Informationen zum jeweiligen Podcast und zur aktuellen Speicherbelegung angezeigt Diese sind jedoch un ber sichtlich schlecht strukturiert und k nnen bei viel Beschreibungs Text eines Podcasts den ganzen Bildschirm abdecken Die Tooltip Darstellung sollte so angepasst werden dass alles bersichtlich bleibt Weiters sollte die Anzeige von Tooltips generell deaktiviert werden w hrend ein Kontextmen ge ffnet ist da ansonsten der Tooltip unter Umst nden das Kontextmen verdeckt Der Tool tip sollte vielleicht erst nach einer gr eren Zeitspanne angezeigt werden um dieses Problem zu vermeiden Podcasts Subscriptions Episodes iPod View Help radio netwatcher http sendungsarchiv 094 at podcast php series 0 94se 14 Magazin ber Netzthemen
14. getestete Programm und dessen Umgebung Linux aber noch nicht benutzt haben Bei der Wahl der Benutzergruppen haben wir versucht Testpersonen zu finden die sich f r das Internet und f r Musik Medien interessieren damit haben wir auch eine gro e ber schneidung mit der Zielgruppe des getesteten Programms Im Unterschied zur Zielgruppe von gPodder haben die Testpersonen meist wenig Erfahrung mit der Oberfl che von Linux basierten Desktopumgebungen Dadurch haben sich einige Be nutzer von den Erwartungen her auf ein Windows hnliches Verhalten bei den verschiedens ten Funktionen eingestellt Die folgende Tabelle beschreibt jeweils drei Charakteristika der Testpersonen aufgrund wel cher wir die Testpersonen ausgew hlt haben Die Zielgruppe beinhaltet Personen die gerne Medien konsumieren mit dem Internet oder dem Computer umgehen aber auch Personen die selbst Medien erzeugen Weiters haben wir auch versucht Personen f r den Test zu ge winnen die nicht mit der Umgebung vertraut sind in der gPodder im Normalfall genutzt wird Charakteristik 1 Charakteristik 2 Charakteristik 3 Testperson K1 Benutzt iTunes f r Computer Besitzt einen Macin Podcasts Kenntnisse selbst tosh Computer beigebracht Entwickler Shuffle t glich views testen Entwicklerin Film Fan Video Clips Player T gliche Internet Probiert gerne neue Nutzung ICQ Programme H rt gerne Musik Besitzt einen iPod W rde sich gerne Nano TV S
15. nahe kommt Da das Programm haupts chlich in der Freizeit zu Hause eingesetzt wird wurde auch das Test setting an einem Platz in entspannter Umgebung gew hlt Die Utensilien und der Testrechner wurden wie folgt auf einem normalen Schreibtisch platziert von links nach rechts 1 Testplan wird vom Testleiter vorgelesen 11 183 123 VU Usability Engineering SS2008 Gruppe 3991 2 Notizblock und Kugelschreiber f r die Notizen des Testleiters 3 Testcomputer mit installierter Testumgebung Virtual Machine 4 Einf hrungs Dokument das als Hilfe dient wird zuerst vom Testleiter vorgetragen Abbildung 1 Unser Testsetting mit den n tigen Utensilien und der Usability VM am Test PC Die Dokumente Testplan und Einf hrung sind im Anhang komplett beigef gt und k nnen direkt ausgedruckt und f r weitere Testl ufe verwendet werden Virtuelle Maschine Um f r jede Testperson und jeden Test PC die gleichen Voraussetzungen und Einstellungen zu schaffen haben wir eine Virtuelle Maschine speziell f r die Zwecke dieses Usability Tests konfiguriert Wir haben dazu die Software xVM VirtualBox von Sun Microsystems in der Version 1 6 0 verwendet da dieses Programm f r alle Desktop Plattformen frei verf gbar ist 12 183 123 VU Usability Engineering SS2008 Gruppe 3991 File Machine Help CG 30 E gt 5 Details Snapshots Description New Settings Delete Start Il General Name Testumge
16. wendig sind 183 123 VU Usability Engineering SS2008 Gr te Meinungsunterschiede beim Feedback Ich w rde das Programm kaufen verwenden M stimmt nicht stimmt wenig M stimmt ziemlich BW stimmt sehr Abbildung 10 Tester w rde das Programm selbst verwen den kaufen ramm zufrieden waren und es auch selbst weiterempfehlen w rden Gruppe 3991 Die gr ten Meinungs unterschiede zwischen den einzelnen Testern gab es bei der Frage ob sie das Programm selbst verwenden bzw sogar kaufen w rden Hier teilte sich das Er gebnis in 50 positive und 50 negative Antworten Dies k nnte auf mangelndes Inter esse am Themengebiet zur ckzuf hren sein da die Tester ansonsten sehr mit dem Prog Eine andere Interpretation w re dass die Testpersonen zwar mit den verf gbaren Funktionen zufrieden waren jedoch noch weitergehende M glichkeiten vermissten Zum Kl ren dieser Frage w re eine weitere Befragung bzw Evaluierung angebracht Gr te Zustimmung bei einer Frage Ich w rde das Programm weiterempfehlen M stimmt wenig M stimmt mittelm ig M stimmt ziemlich E stimmt sehr Abbildung 11 Tester w rde Programm empfehlen 233 Die meisten Antworten mit starker Zustimmung erhielt die Frage ob die Tester das Programm weiterempfehlen w r den Hier waren sich f nf der elf Tester mit der Antwort stimmt sehr einig Diese Antworten lassen auf eine generelle Zu friedenheit der Te
17. 01 19 2008 m CREO64 Usability und Interaktionsdesign 102 2 MiB 01 17 2008 aa m _ CREO63 Die Programmiersprache C 117 7 MiB 01 17 2008 Gi Check for Updates CREO62 Monochrom 82 5 MiB 01 02 2008 183 123 VU Usability Engineering SS2008 Gruppe 3991 e linke Spalte zeigt die abonnierten Podcasts e rechte Spalte zeigt die Episoden des links ausgew hlten Podcasts e die Symbole neben den Episoden zeigen an ob diese bereits heruntergeladen angeh rt oder wieder gel scht wurden e oben Men leiste und Toolbar f r verschiedene Funktionen UM Interw 1 Open download folder Interv aos bsdt me D Interw saosr Edit bsdtalk bsdt SE GI Remove bsdtalk uaru ogeek s Science sj bsdti jew science video podc Interu 555 Weekly a bsdti Podcasts und Episoden haben ein Kontextmen ber das spezifische Funktionen erreichbar sind gPodder Preferences X s Bluetooth Support Enable Bluetooth support O Ask for device when sending Downloads S Player Bluetooth fm Always send to Nokia N800 select device File Conversion Script gt Use converter Fi encoder wrapper D Tray Icon m Extras T Advanced JE Close Einstellungen Dialog 47 183 123 VU Usability Engineering SS2008 Gruppe 3991 6 1 Fragebogen f r demographische Daten Dieser Frag
18. 3 Aktivieren Sie das Tray Icon und Benachrichtigungen und minimieren Sie gPodder in das System Tray 4 Stellen Sie die Oberfl che so ein dass keine Toolbar kein URL Feld und keine Episoden Beschreibungen angezeigt werden Vor diesen Testcases bitte das Kommando load testcase b ausf hren 1 Stellen Sie VLC als Video Player ein und spielen Sie die neueste Episode von The Feed Daily Video Podcast ab nachdem Sie diese heruntergeladen ha ben 2 Benennen Sie den Podcast The Feed Daily Video Podcast in ihrer Liste in Nachrichten Videos um 3 Finden Sie heraus wie viel Speicherplatz die heruntergeladenen Episoden von Nachrichten Video belegen 4 L schen Sie alle Episoden die Sie bereits angeh rt haben Benutzen Sie daf r die daf r vorgesehene Funktion Vor diesen Testcases bitte das Kommando load testcase c ausf hren 1 ndern Sie das Download Verzeichnis auf Desktop Podcasts in ihrem Home Verzeichnis 2 Gehen Sie zur Web Seite des Podcasts FM4 Soundpark den Sie abonniert haben und besuchen Sie danach die Web Seite der neuesten Episode die in diesem Podcast zur Verf gung steht 183 123 VU Usability Engineering SS2008 Gruppe 3991 3 Stellen Sie die Download Optionen so ein dass immer nur eine Episode her untergeladen wird und die maximale Download Geschwindigkeit 50kb s be tr gt 4 Laden Sie eine Episode vom FM4 Soundpark herunter und kopie ren speichern Sie diese Episode auf hrem Desktop als Audio Datei 5
19. Aktivieren S e d e Bluetooth Unterst tzung und kopieren Sie eine Episode auf Ihr Handy Der Bluetooth Sendevorgang wird nur simuliert aber grafisch echt darge stellt d h einfach den Testpersonen erkl ren dass der Computer davon ausgeht dass das Handy in Reichweite ist und nur das Auffinden und Benutzen der Einstel lungen und Men punkte zum Test geh rt nicht aber der Sendevorgang selbst der ja auch in der Echtsituation von bluetooth sendto bzw gnome obex send bernommen wird Damit das Fake Programm f r Bluetooth installiert wird zuerst git pull und dann install bluetooth in der Testumgebungs Konsole eingeben mind 8 komplexere Vor diesen Testcases bitte das Kommando load testcase d ausf hren 1 Ihr Freund bietet seine Lieblings Podcasts als OPML Datei unter der URL http gpodder org files freund opml an Abonnieren Sie zwei Podcasts aus dieser Liste 2 Speichern Sie ihre Podcast Liste nun als OPML Datei auf den Desktop 3 Stellen Sie die Datei flower jpg von Ihrem Desktop als Cover Bild f r einen ihrer abonnierten Podcasts ein 4 Suchen Sie nach neuen Episoden Wenn gPodder neuen Episoden findet laden Sie diese nicht herunter und verhindern Sie dass diese Episode das n chste Mal als neu angezeigt wird markieren als gel scht 5 Einstellungen Lassen Sie die Feeds alle 5 Minuten aktualisieren Wenn neue Episoden vorliegen sollen diese automatisch heruntergeladen werden 6 Finden Sie die erweiterte
20. Stand 12 Mai 2008 15 30 usability usability laptop testumgebungs E Abbildung 4 Ausgabe der Testumgebungs Konsole beim ffnen F r die Versionsverwaltung wurde git http git repo or cz verwendet Die Testumge bungs Konsole kann entweder direkt von der Testumgebung aus verwendet werden oder ber das folgende Kommando von einem Unix Rechner aus bezogen werden git clone http khan thpinfo com thp tu usability testumgebung git Dieses Repository enth lt auch alle Programmdaten und die ben tigten Tools um den jeweili gen Testcase in der Testumgebung einzurichten also Programmeinstellungen Abonnements Ordner Inhalte von iPod und MP3 Player Zus tzlich sind unterst tzende Programme wie zum Beispiel ein Simulations Programm f r Bluetooth Dateiversand integriert da wir bei den Tests keine echten Handys sondern eine Simulation verwenden 15 183 123 VU Usability Engineering SS2008 E Date Bearbeiten Ansicht Terminal Reiter usability usability laptop testumgebung LIL insgesamt 352 usabilityeusability laptop festumgebung Hilfe Gruppe 3991 T demm 2 MoR E rwxr xr x 1 usability usability 1018 2008 05 12 13 49 bluetooth sendto drwxr xr x 7 usability usability 4096 2008 05 12 15 32 cases rwxr xr x 1 usability usability 181 2088 85 89 15 27 copy flower to desktop rw r r 1 usability usability 303512 2608 85 12 15 29 demopod tar gz rwir xr x 1 usability usability 462
21. as Episoden Men des Hauptmen s sollte die gleichen Funktionen enthalten wie das Kon textmen einer Episode Dementsprechend sollten beide Men einander angeglichen bzw ei nes der beiden entfernt werden 36 183 123 VU Usability Engineering SS2008 Gruppe 3991 Konfigurations Editor vereinfachen Filter sollte in Suchen nach umbenannt werden der Variablen Typ kann ganz verschwin den der Wert sollte Ja Nein statt True False sein und statt Variable sollte Einstel lung benutzt werden und statt dem Namen der Variable eine benutzerfreundliche Beschrei bung der Einstellung Variable Type Value auto download when minimized Boolean True auto remove old episodes Boolean True auto update feeds Boolean True auto update freguency Integer 20 bittorrent dir String homef thpj lib podcasts bluetooth ask always Boolean False bluetooth ask never Boolean True bluetooth converter String home thp bin encoder wrapper bluetooth device address String 00 19 4F A5 08 89 bluetooth device name String Nokia N800 bluetooth_enabled Boolean True bluetooth_use_converter Boolean False f t Check for Updates Abbildung 17 derzeit werden rein interne Informationen wie der Name der Einstel lung und deren Datentyp angezeigt Setting Download episodes when minimized gPodder will automatically download new episodes from feeds Remove old episodes on startup If set gPodder will delete episodes tha
22. atz die heruntergeladenen Episoden von Nachrichten Videos belegen L schen Sie alle Episoden die Sie bereits ange h rt haben Benutzen Sie die daf r vorgesehe ne Funktion Tabelle 3 Taskgruppe B Taskgruppe C Downloads Dateien und Bluetooth Unterst tzung Aufgabe Download Einstellungen bearbeiten Web Seiten von Podcasts und Episoden ber das User Interface aufrufen Speichern von Episoden auf den Desktop und Benutzung der Bluetooth Unterst tzung f r Handys Vorbedingung gPodder 0 T1 2 svn Podcasts Abonnements Episoden Ansicht Hilfe ge Einstellungen Beenden Podcasts Downloads Status Episode Gr e Ver ffentlicht DD bsdtalk148 7 2 MiB 2008 05 02 PSAK oO A i C News OpenB Talking about the BSD family of free o bsdtalk147 FLOSS Weekly Ere lt SS a ne H Ti A e Every Friday we talk about Free Libre bsdtalk146 BW EMA Soundpark What are your 92MiB 2008 04 14 Die Plattform f r sterreichische Musik bsdtalk145 Asa LugRadio high quality mp3 Intro Some m Lenka on H H el The world s premiere Linux and Free bsdtalk144 3 5 MiB 2008 04 02 AT Feed Daily Video Podcast Interview with 79 MIB 2008 03 21 The only news you need to know bsdtalk143 10 4 MiB 2008 03 15 Interview with bsdtalk142 Interview with a Neue Episoden suchen bsdtalk141 7 4 MIB 2008 02 29 4 9 MiB 2008 02 26 Szenario C 5 abonnier
23. bung Usability or Testumgebung Usability OS Type Ubuntu Powered Off Base Memory 500 MB Video Memory 8MB Boot Order Floppy CD DVD ROM Hard Disk Enabled Disabled Disabled PAE NX Disabled Hard Disks IDE Primary Master Testumgebung Usability vdi Normal 4 00 GB CD DVD ROM Not mounted Floppy Not mounted Abbildung 2 Sun xVM Virtual Box Maschinenverwaltung mit konfigurierter Testum gebung Die Installation und Benutzung von VirtualBox 1 6 0 ist im Benutzerhandbuch das auf http www virtualbox org download 1 6 0 UserManual pdf verf gbar ist beschrieben Das Disk Image der Virtual Machine kann vom Projektteam bezogen werden ist komprimiert 522MB gro und beinhaltet eine Basis Installation des Betriebssystems Ubuntu Linux in der Version 8 04 19 183 123 VU Usability Engineering SS2008 Gruppe 3991 IC Testumgebung Usability Running Sun xVM VirtualBox BEE Machine Devices Help gt Anwendungen Orte System Die 20 Mai 13 44 S d Testumgebungs konsole lower jpg aP gt 1 GB 4 Left Winkey Abbildung 3 Laufende VM mit dem Desktop der Testumgebung Die Desktop Umgebung der Testumgebung wurde auf die n tigsten Programme beschr nkt um nicht von der eigentlichen Testsituation abzulenken Dazu wurde das Desktop Hintergrundbild entfernt und unn tige Programme und Funktionen entfernt bzw deaktiviert Das getestete Programm wurde jedoch ohne Ver nderungen in die Te
24. ch im Podcast Bearbeiten Dialog kann die Enter Taste nicht zum Speichern der vorgenommenen nderungen verwendet werden Dies sollte den Gewohnheiten der Benutzer entsprechend erm glicht werden 34 183 123 VU Usability Engineering SS2008 Gruppe 3991 Verbesserte Auswahl beim Herunterladen von Episoden neu abonnier ter Podcasts Nach dem Abonnieren eines Podcasts wird in der Liste der Episoden nur die neueste ange zeigt Dem Benutzer sollten hier alle verf gbaren Episoden angezeigt werden da davon aus gegangen werden kann dass dieser an mehr als nur der aktuellen interessiert ist Standard m ig kann hier nur die neueste markiert werden Der OK Button in diesem Dialog sollte in Download umbenannt werden weil der Klick auf den Button eine Aktion Download ausl st und nicht der Best tigung OK dient New episodes available Select the episodes you want to download now Episode Podcast Size Released Wl 20080229 Slack Hippy FM4 i 28 Friday af Select all Select none Total size 28 73 MB Cancel Abbildung 13 derzeit wird nach dem Abonnieren eines Podcasts nur die neueste Episode angezeigt New episodes available Select the episodes you want to download now Episode Podcast Size Released P 20080229 Slack Hippy FMAi 28 Friday 20080229 Electric Indigo La 25 Wedne C 20080229 D Kay 1 25 Monday C 20080229 Rayna Ke ama 0171 C 20080229 Miss Protexid I
25. dem vorigen Abschnitt zeigen hat das getestete Pro gramm offenbar an manchen Stellen Verbesserungsbedarf Wir werden in diesem Abschnitt auf die Ergebnisse unserer Beobachtungen die wir w hrend der User Tests machten n her eingehen und versuchen herauszufinden welche Teile des Interfaces konkret verbessert wer den k nnten Wir haben die Ergebnisse der User Tests nach Programmfunktionalit t ausgewertet Zu jeder Programmfunktionalit t gab es mehrere Tasks die unterschiedliche Aspekte sowie verschie dene Ausgangssituationen abdeckten Um die Verbindung zu den einzelnen Taskgruppen her stellen zu k nnen ist zu jedem Task seine Nummer angegeben unter der er im Abschnitt 2 2 Testszenarien nachgeschlagen werden kann 21 183 123 VU Usability Engineering SS2008 Gruppe 3991 Die Ergebnisse pro Funktionalit t werden in einer Tabelle bersichtlich dargestellt bevor diese im Detail erl utert werden Die Testperson wird wie in Tabelle 1 mit einem kurzen Code ge kennzeichnet Die n chsten beiden Spalte geben an welcher Teil der Aufgaben ohne bzw mit Hilfestellung gel st wurde In der n chsten Spalte steht die Anzahl der Probleme die beim L sen aufgetreten ist Es sei jedoch darauf hingewiesen dass auch ein Task bei dem ein PRoblem aufgetreten ist unter Umst nden noch selbst ndig gel st werden kann Die letzte Spalte gibt Auskunft ber die Anzahl der Hilfestellungen die die Testperson erhalten hat 3 3 Podcasts abonn
26. dern kann auch das URL Eingabefeld benutzen OPML Funktionen vereinfachen Derzeit bietet gPodder jeweils eine separate Funktion zum Importieren von OPML Datei aus einer lokalen Datei und von einer URL Diese beiden Funktionen sollten zu einer zusammen gelegt werden da sie f r den Benutzer einen gemeinsamen Zweck erf llen Das kann zum Beispiel durch einen Zwischendialog erfolgen der den User ausw hlen l sst ob nun eine Da tei vom Internet oder von lokalen Datentr gern ge ffnet werden soll Beim Erstellen einer OPML Datei sollte der Benutzer deutlich darauf hingewiesen werden wel che Podcasts in die OPML Datei aufgenommen wurden Zus tzlich k nnte die M glichkeit zum Ausw hlen der gew nschten Podcasts implementiert werden Zus tzliche Informationen beim L schen von Episoden Der Dialog zum L schen von Episoden sowohl lokal als auch von einem Player sollte eine M glichkeit enthalten alle bereits geh rten Episoden zu l schen ohne diese manuell ausw h len zu m ssen Derzeit wird die L schen Funktion auch dazu verwendet Episoden als nicht neu zu markie ren Da diese zus tzliche Funktion schwer zu durchschauen ist sollte daf r eine separate Funktion mit einem besseren Namen eingef hrt werden Beim L schen von Episoden von einem MP3 Player sollte ein Hinweis enthalten sein dass nur dessen Episoden und keine lokalen Dateien betroffen sind Enter Taste in Dialogen In mehreren Dialogen unter anderem au
27. e erstellten Dateien am Desktop gel scht werden und die virtuelle Maschine ordnungsgem heruntergefahren werden M gliche Beeinflussung der Ergebnisse Wir haben darauf geachtet die Beeinflussung durch externe Faktoren so gut wie m glich aus zuschlie en um wirklich die Usability des Programms testen zu k nnen und nicht die Usabili ty der Umgebung Linux Desktop zu testen da dies nicht Ziel dieses User Tests ist Trotzdem gibt es m gliche Besonderheiten die die Ergebnisse dieses Tests beeinflussen k nnten Die Funktion An Bluetooth Ger t senden wurde nur simuliert In Wirklichkeit k nnte es hier zu Problemen kommen wenn der Benutzer vorher sein Ger t erst aktivieren und sichtbar schalten muss bersetzung F r den User Test wurde die aktuelle deutsche bersetzung des Prog ramms benutzt Benutzer die das Programm in anderen Sprachen benutzen haben je nach bersetzung bei einigen Punkten weniger oder mehr Probleme wie bei anderen da die bersetzung nicht wortw rtlich sondern m glichst sinnhaft gew hlt wurde 17 183 123 VU Usability Engineering SS2008 Gruppe 3991 2 4 Durchf hrung der User Tests Grob berblick Der gesamte Ablauf des User Tests wird wie folgt gegliedert 1 2 Begr ung der Testperson Ausf llen des statistischen Fragebogens durch die Testperson Vortragen der Einf hrung durch den Testleiter Durchf hrung aller Task Gruppen nach der f r den jeweiligen Test vord
28. ebogen wurde dazu verwendet vor den User Tests allgemein Informationen ber die Tester zu ermitteln Abgefragt wurden rein demographische Daten sowie unterschieliche Aspekte der Computernutzung Pers nlichkeits Fragebogen Liebe Untersuchungsteilnehmermn lieber Untersuchungsteilnehmer Der vorliegende Fragebogen soll helfen den Zusammenhang zwischen pers nlichen Merkmalen und angenehm sowie unangenehm empfundenen Aspekten des getesteten Programms besser zu verstehen Bitte kreuzen Sie jeweils eine zutreffende Antwort zu jeder Frage an Die Daten dienen lediglich der statistischen Weiterverarbeitung und werden und nicht dauerhaft gespeichert oder an Dritte weitergegeben Demographische Daten l Alter O 16 bis 24 Jahre O 25 bis 39 Jahre O 40 bis 59 Jahre CT Ab 60 Jahre si Geschlecht O M nnlich O Weiblich 3 Bildung O Pflichtschule ohne weitere Ausbildung O Pflichtschule mit weiterer Ausbilung Lehre Fachschule O Matura Universit t 4 Bundesland Herkunft O Wien Nieder sterreich Burgenland ber sterreich Salzburg Steiermark K rnten Tirol Vorarlberg Anderes Land UI UI DUDU UU gD 48 183 123 VU Usability Engineering SS2008 Gruppe 3991 Computererfahrung 5 War der praktische Umgang mit Computern Bestandteil Ihrer schulischen beruflichen Ausbildung 0O Nein 0O am Rande O ja kam h ufiger vor O ja ein zentraler Bestandteil 6 Nutzen Sie f r Ihr Studium I hren Beruf
29. efinierten Rei henfolge die mit Latin Squares m glichst unterschiedlich gestaltet wurde Ausf llen des Fragebogens zur Programm Usability durch die Testperson Testleiter bedankt und verabschiedet sich bei der Testperson Ablauf der Durchf hrung von Task Gruppen Die konkrete Durchf hrung eines User Tests wurde folgenderma en vorgenommen Informa tionen zur Testumgebung und Vorbereitung finden Sie in Testmaterial und Einrichtung wei ter oben im Dokument Der Testleiter liest die Aufgabenstellung laut vor Etwaige Daten die der Benutzer einzugeben hat zB URLs werden dem Benutzer vor gelegt bzw diktiert Der Benutzer wird angewiesen seine Gedanken laut auszusprechen und zu begr n den aus welchem Grund er die jeweilige Aktion ausf hrt Beschriftungen des User Interface und Annahmen die der Benutzer trifft Der Testleiter dokumentiert die Vorgehensweise und die Kommentare des Benutzers wobei vorallem falsche Annahmen und Probleme Fragen notiert werden sollen Bei Fragen werden dem Benutzer Hilfestellungen gegeben die bereits in der Einf h rung zu finden waren jedoch keine Detailinformationen In Ordnung Die Podcasts werden im Hauptfenster in der linken Spalte angezeigt Nicht in Ordnung Sie m s sen jetzt auf dieses Element klicken und dann den Men punkt ausw hlen Falls der Benutzer nach ca 2 Minuten den Task noch immer nicht abgeschlossen hat wird versucht ihm Hilfestellung zu geben Diese Hilf
30. egeben werden 39 183 123 VU Usability Engineering SS2008 Gruppe 3991 Hinzuf gen von passwortgesch tzten Podcasts Podcasts die per HTTP Authentifizierung gesch tzt sind k nnen ohne Wissen der URL Syntax http username passwort server url nicht hinzugef gt werden Die sehr allgemein gehal tene Fehlermeldung stellt eine zus tzliche Barriere da Hier sollte ein Authentifizierungs Dialog eingeblendet werden der die Benutzerdaten fordert Error adding podcast The podcast could not be added Please check the spelling of the URL or try again later EP lt Productive Talk 06 Interruptions et Abbildung 23 auch bei passwort gesch tzten Webseiten wird derzeit die bliche Fehlermeldung angezeigt Enter password Username luser a Forget password immediately O Remember password until you logout O Remember forever E Abbildung 24 statt einer Fehlermeldung soll der Benutzer zur Eingabe von Benut zernamen und Passwort aufgefordert werden 40 183 123 VU Usability Engineering SS2008 Gruppe 3991 Einstellungs Dialog Player vs Ger t Im Einstellungs Dialog gibt es einen Tab der Player genannt wird Dies ist leicht zu ver wechseln mit einem Medien Player am Desktop gemeint mit Player ist eigentlich ein por tabler Player wie zB ein MP3 Player oder ein iPod Dieser Tab sollte in Ger t umbenannt werden damit dem User klar wird dass man in
31. einen Computer O ja O mein 7 Nutzen Sue au erhalb von Studium und Beruf einen Computer O ja mein 8 Was sch tzen S e wie oft haben Sie bisher selbst einen Computer benutzt egal ob gespielt oder gearbeitet O Noch oe 1 bis 3 mal 6 bis 20 mal 20 bis 30 mal ber 20 mal weit ber 50 mal da ich den Computer fast t glich beruflich nutze 0 d UU Falls Sie noch nie einen Computer benutzt haben treffen die weiteren Fragen nicht auf Sie zu H Welches Betriebssystem verwenden Sie haupts chlich O Windows O Linux 0O Mac 05 X O weibich n cht 10 Haben Sie am Computer schon einmal das Internet oder Online Dienste genutzt O ja O mein etwas hnliches bin mir nicht sicher ob es Internet war 49 183 123 VU Usability Engineering SS2008 Gruppe 3991 Falls ja 11 Wie oft nutzen ae zur Zeit das Internet oder Online Dienste L 0 UU E fast t glich ca 1 bis 2 mal pro Woche ca 1 bis 2 mal pro Monat weniger als einmal im Monat bisher insgesamt erst ca 1 bis 3 mal wei ich nicht 12 Was haben Se alles selbst an einem Computer gemacht Mehrfachnennungen berschneidungen m glich O UI UI UU UU UU adadad DUDU UU UU g Computerspiele gespielt Texte geschrieben Texte gestaltet programmiert Literaturangaben in Bibliothek gesucht B cher vorbestellt Grafik erstellt Animation produziert mit Datenbanken gearbeitet statistische Auswertungen erste
32. eit beanspruchen Vorgehensweise beim Test Vor der Durchf hrung des Usability Test wurde den Testpersonen mit dem Dokument Einf h rung das Programm erkl rt Das Dokument Einf hrung findet sich im Anhang Es folgt eine Auflistung der T tigkeiten die man mit der virtuellen Maschine bei der Durchf h rung eines User Tests als Testleiter zu erledigen hat 1 Sun xVM Virtual Machine bers Startmen starten 2 Die Virtuelle Maschine Usability Testumgebung starten 3 Login mit Benutzername usability und Passwort usable 16 183 123 VU Usability Engineering SS2008 Gruppe 3991 10 11 12 13 14 15 Doppeklick auf das Icon Testumgebungs Konsole am Desktop Eingeben von git pull danach Testumgebungs Konsole neu starten Etwaige Anweisungen zur Konfiguration der Testumgebung lesen und ausf hren Je nach der Reihenfolge der Testcases der gew hlten Tests m ssen die Testcases in der entsprechenden Reihenfolge abgearbeitet werden In der Testumgebungs Konsole load testcase X eingeben wobei X der Buchstabe f r den n chsten Testcase ist Die Testumgebungs Konsole schlie en Doppelklick auf das Icon gPodder am Desktop Durchf hrung der User Tests siehe unten Schlie en des Programms gPodder Doppelklick auf das Icon Testumgebungs Konsole am Desktop Zur ck zu Schritt 8 und Fortfahren mit dem n chsten Testcase Nach Beendigung des User Tests m ssen all
33. en Danach k nnen je nach verf gbaren Ressourcen die restlichen gefundenen Probleme beho ben werden Im Anschluss sollte anhand erneuter User Tests die Umsetzung der Verbesse rungsvorschl ge evaluiert werden Die Auswertung der Usability Frageb gen nach den User Tests zeigte dass die meisten der Tester mit dem Interface und generell der Benutzbarkeit des Programms zufrieden waren Es sollten somit keine grundlegenden nderungen an der Programmgestaltung notwendig sein 5 1 berblick ber die Verbesserungsvorschl ge Im Folgenden werden die Verbesserungsvorschl ge nach absteigender Priorit t gereiht auf gelistet um einen berblick ber die empfohlene Vorgehensweise zu geben Verbesserungsvorschlag Seite 183 123 VU Usability Engineering SS2008 Gruppe 3991 6 Anhang 1 1 Testplan Dieser Text diente als Anleitung f r die Testleiter zum Vorbereiten der Testumgebung sowie zum Durchf hren der User Tests Testplan Tasks Bitte vor dem Start die Testumgebung mit git pull auf dem aktuellsten Stand bringen dann das Terminal Fenster schlie en erneut ffnen und die Anweisungen befolgen VLC installieren etc mind 8 leichte Vor diesen Testcases bitte das Kommando load testcase a ausf hren 1 Abonnieren Sie den Podcast Chaosradio Express von der URL http chaosradio ccc de chaosradio_express html 2 Laden Sie die Episode CREO85 Nur Fliegen ist sch ner vom Podcast Chaos radio Express herunter
34. en Ich w rde das Programm an andere weiter empfehlen Bitte z hle drei Dinge auf die dir am getesteten Programm am besten gefallen haben Bitte z hle drei Dinge auf die dir am getesteten Programm nicht so gut gefallen haben Vielen Dank EI
35. end man die Maustaste ge dr ckt h lt und klappen zu wenn man sie los l sst Da dieses Verhalten ungewohnt ist traten immer wieder kleine Probleme damit auf Es wurde jedoch eher als nervig denn als ernsthaf tes Problem aufgefasst Hinweis Dies ist ein Problem des GTK Toolkits das f r die Erstel lung der Anwendung verwendet wird und ist kein gPodder spezifisches Problem 25 183 123 VU Usability Engineering SS2008 Gruppe 3991 Weiters war es f r eine Testperson schwer herauszufinden was genau mit neueste Episode gemeint ist Erst nach vergleichen der Erscheinungsdaten der Podcasts stellte sich heraus dass die Episoden nach eben diesem Wert sortiert sind Task B2 Benennen Sie den Podcast The Feed Daily Video Podcast in ihrer Liste in Nachrichten Videos um Diese Einstellung wurde von jeder Testperson sofort gefunden Dies h ngt sicher damit zu sammen dass das Umbenennen hier sehr intuitiv erfolgt Die User sind dieses Menu Handling von vielen anderen Anwendungen bereits gew hnt Aufgefallen ist hier nur dass die Enter Taste im Dialog nicht funktioniert hat Eine Testperson f hlte sich durch die Bildvorschau des Podcasts behindert Ein zum Teil auch sehr rgerliches Problem ist dass es nicht ganz klar ist wie die Einstellun gen im Dialog gespeichert werden Wenn man auf Schlie en klickt werden die nderungen bernommen nicht jedoch bei dem X Button Task B3 Finden Sie heraus wie viel S
36. endungen ber das Internet anse hen gerne Musik t glich Verwendet PCs f r Liest gerne B cher die t gliche 5 183 123 VU Usability Engineering SS2008 Gruppe 3991 Schreibarbeit in der Schule Testperson S1 Sieht sich gerne TV Studentin F hrt 1 Stunde zur Serien an Uni und will dann Podcasts anh ren Testperson S2 Geht gerne zu Kul Zeitungsleser Nutzt Internet zu tur Veranstaltungen Recherchezwecken Tabelle 1 Charakteristika der Testpersonen 2 2 Testszenarien Wir haben uns f r eine Reihe von leichten und schwierigen Testszenarien entschieden um sowohl die Benutzbarkeit f r normale T tigkeiten als auch die Benutzbarkeit f r erweitere T tigkeiten und Sonderfunktionen zu testen Die einzelnen Tasks die wir aus Erfahrung und Diskussionen mit momentanen Benutzern die ser Software herausgearbeitet haben spiegeln typische Workflows der Benutzung von gPod der wider Wir haben versucht auch auf die W nsche der Testpersonen einzugehen und so auch die Interaktion mit Handys und MP3 Playern in die Testf lle integriert Da viele der getesteten Personen auch ber das Internet mit Freunden und Bekannten kom munizieren wurde auch Wert darauf gelegt Funktionen zu testen mit denen man seine Abonnements und Episoden mit anderen teilen kann Die Tasks wurden zu Taskgruppen zusammengefasst um die teilweise aufeinander aufbauen den Tasks zusammen zu erledigen und den Testpersonen auch den Zusammenhang
37. enige Probleme Die Funktion wurde von allen Kandi daten gefunden einer versuchte jedoch direkt von der Website des Podcasts zur gesuchten Episode zu navigieren Dies erzielt zwar ebenfalls den gew nschten Aspekt der Schwierig keitsgrad h ngt jedoch vom Aufbau der Website ab Beabsichtigt war die entsprechende Funktion von gPodder dazu zu verwenden Task D1 Ihr Freund bietet seine Lieblings Podcasts als OPML Datei unter der URL http apodder org files freund opmi an Abonnieren Sie zwei Podcasts aus dieser Liste Die meisten Testpersonen hatten zumindest Schwierigkeiten beim L sen dieser Aufgabe Das Konzept von OPML Dateien war den meisten von ihnen unbekannt wodurch sich unterschied liche Herangehensweisen zeigten Einige Testpersonen versuchten die OPML Datei ber das URL Eingabefeld zum Hinzuf gen von Podcasts zu importieren Dabei wurde eine Fehlermeldung angezeigt die wiederum nur mitteilte dass der Podcast nicht importiert werden konnte Manchmal wurde versucht die URL im Browser zu ffnen Durch das nicht triviale Format der OPML Datei schlossen die Personen den Browser in diesen F llen aber wieder In einigen F llen wurde auch zuerst versucht die Podcasts ber die Funktion Podcasts von OPML Datei importieren im Men Abonnements zu importieren Erst nach einem erfolgrei chen Versuch wurde der Eintrag Podcasts von OPML Datei im Web hinzuf gen im selben Men entdeckt Task D2 Speichern Sie ih
38. estellung ist auf jeden Fall zu do kumentieren da der Task an sich als nicht abgeschlossen zu z hlen ist Nach der Beendigung einer Testgruppe A bis E wird mit dem Benutzer ber die Tasks in der jeweiligen Task Gruppe diskutiert Der Benutzer wird gefragt wie er sich 210 183 123 VU Usability Engineering SS2008 Gruppe 3991 die L sung der Tasks vorgestellt hat was ihn irritiert hat und wie zufrieden der Be nutzer bei der L sung der Tasks war 8 Falls mindestens einer der Tasks als nicht abgeschlossen gez hlt wurde wird dem Benutzer nach dem Ende des Tasks die richtige Vorgehensweise erkl rt hier sollen al le Reaktionen und Kommentare des Benutzers zB f r mich ist das unlogisch weil notiert werden Diese Vorgehensweise ist f r alle Task Gruppen durchzuf hren Davor und danach muss die Test Umgebung jeweils vorbereitet werden Genaueres dazu im Kapitel ber die Testumge bung Task spezifische Anweisungen an Testpersonen Die Task spezifischen Anweisungen an Testpersonen Einstellungen Beschreibungen des Szenarios Hilfestellungen die dem Benutzer zu geben sind finden sich im Dokument Test plan der als Anhang diesem Dokument beigef gt ist 2 5 Verarbeitung der Daten Die Ergebnis Dokumente und Protokolle der einzelnen User Tests wurden von den jeweiligen Testleitern am Ende des User Tests online in ein Tabellen Dokument auf Google Docs einget ragen und ausgewertet Die Daten aus den F
39. iell eine Nut zerin die gewohnt war auf kleinen Monitoren zu arbeiten hatte gPodder von vornherein ma ximiert Dadurch war kein Teil des Desktops sichtbar und die Aufforderung wurde als Meta pher interpretiert Ein Tester versuchte die Bilddatei direkt auf den Podcast in der Abonnement Liste zu ziehen worauf gPodder mit einer Fehlermeldung reagierte dass die Grafikdatei nicht als Podcast abonniert werden k nne Ansonsten verursachte die Aufgabe keine Probleme Task E1 Die URL des Podcasts LugRadio high quality mp3 hat sich ge ndert ak tualisieren Sie die URL auf http lugradio org episodes rss Eine Testperson hatte den richtigen Ansatz mit einem Rechtsklick auf den betroffenen Pod cast das Kontextmen zu ffnen und den Eintrag Bearbeiten zu w hlen Hier zeigte sich je doch dass der beim Hovern ber dem Podcast ge ffnete Tooltip das Kontextmen berdeck te Ein weiteres Problem war dass die Eingabetaste im Bearbeiten Dialog nicht funktionierte wenn der Benutzer den Cursor im Eingabefeld f r die Feed Adresse platziert hatte In diesem Fall musste mit der Maus auf OK geklickt oder der Button mit der Tastatur ausgel st werden Task E4 F gen Sie einen Podcast hinzu der eine Benutzerauthentifizierung ver langt http gpodder org files pass xml Benutzername podcast Passwort user Dieser Testfall wurde von keiner einzigen Testperson erfolgreich absolviert Die korrekte L sung der
40. ieren Das Abonnieren eines Podcasts bedeutet die verf gbaren Episoden angezeigt zu bekommen sowie laufend ber neu verf gbare Episoden informiert zu werden Zu dieser Funktionalit t z hlen insgesamt sieben Tasks Testperson L sung der Aufgabe gel st Anzahl Anzahl der Hilfe Selbstst ndig mit Hilfestellung der Prob stellungen m Task A1 Abonnieren Sie den Podcast Chaosradio Express von der URL http chaosradio ccc de chaosradio express htmi Das gr te Problem dieses Tasks war der Zusammenhang zwischen der angegebenen URL der Website und der dort verlinkten URL des Podcasts Dadurch haben die meisten Benutzer zuerst versucht einen Podcast mit dieser URL ber die Funktion Neuen Podcast hinzuf gen zu abonnieren Nachdem sie eine Fehlermeldung erhielten dass der angegebene Podcast nicht hinzugef gt werden konnte brauchten viele von ihnen den Hinweis dass die URL eine Website referenziert auf welcher die URL des Podcasts gefunden werden konnte Besonders unerfahrenen Benutzern war auch im Folgenden nicht klar dass Sie zum Abonnie ren eines Podcasts dessen URL kopieren und diese dann im Programm einf gen m ssen 223 183 123 VU Usability Engineering SS2008 Gruppe 3991 Task C2 Gehen Sie zur Web Seite des Podcasts FM4 Soundpark den Sie abonniert haben und besuchen Sie danach die Web Seite der neuesten Episode die in diesem Podcast zur Verf gung steht Diese Aufgabe bereitete grunds tzlich w
41. infach das Programm zu bedienen ist Ich konnte die mir gestellten Aufgaben mit dem Programm vollst ndig l sen Ich konnte die mir gestellten Aufgaben mit dem Programm rasch l sen Ich konnte die mir gestellten Aufgaben mit dem Programm effizient l sen Ich f hlte mich bei der Bedienung des Programms wohl Es war leicht zu lemen das Programm zu benutzen Das Programm gab Fehlermeldungen die mir klare Anweisungen gaben wie der Fehler behoben werden konnte Wann immer ich einen Fehler machte konnte ich leicht und schnell wieder weiterarbeiten Die Hilfestellungen die das Programm angeboten hat waren deutlich und verst ndlich 183 123 VU Usability Engineering SS2008 Gruppe 3991 stimmt mittelm ig Ich konnte leicht die Information finden die ch brauchte Die vom System angebotenen Informationen waren leicht verst ndlich Die Informationen halfen mir effektiv meine Aufgaben zu l sen Die Organisation von Information in den Anwendungsfenstern war klar Information Das Interface beschreibt nicht nur die Gegenst nde mit denen am Bildschirm interagiert wird sondern auch Eingabeger te wie Tastatur Maus Mikrofon Sprache D Das Interface des Systems war angenehm Ich habe das Interface geme benutzt Das Programm hat alle Funktionen und M glichkeiten die ich von ihm erwartete Insgesamt bin ich mit dem Programm zufrieden Ich w rde dieses Programm kaufen und verwend
42. leme Task A4 Stellen Sie die Oberfl che so ein dass keine Toolbar kein URL Feld und keine Episoden Beschreibungen angezeigt werden Diese Aufgabe wurde von allen Testpersonen ohne grobe Probleme gel st Task C1 ndern Sie das Download Verzeichnis auf Desktop Podcasts in ihrem Ho me Verzeichnis Die einzigen Probleme bei dieser Aufgabe traten bei Windows und OS X Nutzern auf die mit der GNOME Oberfl che nicht vertraut waren So schlossen sich Drop Down Men s nach ei nem Klick gleich wieder um es ge ffnet zu lassen musste die Maustaste gedr ckt bleiben Au erdem bereitete die Verzeichnisauswahl von GNOME leichte Probleme All diese Probleme liegen aber au erhalb von gPodder daher k nnen wir auch keine Verbes serungsvorschl ge geben 28 183 123 VU Usability Engineering SS2008 Gruppe 3991 Task C3 Stellen Sie die Download Optionen so ein dass immer nur eine Episode heruntergeladen wird und die maximale Download Geschwindigkeit 50kb s be tr gt Diese Aufgabe bereitete fast allen Benutzern Probleme Bis auf drei Testpersonen denen schon bei vorhergehenden Aufgaben die Einstellungsm glichkeiten im Downloads Register der Hauptoberfl che aufgefallen waren suchten alle Nutzer die Funktion im Einstellungen Dialog Dort waren die Einstellungsm glichkeiten aber nicht zu finden Task D6 Finden Sie die erweiterte Einstellung um Dateigr en in SI Einheiten al so Megabytes MB statt Mebibytes MiB und ak
43. llt mit Tabellenkalkulation gearbeitet ein Textverarbeitungsprogramm benutzt ein Programm installiert Informationen aus dem Internet geholt E Mails geschrieben empfangen Computerfax bemutzt WWW benutzt FTP bemutzt mich an einem Chat beteiligt News benutzt mit Telnet gearbeitet Podcasts heruntergeladen RSS Feeds gelesen 50 183 123 VU Usability Engineering SS2008 Gruppe 3991 6 2 Fragebogen zur Programm Evaluierung Mit diesem Fragebogen wurden nach den User Tests die subjektiven Meinungen der Tester ber das Programm eingeholt Das Interesse lag dabei vor allem auf generellen Einsch tzun gen zu verschiedenen Bewertungskriterien Usability Fragebogen Liebe Untersuchumgsteilnehmerm lieber Untersuchungsteilnehmer Der vorliegende Fragebogen gibt Ihnen die M glichkeit uns ihre Gedanken zu dem von Ihnen benutzen Programm mitzuteilen Ihre Antworten werden uns helfen das Programm zu bewerten und sinnvolle Verbesserungsvorschl ge zu machen Bitte orientieren Sie sich stark an den Aufgaben die Sie vorhin erf llen mussten um die untenstehenden Fragen zu beantworten Bitte lesen Sie jede Frage und antworten Sie dann m glichst intuitiv indem Sie ein Kreuz in der zutreffenden Spalte machen Die Bewertungsskala reicht von J stimmt nicht bis 3 stimmt sehr Wenn Sie eine Frage nicht beantworten k nnen machen Sie bitte em Kreuz im Feld Keine Angabe Sptrumt sehr Insgesamt bin ich damit zufrieden wie e
44. llt um die Aufgaben zu l sen Nach jeder Taskgruppe wurde die korrekte Vorgehensweise erl utert und mit der Testperson aufgetretene Probleme besprochen um Ver besserungsm glichkeiten zu finden Um durch den Lerneffekt w hrend der Tests die Ergebnisse der sp teren Tasks nicht zu ver f lschen wurden die Aufgaben bei den unterschiedlichen Personen in anderer Reihenfolge ausgef hrt damit wird der Lerneffekt auf alle Aufgaben gleich verteilt Die Tests zeigten folgende schwerwiegene Probleme die priorisiert behandelt werden sollten e Download Einstellungen sind schwer zu finden e Fehler beim Abonnieren von Podcasts ergeben nur wenig hilfreiche Fehlermeldungen e Uninuitives L schen von Episoden von externen Ger ten e Dialog f r erweiterte Einstellungen schreckt Benutzer ab Weiters wurden auch noch andere Aufgaben entdeckt bei deren Durchf hrung die Testperso nen Schwierigkeiten hatten Zu allen diesen Punkten wurden L sungsvorschl ge erarbeitet und Beispiel Screenshots f r unsere Vorschl ge erstellt 183 123 VU Usability Engineering 552008 Gruppe 3991 MANAGEMENT SUMMARY 2 2 1 PROBLEMSTELLUNG eege einer 4 2 METHODE en iallalaia la aa ia 5 2 1 FESE ONE Hi ee E ET HE E E 5 2 2 TESLSZENAT EE 6 2 3 Testmaterial und Einrientund nenn a nee 11 2 4 Durchf hrung der User Tests ee Renee erw 18 2 5 NEIEGKEETEN 19 2 6 Tee E 19 3 ERGEBNISSE sigitas agitated 20 3 1 Auswertung der demographischen Daten
45. ls alle Tests in einer Testumgebung mit Ubuntu Linux durchgef hrt wur den Bis auf kleine Schwierigkeiten stellte sich das aber f r die Nutzer von anderen Betriebssystemen als nicht weiter hinderlich heraus Abbildung 7 Bevorzugt verwen des Betriebssystem 20 183 123 VU Usability Engineering SS2008 Gruppe 3991 Weiters wurde erhoben welche T tigkeiten aus einer vorgegebenen Liste bereits mit einem Computer durchgef hrt wurden Dies sollte aussagekr ftigere Daten als eine reine Selbstein sch tzung liefern Aus Abbildung Abbildung 7 ist erkennbar dass sich die Computerkenntnisse der Testpersonen im allgemeinen Bereich gut verteilen aber nur vier Personen RSS Feeds gelesen bzw gar nur zwei Personen Podcasts heruntergeladen haben Der Absicht dieses Tests entsprechend han delt es sich bei den Testkandidaten also um Einsteiger in die Thematik ein Textverarb benutzt E Mails geschrieben empfangen Computerspiele gespielt Im Internet recherchiert mich an einem Chat beteiligt ein Programm installiert mit Datenbanken gearbeitet mit Tabellenkalkulation gearbeitet Grafik erstellt FTP benutzt mit Telnet gearbeitet programmiert RSS Feeds gelesen Computerfax benutzt Podcasts heruntergeladen Animation produziert m Personen FE a F Zn Ra 10 Abbildung 7 von den Testpersonen bereits am Computer durchgef hrte T tigkeiten 3 2 Auswertung der Beobachtungen Wie die subjektiven Ergebnisse aus
46. m FM4 Soundpark herunter und kopie ren speichern Sie diese Episode auf ihrem Desktop als Audio Datei Zwei Personen fiel hier wieder das bereits erw hnte Problem mit den zuklappenden Combo boxen auf Weiters wurde von einer Testperson versucht die Episode per Drag n Drop auf den Desktop zu ziehen was nicht funktionierte Ansonsten gab es bei dieser Aufgabe keine Probleme Task D4 Suchen Sie nach neuen Episoden Wenn gPodder neuen Episoden findet laden Sie diese nicht herunter und verhindern Sie dass diese Episode das n chste Mal als neu angezeigt wird markieren als gel scht Die Funktion zum Suchen von neuen Podcasts die eigentlich sehr gut sichtbar unter der Pod cast Liste zu finden ist wurde von zwei Testern im Men erwartet Eine Episode so zu markieren dass sie beim n chsten Update als nicht neu angezeigt wird kann nur durch das L schen erreicht werden auch wenn die Episode noch nicht herunterge laden wurde Dies wurde von vier Testpersonen als unintuitiv empfunden Task E2 Laden Sie Episoden vom Podcast FM4 Soundpark herunter Diese Aufgabe bereitete keinem unserer Testpersonen Probleme 3 5 Einstellungen anpassen Diese Funktionalit tsgruppe besch ftigt sich mit dem individellen Anpassen von gPodder Ob wohl das Programm so gestaltet ist dass es m glichst einfach zu verwenden ist gibt es trotz dem eine Vielzahl von Einstellungsm glichkeiten um das Programm an die eigenen Bed rf nisse anpassen zu k
47. n ber Rechtsklick erreichbar ist Task E3 Stellen Sie die Synchronisierung zu einem MP3 Player ein und kopieren Sie die heruntergeladenen Episoden auf den MP3 Player Es sollen nur Episoden kopiert werden die noch nicht angeh rt wurden Generell machte diese Aufgabe wenige Probleme Nur eine Person konnte die entsprechenden Einstellungen nicht finden da sie im Men iPod und nicht bei den restlichen Einstellungen vermutet wurden Drei Testpersonen suchten zuerst in anderen Men s bis sie die MP3 Player Synchronisation fanden Jedoch liegt hierbei nicht wirklich ein Usability Problem vor da sich diese Suchen rela tiv willk rlich gestalteten Nach mehrmaligem Nutzen von gPodder sollte dies nicht mehr pas sieren Task E5 Konfigurieren Sie ihren iPod in gPodder nur umstellen Pfad ist schon ein gestellt und l schen Sie alle Podcasts von ihm die Sie bereits angeh rt haben Die Funktion zum L schen von Episoden auf dem iPod wurde von allen Testern erfolgreich gefunden Im sich ffnenden Dialog war es f r sieben Benutzer aber nicht klar welche Episo den bereits angeh rt wurden Dazu existiert eine Spalte die angibt wie oft eine Episode be reits angeh rt wurde 3 7 Programmbewertungen Im Anschluss an die User Tests wurden die Testpersonen aufgefordert ihre Zufriedenheit mit dem getesteten Programm zu beurteilen Die im Folgenden gezeigten Diagramme stellen Um frageergebnisse dar die sowohl anhand der Relevanz de
48. nd Abseits der Matrix w chentlich mehr info Playlist EE u EH For Netzthemen mit Schwerpunkt Datenschutz Privatsph re Open Source Bigbrother Awards e commerce e govermert i e learning IT News Biometrie Softwarepatente Hard u Softwarenews Virennews Satire zum Schmunzeln ber Aktuelles uvm abseits des Mainstream urban u progressiv Gre EMA in the mix DI Tan 2008 E Abbildung 28 dieser Text sollte vom Programm ggf gek rzt und mit den anderen Informationen bersichtlicher dargestellt werden 42 183 123 VU Usability Engineering SS2008 Gruppe 3991 5 Conclusio Die generelle Usability von gPodder wurde von den Testpersonen sowohl durch subjektive Bewertung als auch durch objektive Beobachtung als positiv bewertet Trotzdem sind bei den Tests noch einige Probleme aufgetaucht von denen teilweise sogar ein Gro teil der Tester betroffen war Die Auswertungen der User Tests haben folgende besonders dringende Usability Probleme ergeben e Download Einstellungen sind schwer zu finden e Fehler beim Abonnieren von Podcasts ergeben nur wenig hilfreiche Fehlermeldungen e Uninuitives L schen von Episoden von externen Ger ten e Dialog f r erweiterte Einstellungen schreckt Benutzer ab Es wird empfohlen die oben genannten Usability Probleme auf jeden Fall noch vor Ver ffent lichung der Version 1 0 zu beheben da diese wahrscheinlich auf den Gesamteindruckt der Anwendung eine besonders hohe Auswirkung hab
49. nden Releases enthalten bleiben Mit den User Tests sollten Probleme bei der Verwendung des Programms aufgedeckt werden Die Zielgruppe von gPodder beschr nkt sich nicht auf Interessenten spezieller Medien Inhalte per Podcast wird nicht nur Musik aus verschiedensten Genres sondern auch Sprachinhalte und Videos aus unterschiedlichen Themengebieten zur Verf gung gestellt Als Testpersonen w hlten wir dennoch Personen die einen gewissen Bezug zur Materie aufweisen k nnen also gerne neue Musik entdecken das Internet oft benutzen selbst einen MP3 Player besitzen USW Die gestellten Aufgaben waren dementsprechend auf neue Benutzer ausgelegt und sollten f r diese alle relevanten Funktionen des Programms zumindest grundlegend abdecken Ziel der Tests war es also Aussagen ber die Benutzbarkeit von gPodder f r neue gr ten teils unerfahrene aber interessierte Benutzer zu treffen und Vorschl ge zur Verbesserung des aktuellen User Interfaces liefern zu k nnen 183 123 VU Usability Engineering SS2008 Gruppe 3991 2 Methode Dieser Abschnitt erkl rt wie die Ergebnisse zu Stande gekommen sind Es werden sowohl Auswahl der Testpersonen als auch die einzelnen Tests mitsamt ihrer Ausgangssituation be schrieben 2 1 Testpersonen Insgesamt haben wir 11 Personen davon 5 m nnlich und 6 weiblich getestet Wir haben uns f r Testpersonen entschieden die bereits ein wenig Erfahrung mit dem Umgang mit Computern sammeln konnten das
50. nnen Zu dieser Funktionalit t haben wir sechs Aufgaben gestellt L sung der Aufgabe gel st Anzahl Anzahl der Hilfestel Selbstst ndig mit Hilfestellung der Prob lungen 183 123 VU Usability Engineering SS2008 Gruppe 3991 Task D5 Einstellungen Lassen Sie die Feeds alle 5 Minuten aktualisieren Wenn neue Episoden vorliegen sollen diese automatisch heruntergeladen werden Der erste Teil dieser Aufgabe war f r alle Testpersonen unproblematisch Sie fanden die ent sprechende Option im Dialog Einstellungen Beim L sen der zweiten Aufgabenstellung schei terten acht der elf Testnutzer Teilweise wurde versuchten die Aufgabe durch Anhaken der Option Aktualisiere Feeds beim Starten im Einstellungen Dialog zu l sen da sie diese Funktion sonst nirgends finden konnten Die Funktion w re tats chlich unter dem Namen Neue Episoden automatisch herunterladen wenn gPodder minimiert ist im Reiter Tray Icon des Einstellungen Dialoges zu finden ge wesen Task A3 Aktivieren Sie das Tray Icon und Benachrichtigungen und minimieren Sie gPodder in das System Tray Die L sung dieser Aufgabe bereitete zwei der unerfahrenen Nutzern Probleme da sie die Beg riffe der Aufgabenstellung nicht kannten Im konkreten Fall waren die Bezeichnungen Tray Icon minimieren und System Tray unbekannt Die restlichen neun Nutzer die das Konzept von Tray Icons kannten hatten mit dieser Aufga be keine Prob
51. o kb s per episode V Enable download queue 1 downloads Abbildung 20 zuk nftig sollen diese Optionen in das Einstellungen Fenster ein geglieder werden wo sie von fast allen Testpersonen vermutet wurden 38 183 123 VU Usability Engineering SS2008 Gruppe 3991 Fehlermeldung beim Abonnieren von Podcasts ber die Podcast Website URL Wenn jemand bei der Funktion Neuen Podcast abonnieren statt der URL des RSS Atom Feeds die URL der Podcast Webseite eingibt dann wird eine allgemeine Fehlermeldung ange zeigt Hier sollte eine Meldung angezeigt werden dass der Benutzer auf die Webseite gehen muss und dort die Feed URL heraussuchen muss Falls m glich sollte die Feed URL ber die HTML Metainfos automatisch bestimmt werden Error adding podcast The podcast could not be added Please check the spelling of the URL or try again later ER Ge Productive Talk 06 Interruptions a i Abbildung 21 Schl gt das Hinzuf gen eines Podcasts fehl gibt es derzeit nur eine generische Fehlermeldung F LIENS PIESEINLGLIWIT WII LIIG NIYA ZEIG GHH Feed address needed You entered the URL of a web page gPodder needs the address of the Feed RSS Atom to subscribe to a podcast Please look at the web page for the feed URL and add it to gPodder CD Productive Talk 05 Email ERS Abbildung 22 zuk nftig sollen unterschiedliche Fehlerursachen unterschieden und aussagekr ftigere Fehlermeldungen ausg
52. peicherplatz die heruntergeladenen Episoden von Nachrichten Videos belegen Zu dieser Aufgabe fanden die Testpersonen viele verschiedene L sungen wobei jedoch nur zweimal die richtige vom Testplan intendierte verwendet wurde Vier Testpersonen versuchten die einelnen Dateigr en der Episoden die in der Liste ange zeigt werden manuell zusammenzuz hlen Eine weitere versuchte beispielsweise das Down load Verzeichnis zu ffnen um die gesuchte Information aus dem Dateimanager zu erhalten Ein Test musste bei dieser Aufgabe sogar unterbrochen werden da der Benutzer alle Episo den downloadete ca 200 Danach hat er das Programm beendet Beim Neustart wurde die Information jedoch gleich gefunden Task B4 L schen Sie alle Episoden die Sie bereits angeh rt haben Benutzen Sie daf r die daf r vorgesehene Funktion Bei diesem Task war die Aufgabe die bereits angeh rten Episoden mit der im Programm verwendeten Bezeichnung alte Episoden zu verbinden Vier Personen waren sich unklar dar ber was genau mit alten Episoden gemeint war Teil weise wurde versucht diese Information in den Men s oder Einstellungen zu finden Nach einem Hinweis gelang jedoch allen Personen die Aufgabe zu l sen Zwei Testpersonen gingen sehr pragmatisch vor und l schten h ndisch alle Episoden die sie bereits angeh rt hatten 96 183 123 VU Usability Engineering SS2008 Gruppe 3991 Task C4 Laden Sie eine Episode vo
53. r Frage als auch der erzielten Ergeb nisse ausgew hlt wurden Es wurden Fragen ausgew hlt die allein aufgrund der Thematik interessante Ergebnisse ge liefert haben Des Weiteren wurden Fragen ausgew hlt die besonders interessante Antwort Konstellation also zum Beispiel besonders gro e oder u erst kleine bereinstimmungen er geben haben 30 183 123 VU Usability Engineering SS2008 Gr te bereinstimmung des Feedbacks Gruppe 3991 Bei folgenden Fragen haben sich die Antworten der Testperson am wenigsten unterschieden Das Programm war einfach zu bedienen IM stimmt mittelm ig ES stimmt ziemlich M stimmt sehr Abbildung 8 Zufriedenheit mit dem Programm Ich habe das Interface gerne benutzt M stimmt mittelm ig M stimmt ziemlich IM stimmt sehr Abbildung 9 Bewertung des Interfaces sois Die Frage ob das Programm einfach zu bedienen war wurde von allen Testern posi tiv beantwortet Acht der elf Personen stimmten der Aussage sogar sehr zu Der Rest antwortete mit ziemlich oder mit telm ig Dies deutet darauf hin dass die generelle Be nutzerf hrung keiner weiteren grundlegen den nderungen be darf Auch die Frage ob die Tester das Interface des Programmes ge rne genutzte haben wurde so beantwortet Auch hier l sst sich ablesen dass das User Interface Konzept bereits gut optimiert ist und der zeit keine grundlegen den nderungen not
54. rageb gen wurden ebenso online gespeichert und ausgewertet Die gefundenen Usability Probleme wurden mit Hilfe der Kommentare der Testpersonen erar beitet und mit Screenshots und Vorschl gen dokumentiert 2 6 Pilottest Vor dem Start der eigentlichen User Tests wurde ein Pilottest durchgef hrt um eventuelle Probleme mit den Test Cases selbst aufzudecken welche unter Umst nden dazu gef hrt h t ten fehlerhafte Ergebnisse zu erhalten Da die Tasks bereits vor dem Pilottest von den Gruppenmitgliedern ausprobiert wurden tra ten mehr keine schwerwiegenden Fehler auf Es wurden lediglich kleine nderungen an For mulierungen zum Beispiel bei den einf hrenden Erl uterungen vorgenommen Aufgrund der postiven Ergebnisse des Pilottests konnte dieser vollst ndig in die Auswertung aufgenommen werden DR E d 183 123 VU Usability Engineering SS2008 Gruppe 3991 3 Ergebnisse In dieser Sektion werden die Ergebnisse der durchgef hrten Studie zusammengefasst Zuerst werden wir auf die Ergebnisse der Frageb gen eingehen welche die Testpersonen auszuf llen hatten Das soll einen berblick ber die Testpersonen und die subjektive Bewertung des Pro gramms geben Nach dieser Erl uterung werden dann unsere Beobachtungen w hrend der Tests beschrieben Dabei wollen wir sowohl auf gut als auch auf weniger gut gel ste Aspekte des Interface ein gehen 3 1 Auswertung der demographischen Daten Dieser Abschnitt enth lt die Auswer
55. re Podcast Liste nun als OPML Datei auf den Desktop Der L sungsansatz f r diese Aufgabe bereitete den meisten Nutzern keine Probleme Sie er kannten mehr oder weniger schnell dass diese Funktion vom Eintrag Podcasts als OPML Datei exportieren im Men Abonnements zur Verf gung gestellt wurde Jedoch stellten drei Tester die Frage welche der eigenen Podcasts in dieser Datei enthalten sein w rden Zwei Testpersonen versuchten alle Podcasts in der Podcast Liste mit der Maus auszuw hlen bevor sie auf den Men eintrag klickten eine versuchte die erstellte Datei mit einem Texteditor zu ffnen um den Dateiinhalt zu kontrollieren Ein weiteres Problem zeigte sich im Speichern Dialog Ein Benutzer klickte sofort auf den Knopf Speichern bevor er einen eigenen Dateinamen eingegeben hatte In dem Fall wurde leider keine Fehlermeldung angezeigt das Programm hat schlicht nicht reagiert Erst nach einigen Klicks begriff der Nutzer dass ein Dateiname eingegeben werden musste 23 183 123 VU Usability Engineering SS2008 Gruppe 3991 Task D3 Stellen Sie die Datei flower jpg von Ihrem Desktop als Cover Bild f r einen ihrer abonnierten Podcasts ein Bei dieser Aufgabe stellte sich das Problem dass im Dialog zum ndern des Cover Bildes kein Knopf ffnen existiert Es gibt lediglich der Text Sie k nnen ein Bild hier her ziehen um den Benuter aufzufordern ein Bild vom Desktop auf den Dialog zu ziehen Spez
56. rfnisse anpassen zu k nnen gPodder ist unter Linux verf gbar welches mit einer Vielzahl graphischer Oberfl chen genutzt werden kann Dadurch ist es ebenfalls wichtig dass sich das Programm nicht an eine be stimmte Oberfl che anpasst sondern eigene m glichst durchg ngige Strukturen verwen det Da gPodder als Open Source Software entwickelt wird flie en Verbesserungen auch bez g lich Usability von Entwicklern und interessierten Benutzern direkt in das Programm ein Zwar war ein Hauptziel bei der Entwicklung des Programmes dessen einfache Benutzung je doch wurden bisher keine Evaluierungen von konkreten Problemen durchgef hrt Da Podcasts bzw Musik ein sehr breites Publikum ansprechen sollte das Programm ohne spezielle Vorkenntnisse verwendet werden k nnen Gerade hier zeigte sich aber dass Prob leme meistens nur von Personen mit technischen Hintergrund gemeldet wurden Probleme von unerfahrenen Benutzern wurden erst gar nicht gemeldet und fanden somit weniger Be r cksichtigung Diesem Problem sollten die Usability Tests mit Personen die gPodder noch nicht verwendet haben entgegenwirken Besonders weil sich gPodder derzeit in einer Stabilisierungsphase f r die Version 1 0 befindet ist dies der ideale Zeitpunkt um Usability Verbesserungen an der Oberfl che vorzunehmen Wenn diese rechtzeitig also noch vor der Ver ffentlichung der Version 1 0 vorgenommen werden ist garantiert dass diese auch noch in den komme
57. rung erscheint in der Liste der Abonnements Die drei angeh rten Episoden vom virtuellen iPod wurden gel scht eine nicht angeh rte Epi sode ist am iPod noch vorhanden Formulierung f r die Die URL des Podcasts LugRadio hi quality Testperson mp3 hat sich ge ndert aktualisieren Sie die URL auf http lugradio org episodes rss Laden Sie Episoden vom Podcast FM4 Sound park herunter 183 123 VU Usability Engineering SS2008 Gruppe 3991 Stellen Sie die Synchronsierung zu einem MP3 Player ein es sollen nur Episoden kopiert wer den die noch nicht angeh rt wurden und kopie ren Sie die heruntergeladenen Episoden auf den MP3 Player F gen Sie einen Podcast hinzu der eine Benut zerauthentifizierung verlangt http gpodder org files pass xml Benutzername podcast Passwort user Konfigurieren Sie Ihren iPod in gPodder nur um stellen Pfad ist schon eingestellt und l schen Sie alle Podcasts von ihm die Sie bereits ange h rt haben Hilfestellung bei der Einstellung des MP3 Players weil der Verzeichnis Auswahl Dialog nicht von gPodder sondern von GUI Toolkit kommt E MP3 Player Dieses Bild wurde der Testperson vorgelegt um darauf hinzuweisen wo man den MP3 Player im Ordner Auswahl Dialog des Systems findet Tabelle 6 Taskgruppe E 2 3 Testmaterial und Einrichtung Einrichtung des Arbeitsbereichs Das Testsetting wurde so gew hlt dass es einer realen Situation m glichst
58. sfer Einstellungen Beenden Podcasts Downloads Af Podcasts vom Web importieren Ihre Podcast Liste ist leer wollen Sie eine Liste von Beispiel Podcasts sehen die Sie abonnieren k nnen nein 0 2 A Neue Episoden suchen Szenario D Keine Podcast Abonnements Verhalten so wie beim ersten Programmstart nach der Installation Zwei abonnierte Podcasts aus der OPML Datei OPML Datei auf dem Desktop vorhanden Cover Bild eines der beiden Podcasts ist die Blu me die am Desktop liegt Keine neuen Podcasts werden angezeigt Einstellungen laut Vorgabe angepasst Dateigr Ben werden in SI Einheiten angegeben Ihr Freund bietet seine Lieblings Podcasts als OPML Datei unter der URL http gpodder org files freund opml an Abonnieren Sie zwei Podcasts aus dieser Liste Speichern Sie Ihre Podcast Liste nun als OPML Datei auf den Desktop Stellen Sie die Datei flower jpg von Ihrem 183 123 VU Usability Engineering SS2008 Gruppe 3991 Desktop als Cover Bild f r einen ihrer abonnier ten Podcasts ein Suchen Sie nach neuen Episoden Wenn gPodder neue Episoden findet laden Sie diese NICHT herunter und verhindern Sie dass diese Episode das n chste Mal als neu angezeigt wird mark eren als gel scht Einstellungen Lassen Sie die Feeds alle 5 Minu ten aktualisieren Wenn neue Episoden vorlie gen sollen diese automatisch heruntergeladen werden Finden Sie die erweiterte Einstellung um Datei gr en in SI
59. stper sonen mit dem Prog ramm schlie en 183 123 VU Usability Engineering SS2008 Geringste Zustimmung bei einer Frage Ich konnte die gestellten Aufgaben vollst ndig l sen Abbildung 12 Aufgaben konnten vollst ndig gel st werden M stimmt nicht M stimmt mittelm ig M stimmt ziemlich Gruppe 3991 Die geringste Zustim mung erhielt die Aus sage dass alle gestell ten Aufgaben vom Tester erfolgreich ge l st werden konnten Diese Aussage ist in sofern nicht berra schen als dass die Aufgaben teilweise sehr herausfordernd gestellt wurden um auch m glichst viele Probleme aufzude cken Einfache Tasks die auf diese Aussage mehr positives Feedback erzeugt h tten h tten jedoch bei der Evaluie rung weniger verwertbare Daten gebracht 33 183 123 VU Usability Engineering SS2008 Gruppe 3991 4 Verbesserungsvorschl ge Pr fungen beim Hinzuf gen eines Podcasts Die Funktion Podcast hinzuf gen sollte pr fen welcher Datentyp sich sich hinter der einge gebenen URL verbirgt Bei h ufigen Fehlerquellen HTML und OPML Dateien sollten entspre chende Hinweise angezeigt werden ansonsten kann die generische Warnung beibehalten werden Falls eine OPML Datei angegeben wird sollte das Programm statt einer Fehlermeldung die richtige Aktion Anzeigen einer Auswahl Liste ausf hren Dadurch wird der Benutzer nicht gezwungen den OPML vom Web importieren Men punkt zu finden son
60. stumgebung bernom men Updates der Testumgebung W hrend des Testverlaufs mussten kleine nderungen an der virtuellen Maschine und den vorbereiteten Testf llen durchgef hrt und an alle Rechner der Testleiter verteilt werden Um diese Verteilung m glich zu machen und die einzelnen Installationen der Testumgebung durch die Updates nicht auseinander driften zu lassen haben wir bei der Verteilung der Test umgebung bereits eine Testumgebungs Konsole eingerichtet die ber ein Versionskontroll System aktualisiert werden kann Somit werden die nderungen an der Testumgebung zent ral vorgenommen und die jeweiligen Testleiter k nnen ihre Testumgebung einfach auf dem aktuellsten Stand halten 14 183 123 VU Usability Engineering SS2008 Gruppe 3991 usabilitvausability laptop testumgebung Reiter Hilfe Usability Engineering Testumgebung Mit dem Kommando git pull auf den aktuellen Stand bringen Bei der ersten Benutzung bitte umstellen 1 System gt Einstellungen gt Erscheinungsbild und dann Clearlooks 2 System gt Systemverwaltung gt Anmeldefenster gt Lokal und dann Happy Gnome In der Testumgebung install vlc eingeben damit der VLC player erscheint Bitte copy flower to desktop eingeben f r das Blumenbild am Desktop Bitte gpodder update und gpodder translations eingeben F r die erweiterten Test Cases install bluetooth setup mp3 player und setup ipod eingeben Danke Momentaner
61. t are old and played wh Update feeds periodically Enables the periodic checks for changed and updated feeds in Minutes between automatic feed updates 20 Time in minutes between automatic feed updates when Updat Download folder for BitTorrent files The folder into which torrent files will be downloaded Ihomejthp lib podcasts Ask for device when sending via bluetooth If you enable this gPodder will let you select the Bluetooth dev deg Always send to my configured Bluetooth device Yes Set this if you always want to send files to the same Bluetooth Converter application for Bluetooth files This application will he used ta convert media files for use on homejthp bin encoder wrapper EF The only news you nee Abbildung 18 zuk nftig sollten die internen Informationen durch erkl rende Texte ersetzt bzw unn tige Informationen ausgeblendet werden 37 183 123 VU Usability Engineering SS2008 Gruppe 3991 Download Einstellungen zusammenfassen Die Download Einstellungen sind im Downloads Tab im Hauptfenster und im Einstellungen Dialog verstreut Hier sollten die Einstellungen vom Hauptfenster zus tzlich in den Einstel lungs Dialog eingebaut werden A Limit rate to kb s V Limit downloads to 1 Abbildung 19 die Einstellungen f r Downloads sind derzeit unter der Anzeige der aktuellen Download Vorg nge untergebracht Bandwidth Throttling Limit download rate t
62. te Podcasts erweiterte Ansicht Download Einstellungen auf Default Werte Aufgabe Endzustand e Downloads werden in Desktop Podcasts ge speichert e Die geforderten Web Seiten wurden besucht e Download Einstellungen max 1 DL 50kb s e Eine Audio Datei von FM4 Soundpark am Desk top e Bluetooth Transfer wurde erfolgreich simuliert Formulierung f r die 1 ndern Sie das Download Verzeichnis auf Desk 183 123 VU Usability Engineering SS2008 Gruppe 3991 Testperson Aufgabe Vorbedingung Aufgabe Endzustand Formulierung f r die Testperson top Podcasts in ihrem Home Verzeichnis Gehen Sie zur Web Seite des Podcasts EMA Soundpark den Sie abonniert haben und besu chen Sie danach die Web Seite der neuesten Episode die in diesem Podcast zur Verf gung steht Stellen Sie die Download Optionen so ein dass immer nur eine Episode heruntergeladen wird und die maximale Download Geschwindigkeit 50kb s betr gt Laden Sie eine Episode von FM4 Soundpark herunter und kopieren speichern Sie diese Epi sode auf ihrem Desktop als Audio Datei Aktivieren Sie die Bluetooth Unterst tzung und kopieren Sie eine Episode auf Ihr Handy Importieren und Exportieren von Podcast Abonnements mit OPML Cover Bild f r Podcasts einstellen neue Epi soden suchen und Download verneinen erweiterte Ein stellungen vornehmen EI gPodder 0 11 2 svn Podcasts Abonnements Episoden Ansicht Hilfe gt Bu var Download Wiedergabe Tran
63. tivieren Sie diese Alle Tester konnten der Angabe entsprechend den Dialog f r die erweiterte Konfiguration ffnen dieser wirkte jedoch auf alle der Testpersonen abschreckend Nur eine Person fand nach l ngerem Suchen die richtige Einstellung und konnte sie auch andern Alle anderen hatten Probleme beim Durchsuchen der langen Liste mit Optionen F nf Perso nen fiel es schwer die Filter Funktion korrekt zu bedienen drei versuchten sogar ohne diese auszukommen Eine Testperson u erte sogar Bedenken nichts kaputt machen zu wollen 3 6 Mit externen Ger ten arbeiten gPodder bietet die M glichkeit Episoden entweder per Bluetooth oder auf angeschlossene Ge r te egal ob iPod oder normaler MP3 Player zu kopieren F r besonders schnelles Ab gleichen der lokalen Episoden und der auf dem externen Ger t steht eine Synchronisations funktion zur Verf gung Dementsprechend wurde diese Funktionalit t mit drei Tasks abge deckt L sung der Aufgabe gel st Anzahl Anzahl der Hilfestel Selbstst ndig mit Hilfestellung der Prob Det 183 123 VU Usability Engineering SS2008 Gruppe 3991 Task C5 Aktivieren Sie die Bluetooth Unterst tzung und kopieren Sie eine Episode auf Ihr Handy Auch die Bluetooth Unterst tzung von gPodder ist in Sachen Usability bereits sehr ausgereift Nur eine Testperson erw hnte beil ufig die Frage warum das Episoden Men in der Men leiste anders als das Episoden Kontext Me
64. tung der Frageb gen Zuerst werden die demographi schen Daten die im Fragebogen vor dem Testlauf erfasst wurden visualisiert Der zweite Un terabschnitt analysiert die Bewertungsb gen welche von den Benutzern am Ende der Test l ufe ausgef llt wurden Wir haben versucht eine m glichst gleichm ige Vertei lung der Testpersonen zu erreichen Diese setzten sich aus sechs weiblichen und und f nf m nnlichen Teilneh mern zusammen Deren Alter liegt im Bereich von 17 bis A 24 Jahren was einen besonders hohen Anteil der Ziel HSeten gruppe des Programms darstellt M H ufig O Zentral Abbildung 6 zeigt wie wichtig Computer in der schuli schen Ausbildung der Testpersonen war Da alle geteste ten Personen relativ jung waren waren Computer in al len F llen Bestandteil der Ausbildung Die Bedeutung der Abbildung 6 Relevanz von Compu Computer reichte von selten genutzt 4 Personen ber tern in der Ausbildung der Testper h ufig genutzt 2 Personen zu den F llen in denen sonen Computer zentraler Bestandteil der Ausbildung waren 5 Personen 2 In Abbildung 7 wird dargestellt welche die prim r genutz ten Betriebssysteme der Testpersonen waren Erwar tungsgem war der Anteil von Microsoft Windows mit 8 windows Personen sehr hoch Es gab weiterhin 2 Testpersonen die E Linux Mac OS X sowie eine Person die Linux als ihr prim res UO v A Betriebssytem nannten Diese Verteilung ist insofern sehr relevant a
65. with FreeBSD Lead bsdtalk141 PBI 4 with Kri a Neue Episoden suchen Interview with PC BSD founde Bin _ badtal lsn Tha R ult Deni 7 3 MiB 2008 04 18 9 2 MIB 2008 04 14 9 9 MiB 2008 03 21 10 4 MIB 2008 03 15 7 4 MiB 2008 02 29 4 9 MIB 2008 02 26 Szenario A 4 vorhandene Abonnements und Ul Einstellungen laut Screenshot Aufgabe Endzustand Zus tzliches Abonnement Chaosradio Express Eine heruntergeladene Episode CRE085 Tray Icon und Benachrichtigungen sind sichtbar Episoden Beschreibungen sind ausgeblendet Formulierung f r die Abonnieren Sie den Podcast Chaosradio Ex Testperson press von der URL http chaosradio ccc de chaosradio express html Laden Sie die Episode CREO85 Nur Fliegen ist sch ner vom Podcast Chaosradio Express her unter Aktivieren Sie das Tray Icon und Benachrichti gungen und minimieren Sie gPodder in das Sys tem Tray Stellen Sie die Oberfl che so ein dass keine Toolbar kein URL Feld und keine Episoden Beschreibungen angezeigt werden Tabelle 2 Taskgruppe A Taskgruppe B Video Podcasts Podcast Details und L schen Aufgabe Einstellungen f r Videos vornehmen Videos herunterla den und wiedergeben Podcasts bearbeiten und Details abfragen und L schen von bereits heruntergeladenen Episoden Vorbedingung m gPodder 0 11 2 svn Podcasts Abonnements Episoden Ansicht Hilfe ge gt Einstellungen Beenden Podcasts Downloads Status Episode Gr

User Test

Contents

Download Pdf Manuals

Related Search

Related Contents