Springe zum Inhalt

Schlagwort: Diary

[Diary Studies] UR Lab Interview – Teil #2

In Teil 2 unseres Interviews mit User Research Analystin Janine vom UR Lab in Düsseldorf schauen wir uns unter anderem an, wie der Tagesablauf eines Testers aussieht und wie die Testergebnisse aufbereitet werden.

Den ersten Teil findet ihr hier.

Wie sieht ein Tag / eine Sitzung für einen Tester aus?

Alle Tests und Studien unterscheiden sich in Dauer und Fokus. Die häufigsten Tests, die durchgeführt werden, sind die ganztägigen Playtest.

Wir begrüßen unsere Tester am Morgen. Bevor wir die Details des Tests erläutern, müssen sie jedoch eine NDA (Geheimhaltungsvereinbarung) unterzeichnen, die für die Teilnahme an einem Test obligatorisch ist. Mit der Unterzeichnung der NDA verpflichten sich die Tester, nichts über den Test und dessen Inhalt preiszugeben.

Anschließend erklären wir die Details des Tests und bringen die Tester in unser Labor. Manchmal ist nicht viel Einführung erforderlich, und die Spieler beginnen einfach mit dem Spiel. In anderen Fällen sind weitere Erläuterungen zum Test nötig. Wir stellen immer sicher, dass unsere Gäste verstehen, dass wir nicht ihre Spiele-Erfahrung oder Wissen testen. Vielmehr suchen wir nach Problemen in unseren Spielen. Deshalb ermutigen wir sie immer, ehrlich zu sein und mit uns zu sprechen, wenn sie sich über etwas nicht sicher sind.

Während eines Tests sind normalerweise zwei Beobachter anwesend. Ihre Aufgabe ist es, die Spieler zu beobachten und nach Problemen Ausschau zu halten, auf die sie eventuell stoßen.

Während ganztägiger Playtests bestellen wir normalerweise Essen und Getränke zum Mittagessen. Auf diese Weise können wir eine Pause einlegen und unsere Tester ein wenig besser kennenlernen.

Wenn die zweite Hälfte des Tests abgeschlossen ist, führen wir häufig Einzelinterviews mit jedem Tester durch, in denen wir Fragen zu den Erfahrungen stellen, die sie mit dem Spiel gemacht haben.

Wenn der Tag vorbei ist, verteilen wir normalerweise ein paar kleine Geschenke, um unseren Testern für ihre Teilnahme zu danken.

Die Atmosphäre während unserer Tests ist im Allgemeinen entspannt und wir freuen uns immer über ein paar neue Gesichter!

Gibt es verschiedene Arten von Tests? In Bezug auf die gespielte Zeit, den Inhalt, den Fokus, …

Ja, kein Test ist wie der andere! Wir passen jede Testsitzung immer an die Bedürfnisse des Entwicklerteams an, und an das, was es herausfinden möchte.

Die Dauer eines Tests ist abhängig von der Menge an Inhalten, die das Spiel bereits hat. Der Fokus ist immer unterschiedlich, je nach aktuellem Stand des Projekts und den Punkten, zu denen das Team noch unsicher ist.

Wir haben verschiedene Arten von Studien. Normalerweise verwenden wir übliche Playtests, bei denen Tester zu unserer Einrichtung kommen, um zu spielen. Zusätzlich führen wir Tagebuchstudien durch, in denen die Teilnehmer das Spiel über einen längeren Zeitraum (in der Regel 2 Wochen) von zu Hause spielen können.

Es gibt auch andere Sonderfälle. Befindet sich ein Projekt beispielsweise noch in einem sehr frühen Stadium, beginnen wir häufig mit dem Testen, wenn noch kein Spiel vorhanden ist. In diesen Fällen verwenden wir Prototypen oder Kartensortierung. Außerdem laden wir manchmal Tester zu einer Fokusgruppe ein, um verschiedene Themen wie Grafikstil oder Spieleinstellungen zu diskutieren.

Wie fasst ihr die Testergebnisse zusammen?

Innerhalb von Ubisoft müssen wir uns an drei spezifische Berichtsdokumente halten: eine grobe Zusammenfassung, einen detaillierten Anhang und eine Präsentation von einem der beauftragten User Research Analysten. Die Präsentation ermöglicht eine detaillierte Erläuterung und Diskussion der Ergebnisse direkt mit dem Entwicklungsteam.

Auf diese Weise können wir verschiedene Berichtsformate liefern, die jeweils auf bestimmte Jobfamilien zugeschnitten sind.

Die Berichtsdokumente sind standardisiert, um sicherzustellen, dass Entwicklerteams vergleichbare Ergebnisse erzielen, auch wenn sie Tests mit verschiedenen UR Labs durchführen.

Wie eng ist euer Kontakt zum jeweiligen Entwicklerteam?

Normalerweise passen wir uns an die Bedürfnisse des jeweiligen Teams an. Jedes Team hat eine andere Arbeitsphilosophie und wir arbeiten und ändern unser Verhalten immer danach.

Wir stehen unseren Entwicklerteams bei auftretenden Fragen oder wenn sie eine weitere Studie planen möchten jederzeit zur Verfügung. Unsere Teams wissen, dass frühzeitiges Testen Zeit und Geld spart. Aus diesem Grund empfehlen wir den Entwicklerteams nach einem Test immer, Folgetests durchzuführen. Die Teams senden uns regelmäßig aktualisierte Spielversionen und bitten um zusätzliches Feedback. Die Meinungen der Spieler sind ihnen sehr wichtig, weshalb sie uns regelmäßig kontaktieren.

Von unserem Communitymitglied IppuSenshu haben wir noch zwei weitere Fragen erhalten, die wir ebenfalls an Janine weitergeleitet haben:

Wie viele UR Labs habt ihr den insgesamt? Und wann wurde dort der erste Tests gemacht?

Anmelden kann man sich bei weltweit 16 UR Labs, die über 10 Länder verteilt sind. Wir haben aber auch noch ein paar kleinere Labs, die das anders handhaben.
Das UR Lab in Düsseldorf gibt es seit knapp 10 Jahren.

2 Kommentare

[Diary Studies] UR Lab Interview – Teil #1

Mit all den News rund um die Diary Study dachten wir uns, das wäre eine gute Gelegenheit, euch mit ein paar weiteren Infos rund um das Thema Playtests und User Research Studies (Nutzerstudien) zu versorgen: Was genau ist ein User Research Lab und wie arbeitet es? Welche Arten von Playtests werden dort organisiert und wie werden dann die gesammelten Daten genutzt?

Dazu haben wir uns mit User Research Analystin Janine aus dem UR Lab in Düsseldorf zusammengesetzt, um Antworten auf diese Fragen zu bekommen.

Was genau ist das User Research Lab?

Das UR Lab führt regelmäßig Playtests und Studien für unsere Projekte durch und ist dabei oft der erste Kontaktpunkt zwischen Spielern und einem neuen Spiel. Wir kombinieren high-tech mit gesundem Menschenverstand auf eine Weise, die es den Entwicklerteams erleichtert, die Benutzerfreundlichkeit und generell die Spielerfahrung ihrer Spiele während allen Phasen der Entwicklung zu verbessern.

Wo genau liegt das UR Lab?

Wir befinden uns direkt im Ubisoft Düsseldorf Studio, wo wir unseren Entwicklern ein modernes Test-Setup (Eye-Tracking, moderne PCs etc) anbieten, das nach aktuellen wissenschaftlichen Erkenntnissen aufgebaut ist. Wir geben unser Bestes, unsere Tester willkommen zu heißen und dafür zu sorgen, dass sie sich in unserem Test-Labor wohl fühlen.

Gibt es mehrere User Research Labs? Wenn ja, haben sie unterschiedliche Aufgaben oder Foki?

Ja, wir haben weltweit mehrere Ubisoft UR Labs. Alle Teams konzentrieren sich auf das Verbessern der Benutzerfreundlichkeit und insgesamten Spielerfahrung für unsere Spiele. Jedes Lab hat andere Kompetenzen, oft ausgelegt auf die Projekte, an denen sie arbeiten. Alle Labs stehen miteinander in engem Kontakt um von den Ergebnissen und Methoden der anderen zu profitieren und generell ihre professionellen Fähigkeiten zu erweitern.

Passieren diese Forschungs-Studien nur vor dem Release eines Spiels oder auch danach?

Wir machen beides. Nutzerforschung und Benutzerfreundlichkeitstests sollten stets so früh wie möglich starten, um Probleme schon während den frühen Phasen der Entwicklung zu entdecken. Das hilft auch den Entwicklerteams, die so während der Entwicklung des Spiels ihre Zielgruppe schon viel besser kennen lernen.

Gleichzeitig hört die Nutzerforschung aber nicht mit dem Release eines Spiels auf – es gibt immer weiteren Raum für Verbesserungen. So werden wir beispielsweise auch dann aktiv, wenn ein DLC oder anderer neuer Content entwickelt wird, um so das gleiche Qualitätslevel zu gewährleisten.

Analysiert ihr auch Spielerdaten, die von unseren veröffentlichten Spielen gesammelt werden, oder veranstaltet ihr ausschließlich Playtests direkt bei euch?

Zu den Aufgaben des UR Lab gehören auch Game Analytics (Analyse von Spiel-Daten) und wir arbeiten eng mit unseren Daten-Analysten zusammen. Sie analysieren die Daten unserer Live-Games und unterstützen die Entwicklerteams mit ihren Ergebnissen. Normalerweise sind sie für quantitative Daten zuständig, während wir die Teams mit qualitativen Einblicken versorgen.

Gemeinsam können  wir unsere Dev-Teams so mit den umfangreichen Informationen versorgen, die sie zum jeweiligen Zeitpunkt benötigen, um bestimmte Entscheidungen zu treffen.

Wie kann ich an einer solchen Studie teilnehmen? Ladet ihr nur Leute ein, die in direkter Nähe wohnen?

Wenn ihr Interesse daran habt, eingeladen zu werden, müsst ihr euch unter https://playtest.ubisoft.com/bluebyte/de-DE/ registrieren. Dort könnt ihr auch das UR Lab auswählen, das euch am nächsten ist. Denn beachtet, dass ihr persönlich zum Studio gehen müsst, um an einem Test teilzunehmen.

Wenn ein Spieler-Test geplant ist, erhältst du eine erste E-Mail von uns. Diese leitet euch zu einer Umfrage weiter, die ihr ausfüllen musst, um euch für die jeweilige Studie zu bewerben. In dieser Umfrage stellen wir euch ein paar Fragen zu euren Spielgewohnheiten, zum Beispiel wie viel ihr spielt oder was eure Lieblingsspiele sind.

Nach dieser Umfrage analysieren wir eure Antworten und wählen dann die Kandidaten aus, die am besten die jeweilige Zielgruppe treffen. Manchmal suchen wir speziell nach Leuten, die eine Menge Zeit in einem bestimmten Spiel verbracht haben und manchmal suchen wir nach dem genauen Gegenteil.  Also keine Sorge, wenn ihr kein „Hardcore-Gamer“ seid.

Sobald ihr ausgewählt seid, erhaltet ihr noch eine finale Einladungsemail von uns und wir freuen uns darauf, euch schon bald im Studio willkommen zu heißen.

Wir laden dabei auch nicht nur Leute aus der direkten Umgebung ein. Wir laden grundsätzlich jede/n ein, die/der sich beworben hat und bereit ist, zu uns zu kommen. Manchmal haben wir Tester, die stundenlange Reisen auf sich genommen haben, nur um uns zu besuchen, was dann immer eine große Ehre ist.

Das war der erste Teil des Interviews. In Teil 2 reden wir nächste über den typischen Tagesablauf für einen Tester sowie auf welche Weise die Ergebnisse zusammengefasst und aufbereitet werden.

6 Kommentare

[Diary Studies] FAQ – Mehr zum Test und Datum

Nachdem wir in der vergangenen Woche die Tagebuchstudie angekündigt haben, haben wir nicht nur äußerst positives Feedback von euch bekommen sondern auch ein paar weitere Fragen.

Nicht alle davon wurden bereits durch unser erstes FAQ abgedeckt, daher haben wir eine Übersicht mit weiteren Informationen zusammengestellt, um eure Fragen zu beantworten und euch ein paar zusätzliche Details zu geben.

 

Wenn ihr noch weitere Fragen habt, schreibt sie gerne in die Kommentare unterhalb des Artikels.

Ich habe noch keine Antwort auf meine Bewerbung erhalten. Wie weiß ich, ob ich ausgewählt wurde?

Aufgrund der Vielzahl an Bewerbern können wir leider nicht auf jede einzelne E-Mail antworten. Jeder, der für diesen Playtest ausgewählt wird, bekommt stattdessen eine separate Einladung via E-Mail.
Wenn ihr bis zum 25. November keine derartige Einladung erhalten habt, haben wir euch nicht für diesen Playtest ausgewählt.

Wird es in Zukunft noch weitere Playtests geben?

Ja, wir planen weitere Playtests mit unterschiedlichen Zielen und Umfang fürs nächste Jahr.

Benötige ich eine permanente Internetverbindung um an der Tagebuchstudie teilzunehmen?

Um das Spiel via Uplay PC herunterzuladen und zu spielen wird eine konstante Internetverbindung benötigt.

Könnt ihr etwas zum konkreten Zeitraum des Playtests sagen, damit ich bereits vorplanen kann?

Aktuell ist die Tagebuchstudie für den Zeitraum vom 2. Dezember bis 8. Dezember geplant. Die mindest-Spielzeit pro Tag beträgt 1 Stunde, ihr könnt euch aber frei einteilen, wann am Tag ihr diese Stunde spielt.

Könnt ihr noch ein paar weitere Details zum Test mit uns teilen?

Nachdem wir bereits ein paar Tests über unser User Research Lab organisiert haben, wollten wir außerdem unsere loyalsten Fans von unserer Community-Plattform „Die Siedler Allianz“ involvieren.
Unser Ziel ist es, mehr Feedback zum Spieleinstieg zu erhalten – wie einfach man in das Spiel findet – sowie eure Meinung zur Benutzeroberfläche und eurer Interaktion mit der Spielwelt ansich.

Könnt ihr Details zu den Systemanforderungen nennen?

Wir können keine spezifischen Details mit euch teilen, aber wir empfehlen, Windows 10 mit den aktuellsten Updates zu verwenden. Das Spiel ist nicht mit MacOS oder Linux kompatibel.

Bis zu welchem Datum kann ich mich für die Tagebuchstudie bewerben?

Die Bewerbungsfrist geht bis zum 24. November um 23:59 Uhr. Bewerbungen, die wir nach diesem Datum erhalten, werden nicht berücksichtigt.

In welcher Sprache muss ich meine täglichen Feedback-Reports schreiben?

Während die Version des Spiels für den Playtest nur in Englisch verfügbar ist, könnt ihr euren täglichen Reports (das Tagebuch) auf entweder Englisch oder Deutsch schreiben. Wenn ihr euer Feedback in keiner der genannten Sprachen geben könnt, können wir euch leider nicht für diesen Playtest in Betracht ziehen.

49 Kommentare