UX evaluation

Im August 2024 testete Tabiya die Benutzererfahrung von Kompass mit Arbeitssuchenden, die vom Harambee Youth Employment Accelerator rekrutiert wurden.

Hintergrund und Motivation

Tabiya führte in Zusammenarbeit mit Harambee Youth Employment Accelerator eine dreitägige Reihe von User-Experience-(UX-)Tests durch, die darauf ausgelegt waren, die folgenden Fragen zu beantworten:

1. Können Teilnehmende ein natürliches Gespräch mit Compass beginnen und aufrechterhalten?

2. Leitet Compass die Nutzer effektiv durch den Prozess der Kompetenzidentifikation?

3. Finden Nutzer die von Compass identifizierten Fähigkeiten relevant und genau?

4. Sind die Teilnehmenden mit der Gesamterfahrung zufrieden und haben sie das Gefühl, ein klareres Verständnis ihrer Fähigkeiten zu haben?

Im südafrikanischen Fall sind die vorgesehenen Nutzer von Compass die Jugendlichen des Landes, die mit hohen und steigenden Abkopplungsraten vom Arbeitsmarkt, der Bildung und der Ausbildung konfrontiert sind. Dies ist teilweise zurückzuführen auf Verzerrungen bei der Jobsuche. Das heißt, Arbeitssuchende können unvollständige Informationen über ihre Fähigkeiten haben. Das bedeutet, dass sich Arbeitssuchende auf Stellen bewerben könnten, für die sie ungeeignet sind, oder die Suche ganz aufgeben. Compass wurde entwickelt, um diese besondere Suchverzerrung zu mildern, die zu den Treibern der Arbeitslosigkeit beiträgt, insbesondere unter Jugendlichen.

Methodik

Südafrikanische Jugendliche (zwischen 18 und 35 Jahren), die im SA Youth Mobi Platform von Harambee registriert sind, wurden mit einer Anzeige auf eine Teilnahme an einer UX-Testsession hingewiesen, die in den Harambee-Büros in Kapstadt stattfand. Bei der Einsendung wurden 604 als am besten mit den Auswahlkriterien kompatibel erachtet. Dieses Kriterium umfasst die folgenden Punkte:

1. Die junge Person ist beim SA Youth Mobi Platform angemeldet

2. Die junge Person wohnt normalerweise höchstens etwa 15 Kilometer vom Harambee-Büro in Kapstadt entfernt

3. Die junge Person hat bereits Arbeitserfahrung

4. Die junge Person sucht aktiv nach Arbeit

Ausgehend von diesem Kriterium wurden in der endgültigen Auswahl der UX-Testteilnehmenden schwarze Frauen und Teilnehmende bevorzugt, die Anzeichen dafür hatten, ein eigenes kleines Unternehmen gegründet zu haben.

Bevor die UX-Testsession beginnt, erhält jede Teilnehmerin/jeder Teilnehmer ein Zustimmungsformular zum Lesen und Unterschreiben. Gegebenenfalls wurden Teilnehmende gebeten, ein Einverständnisformular für Fotografie zu unterschreiben, wenn sie sich damit wohlfühlten. Anschließend bestand jeder UX-Test aus vier Teilen. Der erste Teil bestand aus einer Einführung und der Bitte an die Teilnehmerin/den Teilnehmer um Erlaubnis, die Sitzung aufzuzeichnen. Dieser Teil der UX-Testsession diente auch dazu, dem Teilnehmenden zu erklären, was Compass ist und wie es funktioniert.

Der zweite Teil bestand aus dem Beginn des UX-Tests. Während dieses Teils interagierte jede Teilnehmerin/jeder Teilnehmer so unabhängig wie möglich mit Compass, bis ihre Erfahrungen und Fähigkeiten zusammengefasst wurden oder bis der Moderator aufgrund einer Zeitbegrenzung anzeigte, dass sie die Interaktion mit Compass beenden sollten. Der UX-Test beinhaltete, dass Compass Informationen von Teilnehmenden zu ihren Arbeitserfahrungen sammelte, einschließlich bezahlter und unbezahlter Arbeit in Einrichtungen oder außerhalb von Einrichtungen. Dies wird im gesamten Bericht als Abschnitt zur Arbeitserfahrung bezeichnet. Anschließend erzeugte Compass eine Erlebniszusammenfassung, die die Erfahrungen, Orte und Zeiträume der Teilnehmenden chronologisch auflistete. Als Nächstes erfragte Compass in einem interaktiven Dialog, welche Fähigkeiten die Teilnehmenden aus jeder Arbeitserfahrung erworben hatten. Bis zu fünf Fähigkeiten pro Erfahrung wurden am Ende des Dialogs aufgelistet. Dies wird im gesamten Bericht als Abschnitt zur Zuordnung von Fähigkeiten bezeichnet.

Im dritten Teil der Sitzung stellte der Moderator der Teilnehmerin/dem Teilnehmer eine Reihe von Fragen zum Feedback nach dem Test. Abschließend beendete der Moderator die Sitzung, indem er jeder Teilnehmerin/jedem Teilnehmer den Zeitrahmen mitteilte, in dem sie ihre monetäre Entschädigung (von R450) für die Teilnahme am UX-Test erwarten konnten. Der Abschluss diente auch dazu, die Teilnehmenden zu fragen, ob sie damit einverstanden seien, in eine Harambee-WhatsApp-Gruppe für ein Expertengremium aufgenommen zu werden, das periodisch eingeladen wird, an von Harambee für seine Jugend-Datenbank organisierten Sitzungen teilzunehmen. Alle vier Teile waren auf 45 Minuten angesetzt, konnten aber bis zu einer Stunde dauern. Zusätzlich zu den R450 erhielt jede Teilnehmerin/jeder Teilnehmer vor jedem UX-Test ein Snackpaket. Dies geschieht, um sicherzustellen, dass Teilnehmende etwas zu essen haben, bevor sie mit ihren UX-Tests beginnen. Der vollständige Diskussionsleitfaden für jeden UX-Test ist zu finden hier.

Compass wurde so gestaltet, dass es Informationen konversationell von seinen Nutzern extrahiert. Daher funktioniert Compass ähnlich wie eine Messaging-Anwendung. Compass fragt seine Nutzer textuell nach Informationen zu ihren Erfahrungen und ermöglicht es den Nutzern zu antworten, bevor es schließt oder nach weiteren Informationen fragt. Da diese Übung ähnlich abläuft wie eine Interaktion, bei der jemand über Textnachrichten auf seinem Smartphone kommuniziert, wurde der UX-Test auf einem Mobiltelefon durchgeführt. Für erhöhte Zugänglichkeit und Benutzerfreundlichkeit wurde das Samsung Galaxy A23 gewählt, da dies das am weitesten verbreitete Smartphone unter den Jugendlichen in Harambees Datenbank ist.

Ergebnisse

1. Demografie

Eine Gruppe von 11 beim SA Youth registrierten Jugendlichen wurde ausgewählt, um die Funktionalität von Compass zu testen. Drei dieser Teilnehmenden testeten Compass am 27. August. Zwei waren männlich und eine weiblich. Vier waren für den 28. geplant, aber an diesem Tag gab es eine Ausfallrate von 50 %. Ein Mann und eine Frau erschienen; die beiden Abwesenden waren männlich. Der 29. August war der letzte Testtag. Vier Teilnehmende, drei weiblich und ein männlich, testeten jeweils Compass. Somit nahmen 82 % (9 Personen) der ausgewählten Kohorte von 11 Personen an den UX-Tests teil. 44 % der UX-Testteilnehmenden waren männlich und 66 % weiblich.

1. Dauer

Bei den neun Jugendlichen, die Compass testeten, bildeten sich zwei Gruppen. Gruppe 1 bestand aus drei Teilnehmenden, die eine Zusammenfassung der Arbeitserfahrung, jedoch keine Zusammenfassung der Fähigkeiten erhielten. Gruppe 2 umfasste sechs Teilnehmende, die sowohl eine Zusammenfassung der Arbeitserfahrung als auch der Fähigkeiten erhielten. Gruppe 1 benötigte im Durchschnitt 32 Minuten, um die gesamte UX-Testsession abzuschließen. Gruppe 2 benötigte im Durchschnitt 32 Minuten und 30 Sekunden. Übersichten jeder UX-Testsession, einschließlich Details zu den Zeitangaben jeder Sitzung, sind zu finden hier.

Die vollständige Compass-Erfahrung wurde nur einmal ohne Unterbrechung abgeschlossen. Dies wurde von Teilnehmer 9 durchgeführt, der nur eine Erfahrung und somit nur einen Satz von Fähigkeiten hatte. Daher war die ursprünglich prognostizierte Zeit von 45 Minuten zur Vervollständigung der gesamten UX-Testsession eine Unterschätzung. Stattdessen beendeten alle Teilnehmenden die Sitzung innerhalb von 45 Minuten nur deshalb, weil der Moderator die Teilnehmenden in den Sitzungen vorzeitig anwies, ihre Interaktionen mit Compass zu beenden. Da die Teilnehmenden für ihre Zeit bezahlt wurden, hätte ein Unterlassen dieser Maßnahme gegen Arbeitsgesetze verstoßen.

1. Teilnehmerfeedback

Die Teilnehmenden reagierten äußerst positiv auf Compass. 88,9 % der Teilnehmenden gaben an, dass sie Compass als einfach zu bedienen empfanden und seine Antworten verstanden. Dieses Feedback deutet darauf hin, dass Compass es dieser Gruppe von UX-Testern erlaubte, ein natürliches Gespräch zu initiieren und aufrechtzuerhalten. Tatsächlich waren die Teilnehmenden besonders beeindruckt davon, dass sie Gespräche mit Compass „als ob es ein Mensch wäre“ führen konnten. Dies unterstützte ihre Fähigkeit, ihre Arbeits- und Fähigkeitsdokumentation eigenständig abzuschließen. 77,8 % der Teilnehmenden fanden, dass Compass genaue und relevante Fähigkeiten identifizierte, ohne irrelevante Fähigkeiten auszulassen. 88,9 % der Teilnehmenden sagten, dass Compass ihnen half, ein besseres Verständnis ihrer Erfahrungen und Fähigkeiten zu gewinnen, insbesondere wegen der einfachen Darstellung in ihren Zusammenfassungen.

Alle Teilnehmenden begrüßten die Aussicht, dass Compass ihnen aufgrund ihrer Erfahrungen Stellen und Sektoren vorschlagen könnte, auf die sie sich bewerben können. Zusätzliches Feedback beinhaltete, persönliche Eigenschaften und Charakterzüge in die Compass-Fähigkeitszusammenfassungen aufzunehmen und Qualifikationen in den Compass-Lebenslauf einzubeziehen. 100 % der Teilnehmenden, die den UX-Test abgeschlossen hatten, gaben an, Compass anderen Arbeitssuchenden empfehlen zu wollen. All dies zusammengenommen ist ein starkes Indiz für die Hypothese, dass die Teilnehmenden mit ihrer Gesamterfahrung mit Compass zufrieden sind.

1. Positive Beobachtungen

Vorhersehbarkeit. Im Laufe der Zeit begannen die Teilnehmenden, den Fragenfluss von Compass für jede Erfahrung vorherzusehen. Dies führte zu schnelleren Antworten, da die Teilnehmenden Antworten auf zwei separate Fragen kombinieren konnten, die sie schließlich wussten, dass Compass stellen würde (zum Beispiel, was die Erfahrung war und wo sie stattfand), ohne dazu aufgefordert zu werden.

Beharrlichkeit. Die Beharrlichkeit von Compass, insbesondere in der unbezahlten Wirtschaft, ist eine Stärke. Compass stellt den Teilnehmenden eine Reihe von Leitfragen, um ihre Erfahrung zunächst in der sichtbaren oder unsichtbaren Wirtschaft zu charakterisieren. Nachdem eine Erfahrung von einer Teilnehmerin/einem Teilnehmer eingegeben wurde, wiederholt Compass die bereits beantwortete Frage, bevor es zur nächsten Kategorie der Arbeitserfahrung übergeht. Diese Wiederholung der Fragen ermöglicht es den Teilnehmenden, all ihre Arbeitserfahrungen (und damit ihre zugehörigen Fähigkeiten) sowohl in der sichtbaren als auch in der unsichtbaren Wirtschaft anzugeben, was für die unsichtbare Wirtschaft besonders wichtig ist.

Agilität. Während der Nutzerreisen der Teilnehmenden konnte Compass das Gespräch effektiv wieder auf das Thema lenken, wenn Teilnehmende Fragen missverstanden. Ebenso konnte Compass durch die meisten Grammatik- und Rechtschreibfehler navigieren, die jeder Teilnehmende mindestens einmal machte. Der einzige Rechtschreibfehler, den Compass nicht automatisch korrigierte, war „Checkers“, das von Teilnehmer 4 irrtümlich als „Checker“ geschrieben wurde. Dieser Rechtschreibfehler blieb bestehen, bis die Erlebniszusammenfassung dem Nutzer präsentiert wurde. Ungeachtet dessen haben die Teilnehmenden mehrere Gelegenheiten, Rechtschreibfehler während ihrer Compass-Nutzerreise zu korrigieren.

Ein weiteres Beispiel für die Agilität von Compass ist der Fall von Teilnehmer 6, der fälschlicherweise eine Freiwilligenrolle als bezahlte Tätigkeit angab. Als die Teilnehmerin auf die Frage antwortete, ob sie für ein Unternehmen oder ein Geschäft gegen Bezahlung gearbeitet habe, identifizierte Compass Schlüsselwörter, einschließlich „volunteer“ (Freiwilliger), in ihrer Antwort und ging dann der Frage nach, ob ihre angegebene Erfahrung tatsächlich bezahlt oder unbezahlt war. Nachdem festgestellt wurde, dass es sich um eine unbezahlte Tätigkeit handelte, konnte Compass diese Rolle korrekt klassifizieren und sie korrekt in die Arbeitserfahrungszusammenfassung von Teilnehmer 6 aufnehmen.

1. Erwägungen

Missverständnisse. Obwohl Compass in dieser Kohorte objektiv gute Ergebnisse erzielt hat, wäre es verfehlt, Aspekte zu verschweigen, die bei einer Einführung an größere Zielgruppen zu bedenken sind. Die erste Erwägung ist der Effekt von Sprachbarrieren. Compass erfordert eine mittlere Englischkenntnis. Im Fall der südafrikanischen Jugendlichen ist Englisch wahrscheinlich nicht die Muttersprache der durchschnittlichen potenziellen Compass-Nutzer.

Jede Teilnehmerin/jeder Teilnehmer in der Tabiya-Harambee-UX-Testsession verfügte über ein durchschnittlich ausreichendes Kenntnisniveau, um den UX-Test und den anschließenden Fragebogen zu bestehen. Es gab jedoch Momente, wie im UX-Test von Teilnehmer 4, in denen Moderator und Teilnehmer in der Muttersprache der Teilnehmerin/des Teilnehmers miteinander sprachen, wenn die Teilnehmerin/der Teilnehmer Fragen stellte oder wenn der Moderator erklärte, was Compass ist. Darüber hinaus war klar, dass Compass einige Fragen stellte, die bei Teilnehmenden Verwirrung, Missverständnisse oder Zögern hervorriefen. Einige Beispiele sind:

1. „Können Sie mir von der ersten Erfahrung erzählen, die Sie als Selbstständige/r gemacht haben?“ Auf diese Frage beschrieb Teilnehmer 1 die Unabhängigkeit und Erfüllung, die er aus dieser Erfahrung zog, anstatt die Erfahrung selbst zu beschreiben. Compass lenkte das Gespräch um, indem es den Teilnehmer anschließend fragte, welche Art von Arbeit er ausgeübt habe.

2. „...wie sah ein typischer Arbeitstag aus“ ist die von Compass verwendete Formulierung, um Informationen darüber zu beginnen, welche Fähigkeiten Teilnehmende aus ihren verschiedenen Arbeitserfahrungen gewonnen haben. Teilnehmer 1 gab Informationen zur Atmosphäre oder zu äußeren Ereignissen eines typischen Tages an, statt zu den Aufgaben, die er an einem typischen Tag erledigte. Compass lenkte das Gespräch um, indem es fragte, welche Aufgaben die Teilnehmenden hatten.

3. Als Compass Teilnehmer 5 bat, „erzählen Sie mir, wie Ihre Erfahrung war“, antwortete der Teilnehmer: „Es war eine gute Erfahrung, freiwillig zu helfen“, anstatt ins Detail zu gehen, welche Aufgaben die Erfahrung beinhaltete.

Die Fähigkeit von Compass, Schlussfolgerungen zu ziehen und Gespräche trotz Fehlinterpretationen umzulenken, ist in dieser Hinsicht eine auffällige Stärke. Da jedoch nur 11 % der Teilnehmenden die Erfahrungen- und Fähigkeitenabschnitte von Compass rechtzeitig abschlossen, könnte es sinnvoll sein, missverstandene Fragen zu überarbeiten, um Zeit zu sparen. Ambitionen von Compass, seine Sprachangebote über Englisch hinaus zu erweitern, tragen ebenfalls dazu bei, Missverständnisse zu mindern.

Vertraulichkeit. Eine verwandte, aber leicht unterschiedliche Erwägung ist die Frage, wie Compass fälschlich angegebene, vertrauliche Informationen verwendet. Während der durchgeführten Interviews fragte Compass nicht direkt nach sensiblen oder vertraulichen Informationen. Es gab jedoch Fälle während des UX-Tests, in denen Teilnehmende eine Frage von Compass missverstanden oder irrtümlich beantwortet haben. Im Fall von Teilnehmer 3 führte sein Missverständnis der Frage „Können Sie mir sagen, ob das ein bezahlter Job war?“ dazu, dass er das genaue Gehalt angab, das er aus dem Job erhielt, anstatt lediglich zu bestätigen, dass die Position bezahlt war. Diese Information erschien nicht im Lebenslauf des Teilnehmers; daher hatte sie keine Auswirkung auf seine Ergebnisse für diese Version von Compass. Wenn jedoch das Ziel ist, schließlich eine Version von Compass einzuführen, die die Gespräche mit jungen Menschen nutzt, um geeignete Stellen und Sektoren vorzuschlagen, könnte dies problematisch sein. Compass könnte in diesem Fall einem Teilnehmer, der irrtümlich sein genaues Gehalt angegeben hat, Stellenangebote vorschlagen, die in diesem Gehaltsbereich liegen, und dadurch die Bewerbungsoptionen dieses Teilnehmers gegenüber einem Teilnehmer einschränken, dessen Vergütung Compass nicht bekannt ist.

Berichterstattung zu Fähigkeiten. Teilnehmer 5 bemerkte, dass „Geduld und Genauigkeit“ Fähigkeiten waren, die für eine seiner Rollen erforderlich waren. Obwohl Compass nach dieser Information gefragt hatte, ließ es diese Fähigkeiten in seiner Fähigkeitszusammenfassung weg. Es ist erwähnenswert, dass Teilnehmer 5 empfand, diese Fähigkeiten seien nicht so wichtig wie die von Compass hervorgehobenen Fähigkeiten. Im Gegensatz dazu bemerkte Teilnehmer 7, dass eine großartige Persönlichkeit und gute Kommunikation für die Arbeit in dem Unternehmen, in dem er zuvor gearbeitet hatte, unerlässlich seien. Während keines dieser Merkmale ausdrücklich in seiner Fähigkeitszusammenfassung enthalten war, wurde „Kundendienst“ – eine plausible Alternative zur Benennung dieser Eigenschaften – aufgeführt.

Ob Fähigkeiten, die explizit von der Teilnehmerin/dem Teilnehmer erwähnt wurden, aufgenommen werden sollen oder nicht, ist nicht leicht zu beantworten. Für einige Teilnehmende, wie Teilnehmer 5, scheinen die von Compass zusammengefassten Fähigkeiten (die auf dem European Skills, Competences, Qualifications and Occupations (ESCO)-Rahmen basieren) gut mit ihren Erfahrungen übereinzustimmen. In anderen Fällen, wie bei Teilnehmer 4, wären selbst zugeordnete persönliche Eigenschaften und Merkmale eine wertvolle Ergänzung im Lebenslauf. Wenn Compass Teilnehmende jedoch ausdrücklich bittet, Fähigkeiten anzugeben, die sie in ihrer Rolle für wichtig halten, erscheint es sinnvoll, dass Compass zumindest die am nächsten liegende ESCO-Fähigkeit finden sollte, um sie der Fähigkeitszusammenfassung der Teilnehmerin/des Teilnehmers hinzuzufügen.

Darüber hinaus gab Teilnehmer 4, als sie in der Arbeitserfahrungszuordnung von Compass nach ihrer Erfahrung als Kassiererin gefragt wurde, an, dass sie als Kassiererin „Kunden bei elektronischen und Barzahlungen geholfen, Kundenartikel gescannt und verpackt, Wechselgeld und Kasse gezählt“ habe. Trotz dieser detaillierten Aufgaben und Fertigkeiten, die diese Teilnehmerin angab, nahm Compass keine dieser Angaben in ihre Zusammenfassung der Arbeitserfahrungen auf. Dies liegt wahrscheinlich daran, dass sie noch nicht den Teil von Compass erreicht hatte, der direkt nach den Aufgaben und den aus einem bestimmten Job gewonnenen Fähigkeiten fragt. Unglücklicherweise fuhr Teilnehmer 4 aufgrund mangelnder Zeit nicht mit dem Abschnitt zur Fähigkeitszuordnung von Compass fort. Dies führte bei Teilnehmer 4 zu Frustration und Enttäuschung. Idealerweise sollte Compass in der Lage sein, in der Arbeitserfahrungssektion gegebene Fähigkeitsinformationen zu identifizieren und diese vorab in die Zusammenfassung der Arbeitserfahrungen einer jungen Person aufzunehmen, sodass sie diese Informationen im Abschnitt zur Fähigkeitszuordnung nicht wiederholen muss.

Berichterstattung zu Erfahrungen. Es gibt mehrere Fälle, in denen Compass die Arbeitserfahrungen der Teilnehmenden fälschlicherweise zusammenfasst. Beispielsweise wurde die unbezahlte Wirtschaftserfahrung von Teilnehmer 2 in ihrer Arbeitserfahrungszusammenfassung dupliziert, und ähnlich wurde die Kassiererfahrung von Teilnehmer 4 fälschlicherweise doppelt aufgeführt.

Eine der Einstiegsfragen von Compass an Teilnehmer 6 lautete: „Haben Sie jemals für ein Unternehmen oder das Geschäft einer anderen Person gegen Bezahlung gearbeitet?“ Teilnehmer 6 antwortete auf diese Frage mit: „Ja, ich arbeite derzeit für ein Unternehmen.“ Compass sammelte daraufhin Informationen zum Namen und Standort des Unternehmens sowie zur Dauer ihrer dortigen Tätigkeit. Compass fragte sie jedoch nicht nach ihrem Tätigkeitsbezeichnung. Daher wurde diese Arbeitserfahrung in ihrer Erfahrungszusammenfassung als „Arbeiten für ein Unternehmen“ benannt.

In einem anderen Fall klassifizierte Teilnehmer 5 fälschlicherweise eine entlohnte Beschäftigung als Vertragsarbeit (was wenig überraschend ist, da der Begriff Vertragsarbeit leicht als Arbeit nach Unterzeichnung eines Vertrags interpretiert werden kann, insbesondere wenn Englisch nicht die Muttersprache eines Teilnehmers ist). Im Verlauf des Dialogs berichtigt Compass diesen Fehler und identifizierte die Erfahrung korrekt als entlohnte Beschäftigung statt als Vertragsarbeit. Trotzdem fügte Compass „Contract work (Self-employment)“ in die Arbeitserfahrungszusammenfassung des Teilnehmers ein. Schließlich arbeitete Teilnehmer 5 remote als Datenerfasser für eine in Großbritannien ansässige Organisation. Als Compass diese Erfahrung zusammenfasste, wurde die Tatsache weggelassen, dass diese Tätigkeit remote ausgeführt wurde. Daher könnte es für einen potenziellen Arbeitgeber so erscheinen, als habe der Teilnehmer im Vereinigten Königreich gearbeitet.

Überlappende Erfahrungen. Einige südafrikanische Jugendliche üben gleichzeitig mehr als einen Job aus, um ihr Einkommen zu maximieren. Oft wird ein Job als bezahlte Beschäftigung bei einem Arbeitgeber ausgeübt, während der andere eine Mikrounternehmertätigkeit oder Freiberuflichkeit ist, die die junge Person eigenständig ausübt. Teilnehmer 1 zum Beispiel hatte eine Freiwilligen- und eine Selbstständigenposition inne, während er einer bezahlten Beschäftigung nachging. Teilnehmer 2 erwähnte, dass sie gewöhnlich nur einige der von ihr gegenüber Compass offengelegten Erfahrungspunkte in ihren Lebenslauf aufnehmen würde. Es ist nützlich zu verstehen, ob südafrikanische Arbeitgeber eher geneigt sind, jemanden mit einem Lebenslauf, der überlappende Erfahrungen enthält, einzustellen, im Vergleich zu jemandem, der jeweils nur eine Erfahrung ausübt. Wenn ein Arbeitgeber glauben würde, dass überlappende Selbstständigkeiten (oder Freiwilligenrollen) einen Interessenkonflikt oder ein Zeitmanagementproblem verursachen könnten, selbst wenn dies nicht der Fall ist, könnte dies die Beschäftigungsaussichten eines Arbeitssuchenden beeinträchtigen. Umgekehrt, wenn ein Arbeitgeber die gleichzeitige Ausübung mehrerer Positionen als Signal für Fleiß ansieht, könnte dies zugunsten des Arbeitssuchenden wirken. Ob eine junge Person überlappende Vollzeiterfahrungen angeben darf oder ermutigt wird, sollte letztlich von dem Ziel der jungen Person und den erwarteten Reaktionen der Arbeitgeber abhängen.

Flaschenhälse in der unbezahlten Wirtschaft. Compass ist anfälliger für Fehler oder Missverständnisse, wenn es nach Erfahrungen in der unbezahlten Wirtschaft fragt als bei Erfahrungen in der sichtbaren Wirtschaft. Beispielsweise wurde Teilnehmer 2 gebeten, spezifische Informationen zu ihrer Erfahrung mit dem Helfen anderer zu geben; sie sagte, sie sei „in der Gemeinde gut bekannt“. Compass, mit dieser Antwort nicht zufrieden, stellte die Frage erneut auf die gleiche Weise. Dies führte dazu, dass die Teilnehmerin dies dem Moderator meldete. Letztlich duplizierte Compass fälschlicherweise die von Teilnehmer 2 angegebene unbezahlte Wirtschaftserfahrung in ihrem Lebenslauf.

In einem anderen Fall, als Teilnehmer 4 gefragt wurde, ob sie „jemals Freunde oder Familienmitglieder unbezahlt unterstützt habe“, beschrieb sie eine Situation, in der sie einem Kollegen aus Nächstenliebe Geld für Transport und Essen gegeben hatte. Compass erkannte nicht, dass diese Tätigkeit nicht die Anforderungen einer unbezahlten Wirtschaftstätigkeit erfüllte, und fuhr fort, mehr Informationen zu sammeln, um diese Tätigkeit fälschlicherweise in der Erlebniszusammenfassung der Teilnehmerin aufzulisten.

Die unbezahlte Wirtschaftstätigkeit von Teilnehmer 5 bestand darin, seine Eltern zum Einkaufen zu begleiten. Die Struktur der Erlebnisberichterstattung von Compass drängte den Teilnehmer, ein Datum anzugeben, an dem diese Tätigkeit stattfand. Für die unbezahlte Wirtschaft kann es besonders schwierig sein, fortlaufende sporadische Tätigkeiten auf ein Start- und Enddatum zu beschränken. Es ist durchaus plausibel, dass Teilnehmer 5 seine Eltern bei mehreren Gelegenheiten zum Einkaufen begleitet hat, obwohl er nur das zuletzt erfolgte Datum angab. Außerdem erscheint die Klassifizierung der selbstberichteten Tätigkeit des Teilnehmers, seine Eltern zum Einkaufen zu begleiten, als „Freunden helfen“ in seiner Arbeitserfahrungszusammenfassung als missverständlich definiert.

Die unbezahlte Wirtschaft ist konzeptionell schwer non-technisch zu artikulieren. Zudem funktioniert die Zuweisung einer Struktur „Ort, Dauer, Organisationsname“ für die unbezahlte Wirtschaft möglicherweise nicht so nahtlos wie in der sichtbaren Wirtschaft. Daher bedürfen die aktuellen Eingabeaufforderungen für die unbezahlte Wirtschaft angesichts der oben genannten Engpässe einer Überarbeitung.

Externe Validität. Schließlich ist es wichtig, die Gültigkeitsbeschränkungen dieser Übung zu verstehen. Diese Ergebnisse gelten für die Teilnehmenden, die den UX-Test in dem jeweiligen Zeitraum abgeschlossen haben. Aufgrund der relativ kleinen Stichprobengröße der Teilnehmenden, die den UX-Test abgeschlossen haben, können diese Ergebnisse jedoch nicht so interpretiert werden, dass sie auf andere Gruppen anwendbar sind.

Fazit

Tabiya arbeitete mit Harambee Youth Employment Accelerator zusammen, um eine Compass-UX-Testsession für neun südafrikanische Jugendliche durchzuführen, die die Teilnehmenden der Sitzung bildeten. Die Teilnehmenden, die den UX-Test abschlossen, hatten unterschiedliche demografische Merkmale. Jede Sitzung wurde von einem Mitarbeiter/einer Mitarbeiterin von Harambee geleitet und moderiert. Zusätzlich zur Nutzung von Compass auf einem Smartphone beantworteten die Teilnehmenden eine Reihe von Fragen, um zu messen, wie sie ihre Interaktion mit Compass empfanden.

Das von den Teilnehmenden gegebene Feedback spricht überwältigend für die Benutzerfreundlichkeit, Genauigkeit und Relevanz von Compass bei der Identifizierung ihrer Fähigkeiten und Erfahrungen. Die Teilnehmenden, die Compass nutzten, konnten dies größtenteils eigenständig tun. Dieses positive Feedback ist ermutigend und äußerst überzeugend, muss jedoch mit den Erwägungen abgewogen werden, die vor einer Einführung von Compass getroffen werden müssen.