10
AMAZON MECHANICAL TURK: Structure et fonctionnement de la plateforme Elinor Wahal (Università di Trento, EHESS) [email protected] 1 7 Mars 2016, Étudier les cultures du numérique

Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

Embed Size (px)

Citation preview

Page 1: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

1

AMAZON MECHANICAL TURK: Structure et fonctionnement de la plateforme Elinor Wahal (Università di Trento, EHESS)

[email protected]

7 Mars 2016,Étudier les cultures du numérique

Page 2: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

2

Les plateformes de crowdsourcing : un panorama Principales plateformes occidentales de crowdsourcing

www.upwork.com (10,000,000 de travailleurs) www.freelancer.com (18,369,772 d’utilisateurs) www. 99designs.com (950,000 utilisateurs) www.microworkers.com (758,000 travailleurs)www.clickworker.com (700,000 travailleurs) www.innocentive.com (375,000 travailleurs) www.handy.com (200,000 travailleurs) www.shorttask.com (125,000 travailleurs)

Le crowdsourcing dans le marché du travail chinois: le phenomene du Witkey

www.witmart.com (>7,000,000 de travailleurs) www.taskcn.com (>3,207,482 de travailleurs)*www.epweike.com (>3,000,000 de travailleurs)*

*Carmel, E., Hou, C., Olsen, T. (2012), The Human Cloud in China: An Early Inquiry and Analysis, 5th Annual SIG GlobDev Workshop Pre-ICIS Meeting, Orlando, Florida, USA

Page 3: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

3

AMAZON MECHANICAL TURK:

Parties concernées REQUESTERS:• Fixent le montant de la rémunération• Peuvent rejeter les Hits reçues• Peuvent évaluer les prestations des travailleurs • Posent des conditions sur le profil des travailleurs

TURKERS:• Décident, en fonction des conditions posées par les comandataires, quelles tâches effectuer AMAZON: • N’intervient pas dans rapport entre commanditaires et travailleurs • Pour chaque tâche opère une retenue proportionnelle à la rétribution versée au travailleur

Page 4: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

4

Rétribution • Montant des frais de commission d’Amazon: 20% de commission sur la rétribution et les (éventuels) bonus versés

au travailleurs. Pour les Hits avec plus de 10 assignations les frais s’élèvent à 40%.

• La réaction sur les social media à l’augmentation des frais de commission: L’hashtag #mturkgate.

• Les commanditaires peuvent garder, et utiliser, les Hits qu’ils ont rejeté (les travailleurs ne sont pas payés pour ces Hits).

Page 5: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

5

Human Intelligence Tasks

Page 6: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

6

Human Intelligence TasksHits plus communes:

• Classification d’images/textes/vidéos • Transcription de files audio• Traductions • Modération de sites internet• Prononciation de mots • Ecriture de commentaires • Analyses textuelles• Individuation d’adresses et numéros de téléphone • Questionnaires et enquêtes de marché

Page 7: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

7

Modalités de sélection des travailleurs Les requesters peuvent sélectionner les nouveaux travailleurs en utilisant les qualification types fournis par le site. Ceci incluent: -% de feedback positifs -% de Hits rejetées -% de Hits abandonnées-nombre de Hits complétées Certains requesters exigent, en plus, que les travailleurs passent des tests (qui se tiennent dans des sites externes à Amt).

Les comandataires peuvent en outre créer leurs propres listes de qualification pour gérer les travailleurs qui ont déjà travaillé pour eux.

Amazon attribue aux travailleurs « qui ont démontré la capacité de fournir des bons résultats pour des types spécifiques de Hits » (Amazon Mechanical Turk Requester UI Guide, 2016. p. 2) la qualification de Master. Le site opère une retenue additionnelle du 5% sur les Hits des Masters et les critères pour la nomination ne sont pas divulgués.

Page 8: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

8

Modalités de sélection des travailleurs

Page 9: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

9

Agency des travailleurs: le toolbar TurkOpticon et les

forumsDeux des plus évidentes stratégies à travers lesquelles les turkers exercent leurs agency sont représentées par les forums online et l’utilisation du toolbar TurkOpticon.

TurkOpticon, crée en 2010 par Lilly Irani et M. Six Silberman*, donne une voix aux travailleurs, en leur permettant d’évaluer les commanditaires.

*Voir « Irani L. C., Silberman M. (2013). Turkopticon: Interrupting worker invisibility in amazon mechanical turk. In Proceedings of the SIGCHI Conference on Human Factors in Computing Systems (pp. 611-620). ACM. »

Sur les forums les travailleurs racontent leurs expériences avec les requesters et conseillent/déconseillent ces derniers aux autres turkers.

Page 10: Elinor Wahal - Amazon Mechanical Turk: Structure et fonctionnement de la plateforme

10

Merci de votre attention

Elinor Wahal

Università di Trento/[email protected]