Not logged in.

Contribution Details

Type Master's Thesis
Scope Discipline-based scholarship
Title Automated Pricing Mechanisms for Crowdsourcing Markets
Organization Unit
Authors
  • Kevin Mettenberger
Supervisors
  • Patrick Minder
Language
  • English
Institution University of Zurich
Faculty Faculty of Economics, Business Administration and Information Technology
Number of Pages 53
Date 2014
Abstract Text Nowadays, crowdsourcing systems can be built easily using crowdsourcing markets like Amazon's Mechanical Turk or Crowdflower. The pricing of tasks is however still very simple. Wages are paid to the workers per task and have to be set in advance. In the context of this master thesis, a market interface is developed which allows to continuously allocate and dynamically price tasks on Amazon's Mechanical Turk. When allocating tasks by using an item-contract, workers are paid per succeeded task. In the case of a time-contract, the workers are paid to work on tasks for a certain amount of time. We compare the two payment policies in terms of the requester's utility and the acceptance of the crowd. The results show, that the requester's utility is significantly higher with the time-contract, while maintaining a very good acceptance of the crowd. In a second step, three pricing mechanisms are developed and evaluated against each other similar to the experiments with the two contract types. The second experiments reveal that the mean cost per task can further be improved by using the pricing mechanisms combined with the time-contract.
Zusammenfassung Crowdsourcing-Systeme kö¶nnen heutzutage, mit Hilfe von Crowdsourcing-Märkten wie Amazon's Mechanical Turk und Crowdflower, schnell und einfach aufgebaut werden. Die Preisbildung auf diesen Crowdsourcing-Märkten ist jedoch ziemlich rudimentär. Löhne müssen im Voraus, pro Aufgabe, durch die Arbeitgeber festgelegt werden. Im Rahmen dieser Masterarbeit wurde eine Schnittstelle entwickelt, welche eine kontinuierliche Vergabe und dynamische Preisfestsetzung von Aufgaben auf Amazon's Mechanical Turk erlaubt. Mit einem item-contract werden die Arbeiter pro erledigte Aufgabe bezahlt, während sie mit dem time-contract für eine gewisse Zeit, in der sie Aufgaben lösen, bezahlt werden. Die beiden Entlohnungssysteme werden auf Grund des ökonomischen Nutzens für den Auftraggeber und die Akzeptanz der Arbeiter verglichen. Die Resultate zeigen, dass der ökonomische Nutzen, bei gleichbleibender Akzeptant der Arbeiter, mit dem time-contract signifikant höher ist. In einem zweiten Schritt werden drei Preisfindungsmechanismen entwickelt und, wie die beiden Entlohnungssysteme, evaluiert. Die zweiten Experimente beweisen, dass die durchschnittlichen Kosten pro Aufgabe mit den Preisfindungsmechanismen, kombiniert mit dem time-contract, noch weiter verbessert werden können.
PDF File Download
Export BibTeX