Not logged in.

Contribution Details

Type Bachelor's Thesis
Scope Discipline-based scholarship
Title Bet Me
Organization Unit
Authors
  • Balthasar Caflisch
Supervisors
  • Sven Seuken
  • Michael Shann
Language
  • English
Institution University of Zurich
Faculty Faculty of Economics, Business Administration and Information Technology
Number of Pages 56
Date 2013
Abstract Text The goal of this thesis was to create an application, with which people could check factual statements with the help of Amazon Mechanical Turk. The application was supposed to be setup like a game, that punishes false and rewards right statements. Another goal of the research, was to test the influence of the task parameters on the turkers work. As our main contribution we present Bet Me, a novel web application for betting and fact checking. Users of Bet Me can bet with each other on the answer of any question, they can formulate with the answers yes and no. The bet is then sent to Amazon Mechanical Turk, where workers vote on, what is the right answer. The user, whose answer got the most votes, wins the bet. We conducted a functional test, where we tried out several different parameters to the tasks, we put on Mechanical Turk. We also made an usability study, where we asked potential users to try our application. The results of the functional test and the usability study showed, that it is possible to use Amazon Mechanical Turk to answer arbitrary yes/no questions, though workers have a harder time with trick and subjective questions.
Zusammenfassung Das Ziel dieser Arbeit war es, eine Applikation zu erstellen, mit welcher man faktische Aussagen mithilfe von Amazon Mechanical Turk überprüfen kann. Die Applikation sollte wie ein Spiel aufgebaut sein, das richtige Aussagen belohnt und falsche Aussagen bestraft. Ein weiteres Ziel der Forschung war es, den Einfluss der Aufgaben-Parameter auf die Arbeit der Turker zu testen. Als unseren Hauptbeitrag präsentieren wir Bet Me, eine neuartige Web Applikation zum Wetten und Fakten überprüfen. Die Benutzer von Bet Me können miteinander auf die Antworten von jeglichen Fragen wetten, welche sie mit Ja-und-Nein-Antworten formulieren können. Diese Wette wird dann an Amazon Mechanical Turk gesendet, wo Arbeiter darüber abstimmen, was die richtige Antwort ist. Der Benutzer, dessen Antwort am meisten Stimmen gekriegt hat, gewinnt die Wette. Wir führten funktionale Tests durch, in welchen wir verschiedene Parameter zu den Aufgaben, die wir auf Mechanical Turk stellten, wie Bezahlung oder Anzahl Arbeiter ausprobierten. Auch machten wir eine Studie über die Nutzbarkeit unserer Applikation, in der wir potentielle Benutzer unsere Applikation ausprobieren liessen. Die Resultate der funktionalen Tests und der Nutzbarkeit Studie zeigten, dass es möglich ist, Amazon Mechanical Turk zu benutzen um beliebige Ja/Nein-Fragen zu beantworten, allerdings bereiteten Fangfragen und subjektive Fragen den Arbeitern mehr Mühe.
PDF File Download
Export BibTeX