Αξιολόγηση ακρίβειας και ταχύτητας χρηστών του Amazon Μechanical Τurk στην εκτέλεση πρόσθεσης διψήφιων αριθμών

Loading...
Thumbnail Image

Date

2025-06-11

Authors

Μητακίδης, Αθανάσιος

Journal Title

Journal ISSN

Volume Title

Publisher

Abstract

Με την παρούσα διπλωματική συμβάλλουμε σημαντικά στις επιστημονικές έρευνες που-διεξήγαγαν η Μαρία Παπαθανασοπούλου και ο Χάρης Μουρελάτος εξετάζοντας την-αποτελεσματικότητα των χρηστών. Στην παρούσα διπλωματική έρευνα μελετάμε μια εργασία-Basic Double Digit Math Assignment (BDMA) που έλαβε χώρα στην πλατφόρμα-πληθοπορισμού AM Turk. Συχνά εργασίες BDMA εφαρμόζονται μέσω διαδικασίας-αξιολόγησης υποψηφίων (recruitment test), καθότι παρέχουν τις απαραίτητες πληροφορίες-στους υπεύθυνους προσλήψεων. Αρχικώς κατηγοριοποιήθηκαν οι 24.209 απαντήσεις, όπου οι-2222 (91.8 %) έχουν υπαχθεί ως Έγκυρη Τιμή – Σωστή, Έγκυρη Τιμή – Λάθος 1368 (5.7%),-Απουσία (NaN) (2.5%) και σε μικρά ποσοστά που πιθανολογείται να οφείλονται σε-τυπογραφικά λάθη διακρίθηκαν 6 στην κατηγορία Χρήση Συμβόλων και 4 στο Κείμενο. Στο-σύνολο της έρευνας βασίστηκε σε αυτές τις κατηγορίες. Γίνεται αναφορά στην απόδοση-χρηστών συνολικά καθώς και σε ατομικό επίπεδο βασιζόμενοι στο χρόνο απόκρισης και την-ακρίβεια των απαντήσεων. Έχουν μελετηθεί αριθμητικά φαινόμενα (Problem size-effect,carryover effect κλ.π.) καθώς και η επίδραση τους στην αποδοτικότητα των-αποτελεσμάτων με γνώμονα τον χρόνο απόκρισης και την ακρίβεια της απάντησης. Επιπροσθέτως, μελετήθηκε η επίδραση του χρόνου απόκρισης και της επιβολής bonus στις-ομάδες χρηστών, με την εφαρμογή μοντέλων παλινδρόμησης του GLM και GME ως προς την-απόδοση σωστού αποτελέσματος.

Description

Keywords

Πληθοπορισμός, Απόδοση εργαζομένου, Νοεροί υπολογισμοί, Αριθμητικές εργασίες

Citation