Il caso di studio WorkerProfile

Periodo di esecuzione del caso di studio: 15/11/2017 - 18/12/2017
Questionario di posizionamento iniziale.
Sistema Argo (esecuzione task).

I lavoratori di un sistema di crowdsourcing non sono tutti uguali! Hanno competenze e capacità diverse!
Ma il sistema è in grado di tenerne conto quando si assegnano i task di eseguire? Tipicamente, i task sono assegnati in base a criteri di efficienza, senza considerare il profilo o le preferenze dei lavoratori.

Il caso di studio WorkerProfile intende valutare diverse strategie di assegnazione dei task ai lavoratori con l’obiettivo di trovare la soluzione che produce i risultati migliori e permette ai lavoratori di eseguire task di loro gradimento.

Tipologie di task
Il caso di studio prevede l'esecuzione di varie tipologie di task:
  • Cogliere il “sentiment” di tweet su temi politici
  • Valutare pellicole cinematografiche
  • Riconoscere opere d’arte
  • Determinare il titolo/genere di un film a partire dalla trama
Il sistema assegna i task ai lavoratori seguendo vari criteri. Se si conosce la risposta, si chiede di rispondere al task assegnato qualunque sia la tipologia.
Per alcune tipologie di task non esistono risposta giusta e risposta sbagliata, si chiede di rispondere esprimendo il proprio punto di vista.

Questionario di posizionamento
Prima di iniziare le attività di crowdsourcing, chiediamo a ogni partecipante di rispondere a un questionario di posizionamento mirato a definire il profilo iniziale del lavoratore:
questionario di posizionamento iniziale.
Si raccomanda di rispondere in modo onesto e sincero in modo da fornire una auto-valutazione utile e significativa.

Raccomandazioni
Vogliamo misurare l’efficacia degli strumenti automatici nel riconoscere le competenze e le capacità reali dei lavoratori: è importante rispondere sinceramente, al meglio delle proprie possibilità
  • Non cercare suggerimenti esterni o sul motore di ricerca (a meno che sia il task a chiedere di farlo)
  • Non rispondere a caso
  • Fornire risposte errate non è penalizzante
  • Fornire risposte corrette è premiante

Link utili
Vai al questionario di posizionamento iniziale.
Vai al sistema Argo (esecuzione task).
Vai alla pagina Facebook di Argo.
Segnala un problema allo staff di Argo.