Crowdsourcing Truthfulness

Uno degli ambiti di ricerca nel quale i membri del laboratorio lavorano consiste nell’utilizzo di tecniche di Crowdsourcing per lo studio della disinformazione in diversi ambiti. Il Crowdsourcing consiste nell’esternalizzare un compito, che tradizionalmente viene eseguito da un impiegato o contraente, a un gruppo di persone indefinito e ampio in forma di
una chiamata aperta. Il tema generale delle ricerche svolte consiste nell’analisi di giudizi assegnati ad un insieme di frasi (statement) dai lavoratori (crowd workers). Tale tema ha portato alla pubblicazione di diversi lavori con collaborazioni internazionali.

Pubblicazioni

1. The COVID-19 Infodemic: Can the Crowd Judge Recent Misinformation Objectively?

Kevin Roitero, Michael Soprano, Beatrice Portelli, Damiano Spina, Vincenzo Della Mea, Giuseppe Serra, Stefano Mizzaro, and Gianluca Demartini. 2020. The COVID-19 Infodemic: Can the Crowd Judge Recent Misinformation Objectively? In Proceedings of the 29th ACM International Conference on Information & Knowledge Management (CIKM ’20). Association for Computing Machinery, New York, NY, USA, 1305–1314. DOI:https://doi.org/10.1145/3340531.3412048

Per vedere il video, scorrere la pagina fino alla sezione “Supplemental Material”

2. Can The Crowd Identify Misinformation Objectively? The Effects of Judgment Scale and Assessor’s Background

Kevin Roitero, Michael Soprano, Shaoyang Fan, Damiano Spina, Stefano Mizzaro, and Gianluca Demartini. 2020. Can The Crowd Identify Misinformation Objectively? The Effects of Judgment Scale and Assessor’s Background. In Proceedings of the 43rd International ACM SIGIR Conference on Research and Development in Information Retrieval (SIGIR ’20). Association for Computing Machinery, New York, NY, USA, 439–448. DOI:https://doi.org/10.1145/3397271.3401112

3. Crowdsourcing Truthfulness: The Impact of Judgment Scale and Assessor Bias

David La Barbera and Kevin Roitero and Gianluca Demartini and Stefano Mizzaro and Damiano Spina (2020). Crowdsourcing Truthfulness: The Impact of Judgment Scale and Assessor Bias. In Advances in Information Retrieval – 42nd European Conference on IR Research, ECIR 2020, Lisbon, Portugal, April 14-17, 2020, Proceedings, Part II (pp. 207–214). Springer.

4. Multidimensional News Quality: A Comparison of Crowdsourcing and Nichesourcing

Eddy Maddalena and Davide Ceolin and Stefano Mizzaro (2018). Multidimensional News Quality: A Comparison of Crowdsourcing and Nichesourcing. In Proceedings of the CIKM 2018 Workshops co-located with 27th ACM International Conference on Information and Knowledge Management (CIKM 2018), Torino, Italy, October 22, 2018. CEUR-WS.org.

Collaborazioni Internazionali