(fake) reviews analysis · * sono per lo piu’ “ad hoc” (e.g., music recommendation) * …la...

24
(Fake) Reviews Analysis SoBigData day, EUI, Florence October 11, 2017 Marinella Petrocchi IIT-CNR Trustworthy and Secure Future Internet

Upload: others

Post on 29-May-2020

5 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

(Fake)ReviewsAnalysisSoBigDataday,EUI,Florence

October11,2017

MarinellaPetrocchiIIT-CNRTrustworthyandSecureFutureInternet

Page 2: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

*  ProvinceofLucca*  Hotels,Restaurants,Attractions*  Booking–Tripadvisor*  >300,000reviews*  >155,018uniquereviewers

Datasets

Page 3: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Geo-Distribution

Page 4: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Reviewsovertime

Page 5: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Comparisonamongplatforms

Page 6: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Itineraries

World

*  NewYork*  Singapore*  …*  Lucca*  ...*  Tokyo*  Sidney

Specificterritory

*  StMichaelsquare*  Amphitheatre*  Thewalls*  …*  Filllungostreet*  ....

Page 7: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Fake Content

Page 8: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Fake reviews

Page 9: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Text-scoreDisagreement

Tripadvisormorethan350khotelreviewsNewYork,Rome,RioDeJaneiro,Tokyo,Paris

MichelaFazzolari,VittoriaCozza,MarinellaPetrocchi,AngeloSpognardiAStudyontext-scoredisagreementinonlinereviewsSpringerCognitiveComputation,9(5),2017

Page 10: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Thanksagain!

Page 11: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Falsi followers

Page 12: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Falsi followers

Page 13: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Bolle d’informazione

LA NOSTRA IDEA

Page 14: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

Progettazione e implementazione di un

FILTRO per MOTORI di RICERCA e SOCIAL MEDIA

centrato sulla persona:

MY Information Bubble

1. PERSONALIZZAZIONE DINAMICA: SI ai MIEI interessi, ADESSO

3. AFFIDABILITA: SI a informazione SFRONDATA da FALSI

2. CONSAPEVOLEZZA: NO a FILTRI attuati A PRIORI da altri

Page 15: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

*  Studi su recommender systems che esaltano uno tra questi fattori: Accuratezza, Diversità, Novità, “Serendipità”… *  sono per lo piu’ “Ad Hoc” (e.g., music recommendation) *  …la misura della CONSAPEVOLEZZA e la FUSIONE

delle varie dimensioni?

*  Esistono classificatori per rilevamento di: *  SPAM su social media (≠ FAKE) *  false recensioni (eg: Sentiment Analysis), ma…. *  GAP tra accademia e principali piattaforme sociali!

MIB: cosa esiste adesso?

Page 16: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

*  Fornisce uno strumento FACILE e INTUITIVO per CREARE e PERSONALIZZARE dinamicamente il filtro

*  Crea CONSAPEVOLEZZA sull’esistenza e l’attuazione di filtri automatici in rete, imposti a priori

*  ELIMINA dalla ricerca le informazioni FALSE

MIB: che c'è di nuovo?

Nuovo! Nieuwe! New! Nouveau! Neu! Nuevo!

Page 17: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

“In today’s social media world, FOLLOWERS equal POWER. At the very least, they imply IMPORTANCE”

In Progress Expertise

Page 18: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

*  SOCIALE: l’utente acquista coscienza critica su informazioni reperibili e su dinamiche di potere online

*  ECONOMICO: il fake detector e’ arbitro per le transazioni commerciali “pulite” = TUTELA dei diritti del consumatore

*  TECNOLOGICO: il progresso della tecnica non al servizio di “ciò che si vuole mostrare agli utenti” bensì di “ciò che vogliono”

*  SCIENTIFICO: pubblicazioni su riviste di eccellente valore e visibilità internazionale

MIB: che impatto ha?

Page 19: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

IL PIANO DELLE ATTIVITA

*  Task 1. Abbattimento delle Filter Bubbles attuali

*  Task 2. Individuazione dei falsi

*  Task 3. Realizzazione e validazione della MY INFORMATION BUBBLE

Page 20: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

TASK 1

*  Studio delle tecniche di filtraggio implementate correntemente *  Studio delle politiche di privacy vigenti *  Percezione degli utenti sui filtri *  Operazione di reverse engineering per annullare

l’effetto dei filtri

Page 21: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

TASK 2

*  Studio delle tecniche di fake detection correntemente definite e/o implementate *  Definizione e validazione di nuove tecniche di

fake detection *  Realizzazione del “Fake Detector Engine”,

rilevatore di fake multipiattaforma

Page 22: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

TASK 3

*  Implementazione della MY INFORMATION BUBBLE (= collettore d’informazioni NON filtrante a priori + Fake Detector Engine + Dinamicita’ del perimetro della bolla) *  Rilascio del prototipo e del kit informativo per

gli utenti *  Validazione del prototipo mediante questionari e

sessioni di utilizzo assistite

Page 23: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

PianoEconomico

Definizione Costo

Costodelpersonale 104k(2assegnidiricercaper2anni)*

Spesetrasferteepubblicazioni 10k

Attrezzaturahardwareesoftware 8k

Scuoladidottorato 6k

Comunicazioneonline 1k

Costototale 129k

*risultatoprincipalealloscaderedei2anni:prototipofunzionantesuGoogle

Page 24: (Fake) Reviews Analysis · * sono per lo piu’ “Ad Hoc” (e.g., music recommendation) * …la misura della CONSAPEVOLEZZA e la FUSIONE delle varie dimensioni? * Esistono classificatori

IlGruppodiRicerca

Marinella Petrocchi IIT CNR

Angelo Spognardi IIT CNR

Mauro Conti Università di Padova

Maurizio Tesconi IIT CNR

Roberto Di Pietro Università Roma Tre

Gabriele Lenzini Universitee Luxembourg