Apprendimento collaborativo nei social media: costruzione
automatica di un servizio di Q&A
Relatore:Chiar.mo Prof. Filippo Lanubile
Correlatrice:Dott.ssa Nicole Novielli
Laureando:Fiorella Fabio
a.a. 2013/2014
Obiettivo• Sviluppare una piattaforma a supporto
dell’apprendimento collaborativo online– Analisi delle attività e delle interazioni online degli studenti
universitari – Analisi delle risorse open-source disponibili– Problema: adozione della piattaforma (Cold start)
2/17
Bisogni studenti e requisiti
Migrazione community e contenuti
Classificazione e importazione
automatica dei post
Open Platform
Implementazione piattaforma
I gruppi Facebook
• Spazi virtuali che ogni utente può creare, al fine di condividere
le informazioni che desidera con i membri.
– Gli studenti utilizzano i gruppi Facebook per collaborare durante il
percorso di studi
3/17
Community-based Question & Answering
Un utente espone un problema sotto forma di
domanda
la comunità degli utenti risolve il problema Si crea conoscenza
utile e riutilizzabile da altri utenti che in futuro avranno un problema simile
Modello molto efficace nella condivisione di conoscenza
Un esempio di grande successo è Stack Overflow 4/17
Analisi dell’interazione online
• Gruppi Facebook di studenti universitari - corsi di laurea in informatica (triennali e magistrali)- 4 università italiane:
Università degli studi di Bari
Sapienza -Università di Roma
Università degli studi di Milano
Università degli studi di Pisa
5/17
Struttura dei gruppi
Gruppo riferito ad un corso di laurea
Strutturazione dei gruppi6/17
Gruppo riferito ad un insegnamento
Teaching I
Teaching I
Teaching II
Teaching III
Analisi dell’interazioneGruppi Facebook Q&A
Caratteristiche ComuniTempi di risposta 11 min. 11 min.
Attività utenti 20% degli utenti produce l’80% dei contenuti
Pochi utenti producono la maggior parte dei contenuti
Tipo post Domande, gruppi studio, offerta informazioni, immagini Domande
L. Mamykina, B. Manoim, M. Mittal, G. Hripcsak, and B. Hartmann, “Design lessons from the fastest Q&A site in the west.”CHI 2011, pp. 2857-2866.
Differenze
Contenuti caricati utili, spam Solo utili (gamification e moderazione della community).
Ordinamento contenuti Esclusivamente cronologico Cronologico, score, attività
Upload file Frequente Non consentito
7/17
Ultima release: 7 Gennaio 2015
Tutte le funzionalità di un sito di Q&A. In più upload immagini e file
Integrabile ed espandibile.
Grande quantità di plug-in, sia a pagamento che non. Grande community
Progetto longevo8/17
Adozione della piattaforma• Risolvere il problema del cold start.• Affiancare i gruppi Facebook offrendo i vantaggi del
Q&A
Piattaforma di Q&A
Estrarre conoscenza da ogni gruppo d’Italia
Server della piattaforma
Classificazione e migrazione dei post
9/17
Amministratori o membri del gruppo
Definizione di una tassonomia per la classificazione
3 dimensioni di annotazione:
Obiettivo: Importare nella piattaforma solo i post Useful e Lasting10/17
Classificazione dei post
11/17
Dimensione Fleiss’ Kappa
Rilevanza 0.838
Persistenza 0.805
Direzione 0.805
3 annotatori
Dimensione Istanze FeatureAttributo di classe
Nome N. IstanzeRilevanza 1015 5523
Spam 14 %Useful 86 %
Persistenza 751 4410Lasting 64 %
Temporary 36 %
Direzione 459 3264Need_info 87 %Give_info 13 %
Accordo totale tra i 3 annotatori
1092 post
• Approccio supervisionato– SVM, come in (Harper et al., 2011)
– Weka
• Training set formato da:– Feature testuali (word count)– Feature che descrivono le
caratteristiche del postHarper, F.M., Moy, D., and Konstan, J.A. Facts or friends?: distinguishing informational and conversational questions in social Q&A sites. Proceedings of CHI 2009, ACM (2009), 759-768.
Classificazione – Risultati
Dimensione Rilevanza Recall Precision F-Measure Class
0.994 0.981 0.98 Spam
0.957 0.987 0.972 Useful
Weighted Avg. 0.983 0.983 0.983
Recall Precision F-Measure Class
0.804 0.831 0.817 Temporary
0.909 0.892 0. 9 Lasting
Weighted Avg. 0.871 0.87 0. 87
Dimensione Persistenza
Dimensione Direzione Recall Precision F-Measure Class
0.992 0.961 0.977 Need_info
0.733 0.936 0.822 Give_info
Weighted Avg. 0.959 0.958 0.956
12/17
10-fold validation
Universitree.com - MigrazionePost Richiesta/Offerta Informazioni
Commenti Risposte
Like VotiIdentità Facebook Identità fittizie
Gruppo Facebook Universitree.com
Universitree.com - MigrazioneContenuti suddivisi ricalcando la struttura
gerarchica dei corsi:
- Università
- Corso di laurea
- Insegnamento
Tag dimensione direzione informazione Tag insegnamento 14/17
Universitree.com• 478 domande, 2847 risposte prodotte da 833 utenti
• 100 tag.
15/17
Conclusioni
• Piattaforma per gli studenti universitari che unisce:− Question & Answering− Features a supporto delle attività degli studenti
universitari, evinte dall’analisi dei gruppi Facebook− Sistema automatico di classificazione dei post come
supporto alla migrazione dei contenuti
• Sviluppi futuri:− Supportare altri tipi di interazione non previsti dal Q&A
(gruppi studio, informazioni con utilità temporale ridotta)− Suggerimento di tag
16/17
Grazie per l’attenzione