Analýza a vizualizace
dat ze sociálních médií
Dalibor Toth
Sociální média
• Nejen sociální sítě
• Diskuzní fóra
• Blogy
• Zprávy a jejich komentáře
• Zajímavá data
o Obsah příspěvků, článků
o Vazby mezi účastníky
o Vzory chování
25.4.2013Dalibor Toth - Lasaris
Využití?
• Marketing
o Upozornění na důležité události
o Automatizovaná vyhodnocení (jak je hodnocen produkt v diskuzích)
• Bezpečnost
o Identifikace vzorů podezřelého chování a upozorňování
o Monitoring podezřelých oblastí (warez fóra apod.)
o Vyhledávání nebezpečných osob
• Veřejné mínění
o Odhady dalšího vývoje, např. výsledků voleb (oblíbenost politiků apod.)
• Žurnalismus
o Rychlé a automatizované upozornění na nové události, trendy
25.4.2013Dalibor Toth - Lasaris
Dekompozice problému
• 4 základní části + mezičlánek
• Sběr dat
• Ukládání dat
• Analýza
• Vizualizace
• Platforma?
25.4.2013Dalibor Toth - Lasaris
Sběr dat
• Diskuzní fóra
o Chronologicky řazené příspěvky
o Vlákna v diskuzi
• Blogy
o Obsah samotných příspěvků, případně i připojené reakce
o Různorodé cíle
• Zprávy
o Delší úvodní text a na něj reagující příspěvky
• Sociální sítě
o Příspěvky a komentáře
o Sdílení obsahu
o Obecné vs. Profesionální
• Intranet
25.4.2013Dalibor Toth - Lasaris
Ukládání dat
• Jak data rozumně ukládat?
• Obrovské množství relativně různorodých dat
• Využití nástrojů poskytujících částečné
předzpracování nestrukturovaných dat
o Indexace textů
o Fulltextové vyhledávání
o Možnost už částečně profiltrovat data pro další zpracování
o Apache Solr
25.4.2013Dalibor Toth - Lasaris
Analýza
• Obsah
o Základ pro další práci s textem
o Identifikace klíčových pojmů, které se v textu objevují
• Vazby
o Monitorování vazeb mezi jednotlivci
o Jak to ukládat? Co všechno evidovat?
• Sentiment
o Jednotlivé příspěvky
o Celé diskuze
o Postoj autora z jeho příspěvků
o Trend a upozornění na změny
• Identifikace jednotlivce
o Vzory chování, časové souvislosti příspěvků, překlepy, slovní spojení
o Identifikace jedné osoby pod různými pseudonymy
25.4.2013Dalibor Toth - Lasaris
Vizualizace
• Výsledky analýz
• Detaily jednotlivých záznamů
• Skládání komplexního obrazu z více pohledů
• Obrazový i textový výstup v závislosti na kontextu
25.4.2013Dalibor Toth - Lasaris
Platforma
• Propojení jednotlivých částí (komponent) do
funkčního celku
• Možnost konfigurace systému podle zaměření na
cílová data
• Poskytování rozhraní pro další zpracování výsledků
o Pro uživatele přes vizualizační část
o Pro další SW, který výstupní data může dále zpracovávat
25.4.2013Dalibor Toth - Lasaris
Kde jsme?
• Analýza obsahu
• Analýza sentimentu
• Návrh platformy - idea
25.4.2013Dalibor Toth - Lasaris
Kudy dál?
• I po dekompozici příliš široký záběr témat
• Možnosti uplatnění částí systému v rámci FI/labu,
kde figuruje velké množství dat?
o Analýza
• Zpracování interních dat, např. v rámci diskuzí/anket v IS
o Vizualizace
• Kypo
• CEP
25.4.2013Dalibor Toth - Lasaris
Díky za pozornost.
Nějaké otázky?
25.4.2013Dalibor Toth - Lasaris