微博輿情分析系統(tǒng)信息處理模塊的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、微博作為迅速崛起的新興社交網(wǎng)絡(luò)，因?yàn)樾畔⒌膩?lái)源良莠不齊，以及民眾的盲從性，利用微博傳播謠言，擾亂社會(huì)治安的事件時(shí)有發(fā)生。如今，平均每小時(shí)的微博發(fā)布量高達(dá)數(shù)百萬(wàn)條，僅僅通過(guò)人工手段來(lái)對(duì)如此多條目進(jìn)行監(jiān)控和分析幾乎是不可能完成的任務(wù)，因此依靠現(xiàn)代文本自動(dòng)分析技術(shù)來(lái)開(kāi)發(fā)一款微博輿情分析預(yù)警系統(tǒng)迫在眉睫。
　　本論文的工作是為一款微博輿情信息分析系統(tǒng)設(shè)計(jì)和開(kāi)發(fā)其中的信息處理模塊。論文首先介紹了微博輿情分析系統(tǒng)的整體框架設(shè)計(jì)，概括描述了該系

2、統(tǒng)底層的信息采集、索引和分詞模塊和其所涉及的相關(guān)開(kāi)源軟件和技術(shù)。本系統(tǒng)的分析手段是通過(guò)微博字詞來(lái)進(jìn)行的，對(duì)其所使用的潛在語(yǔ)義分析(LSA)也做出了相應(yīng)的介紹。
　　論文的后幾部分主要介紹信息處理模塊，給出其整體設(shè)計(jì)架構(gòu)，以及實(shí)時(shí)統(tǒng)計(jì)、自定義統(tǒng)計(jì)、同類(lèi)詞歸并、微博影響力分析等功能點(diǎn)的具體設(shè)計(jì)和編碼實(shí)現(xiàn)。系統(tǒng)完成的主要功能包括:
　　1)新浪微博的實(shí)時(shí)統(tǒng)計(jì)和預(yù)警;
　　2)各類(lèi)復(fù)雜且精確地自定義統(tǒng)計(jì);
　　3)同類(lèi)詞