互聯(lián)網(wǎng)信息收集分析系統(tǒng)

互聯(lián)網(wǎng)信息收集分析系統(tǒng)項(xiàng)目前期報(bào)告一、 概述現(xiàn)代社會(huì)是一個(gè)信息社會(huì)，掌握必要的信息是發(fā)現(xiàn)問題、解決問題的前提。如何匯集網(wǎng)絡(luò)民情信息呢？需要建立網(wǎng)絡(luò)民情信息收集機(jī)構(gòu)和民情監(jiān)控系統(tǒng)，對(duì)重點(diǎn)網(wǎng)站的民情、重點(diǎn)論壇進(jìn)行信息收集，全方位、多角度了解社情民意?！痘ヂ?lián)網(wǎng)信息收集分析系統(tǒng)》將提供信息匯集服務(wù)，機(jī)構(gòu)及工作人員可以充分利用計(jì)算機(jī)網(wǎng)絡(luò)自動(dòng)信息采集功能來收集相關(guān)信息，系統(tǒng)根據(jù)用戶信息需求，設(shè)定主題目標(biāo)，使用人工參與和自動(dòng)信息采集相結(jié)合的方法完成信息收集?！痘ヂ?lián)網(wǎng)信息收集分析系統(tǒng)》是指通過對(duì)網(wǎng)絡(luò)各類信息匯集、分類、整合、篩選等技術(shù)處理，再形成對(duì)網(wǎng)絡(luò)熱點(diǎn)、動(dòng)態(tài)、網(wǎng)民意見等實(shí)時(shí)統(tǒng)計(jì)報(bào)表的軟件系統(tǒng)平臺(tái)。二、 項(xiàng)目研發(fā)背景隨著互聯(lián)網(wǎng)的快速發(fā)展，網(wǎng)絡(luò)媒體作為一種新的信息傳播形式，已深入人們的日常生活。網(wǎng)友言論活躍已達(dá)到前所未有的程度，不論是國(guó)內(nèi)還是國(guó)際重大事件，都能馬上形成網(wǎng)上輿論，通過這種網(wǎng)絡(luò)來表達(dá)觀點(diǎn)、傳播思想，進(jìn)而產(chǎn)生巨大的輿論壓力，達(dá)到任何部門、機(jī)構(gòu)都無法忽視的地步?？梢哉f，互聯(lián)網(wǎng)已成為思想文化信息的集散地和社會(huì)輿論的放大器。隨著網(wǎng)絡(luò)的不斷發(fā)展，網(wǎng)絡(luò)民情越來越受到社會(huì)的關(guān)注。如何利用網(wǎng)絡(luò)了解民情，匯聚民智，以便科學(xué)決策？有必要建立網(wǎng)絡(luò)民情分析機(jī)制。為了能夠全方位保證網(wǎng)絡(luò)民情信息收集系統(tǒng)的日常運(yùn)作，政府需要從物質(zhì)、制度、資金、人員等方面加以保障。信息匯集機(jī)制。現(xiàn)代社會(huì)是一個(gè)信息社會(huì)，掌握必要的信息是發(fā)現(xiàn)問題、解決問題的前提。如何匯集網(wǎng)絡(luò)民情信息呢？需要建立網(wǎng)絡(luò)民情信息收集機(jī)構(gòu)和民情監(jiān)控系統(tǒng)，對(duì)重點(diǎn)網(wǎng)站的民情、重點(diǎn)論壇進(jìn)行信息收集，全方位、多角度了解社情民意。信息收集機(jī)構(gòu)及工作人員應(yīng)充分利用計(jì)算機(jī)網(wǎng)絡(luò)自動(dòng)信息采集功能來收集相關(guān)信息，根據(jù)用戶信息需求，設(shè)定主題目標(biāo)，使用人工參與和自動(dòng)信息采集相結(jié)合的方法完成信息收集。為了能夠全方位保證網(wǎng)絡(luò)民情信息收集系統(tǒng)的日常運(yùn)作，政府需要從物質(zhì)、制度、資金、人員等方面加以保障。信息決策機(jī)制。收集信息以后，必須對(duì)社會(huì)民情信息進(jìn)行針對(duì)性分析，以作為決策的依據(jù)。對(duì)收集到的信息素材進(jìn)行分類，提取關(guān)鍵詞，按照主題重新組織信息，并生成民情信息。通過對(duì)所收集信息進(jìn)行深入分析，理清思路，采用定性分析與定量分析相結(jié)合，進(jìn)行計(jì)算機(jī)決策模擬與人工決策相結(jié)合的決策方式。同時(shí)，要建立科學(xué)的決策程序。運(yùn)用信息反饋機(jī)制不斷完善分析決策。以按需定制的方式將民情信息提供給相關(guān)人或民情監(jiān)控部門，在民情分析系統(tǒng)運(yùn)行過程中，民情監(jiān)控部門可以對(duì)已有的信息進(jìn)行評(píng)估，又會(huì)產(chǎn)生新的信息需求，進(jìn)而規(guī)劃新的民情監(jiān)控重點(diǎn)，開始新的民情監(jiān)控，形成一個(gè)具有生命特征的周期往復(fù)的社情民意反饋機(jī)制。問題解決機(jī)制。網(wǎng)絡(luò)民情是社會(huì)變化的晴雨表，網(wǎng)絡(luò)民情的變化反映了人們對(duì)政府的態(tài)度，研究和分析網(wǎng)絡(luò)民情目的是為了解決問題，促進(jìn)社會(huì)和諧。一是建立民主參與平臺(tái)。政府部門可以通過政府網(wǎng)站對(duì)關(guān)系到群眾切身利益的政策舉行聽證會(huì)，與老百姓對(duì)話，獲取信息，征求意見。領(lǐng)導(dǎo)干部可以通過網(wǎng)絡(luò)，開辟個(gè)人主頁(yè)，建立博客，公布自己的電子郵箱，專門收集百姓意見，接受網(wǎng)上群眾信訪，定期與群眾進(jìn)行面對(duì)面溝通和交流，了解百姓所需所求，幫助群眾解決實(shí)際問題。進(jìn)而可以探索通過網(wǎng)絡(luò)參與決策的新形式，如民意測(cè)驗(yàn)、電子投票、電子問責(zé)制等民主手段。為有效防止公職人員的越權(quán)行為，我們可以把某些工作制度，利用信息技術(shù)設(shè)計(jì)固定程序，在群眾的注視之下，由機(jī)器來執(zhí)行，從而把制度執(zhí)行過程中的人為干擾降低到最低限度，消除以權(quán)謀私的機(jī)會(huì)。二是建立危機(jī)干預(yù)平臺(tái)。通過網(wǎng)絡(luò)民情分析系統(tǒng)，在第一時(shí)間內(nèi)獲得最新網(wǎng)絡(luò)民情,并對(duì)這些民情進(jìn)行有足夠時(shí)間的研判，特別是發(fā)現(xiàn)社會(huì)風(fēng)險(xiǎn)苗頭，再?zèng)Q定采用何種方式進(jìn)行化解。設(shè)計(jì)網(wǎng)絡(luò)民情應(yīng)急預(yù)案。預(yù)則立，不預(yù)則廢。為了有效防控危機(jī)（或社會(huì)風(fēng)險(xiǎn)）的發(fā)生，應(yīng)該結(jié)合本地實(shí)情，借鑒成功案例，著眼未來，制定詳細(xì)而周密的應(yīng)急預(yù)案，以保證危機(jī)（或社會(huì)風(fēng)險(xiǎn)）發(fā)生時(shí)臨危不懼，獲得最大限度的主動(dòng)權(quán)。制定網(wǎng)絡(luò)民情預(yù)警預(yù)案時(shí)，可以將危機(jī)（或社會(huì)風(fēng)險(xiǎn)）分為三級(jí)，即1級(jí)（重大）、2級(jí)（較大）、3級(jí)（一般）。根據(jù)具體等級(jí)類別，采取相應(yīng)的對(duì)策，調(diào)動(dòng)與之對(duì)應(yīng)的資源和力量處理危機(jī)。運(yùn)用技術(shù)手段引導(dǎo)控制。網(wǎng)管機(jī)構(gòu)要利用互聯(lián)網(wǎng)的監(jiān)控技術(shù)，實(shí)施對(duì)IP地址的監(jiān)測(cè)、跟蹤；實(shí)行網(wǎng)管全天候值班監(jiān)測(cè)，對(duì)“黃賭毒”和有損國(guó)家人民利益等負(fù)面信息進(jìn)行及時(shí)清除；運(yùn)用智能型軟件進(jìn)行敏感詞組的自動(dòng)過濾；部分重要論壇實(shí)行實(shí)名認(rèn)證制度，通過對(duì)論壇發(fā)帖的延時(shí)審查及發(fā)布等措施凈化網(wǎng)絡(luò)環(huán)境，維護(hù)社會(huì)和諧穩(wěn)定。三、項(xiàng)目方案《互聯(lián)網(wǎng)信息收集分析系統(tǒng)》通過對(duì)熱點(diǎn)問題和重點(diǎn)領(lǐng)域比較集中的網(wǎng)站信息，如：網(wǎng)頁(yè)、論壇、BBS等，進(jìn)行24小時(shí)監(jiān)控，隨時(shí)下載最新的消息和意見。下載后完成對(duì)數(shù)據(jù)格式的轉(zhuǎn)換及元數(shù)據(jù)的標(biāo)引。對(duì)下載本地的信息，進(jìn)行初步的過濾和預(yù)處理。對(duì)熱點(diǎn)問題和重要領(lǐng)域?qū)嵤┍O(jiān)控，前提是必須通過人際交互建立輿情監(jiān)控的知識(shí)庫(kù)，用來指導(dǎo)智能分析的過程。對(duì)熱點(diǎn)問題的智能分析，首先基于傳統(tǒng)基于向量空間的特征分析技術(shù)上，對(duì)抓取的內(nèi)容做分類、聚類和摘要分析，對(duì)信息完成初步的再組織。然后在監(jiān)控知識(shí)庫(kù)的指導(dǎo)下進(jìn)行基于輿情的語(yǔ)義分析，使管理者看到的民情民意更有效，更符合現(xiàn)實(shí)。最后將監(jiān)控的結(jié)果，分別推送到不同的職能部門，供制定對(duì)策使用?！痘ヂ?lián)網(wǎng)信息收集分析系統(tǒng)》是利用搜索引擎技術(shù)和網(wǎng)絡(luò)信息挖掘技術(shù)，通過網(wǎng)頁(yè)內(nèi)容的自動(dòng)采集處理、敏感詞過濾、智能聚類分類、主題檢測(cè)、專題聚焦、統(tǒng)計(jì)分析，實(shí)現(xiàn)各單位對(duì)自己相關(guān)網(wǎng)絡(luò)輿情監(jiān)督管理的需要，最終形成輿情簡(jiǎn)報(bào)、輿情專報(bào)、分析報(bào)告、移動(dòng)快報(bào)，為決策層全面掌握輿情動(dòng)態(tài)，做出正確輿論引導(dǎo)，提供分析依據(jù)?！痘ヂ?lián)網(wǎng)信息收集分析系統(tǒng)》是征對(duì)在一定的社會(huì)空間內(nèi)，圍繞中介性社會(huì)事件的發(fā)生、發(fā)展和變化，民眾對(duì)社會(huì)管理者產(chǎn)生和持有的社會(huì)政治態(tài)度于網(wǎng)絡(luò)上表達(dá)出來意愿集合而進(jìn)行的計(jì)算機(jī)監(jiān)測(cè)的系統(tǒng)統(tǒng)稱?！熬W(wǎng)絡(luò)輿情”是較多群眾關(guān)于社會(huì)中各種現(xiàn)象、問題所表達(dá)的信念、態(tài)度、意見和情緒等等表現(xiàn)的總和。網(wǎng)絡(luò)輿情形成迅速，對(duì)社會(huì)影響巨大，加強(qiáng)互聯(lián)網(wǎng)信息監(jiān)管的同時(shí)，組織力量開展信息匯集整理和分析，對(duì)于及時(shí)應(yīng)對(duì)網(wǎng)絡(luò)突發(fā)的公共事件和全面掌握社情民意很有意義。（一）、它包括以下幾個(gè)主要子系統(tǒng)：1、 輿情分析引擎系統(tǒng)輿情分析引擎為系統(tǒng)的核心功能，其主要包括以下功能：熱點(diǎn)識(shí)別能力、自動(dòng)分類、聚類分析、傾向性分析與統(tǒng)計(jì)、主題跟蹤、信息自動(dòng)摘要功能、截取證據(jù)、趨勢(shì)分析、突發(fā)事件分析、報(bào)警系統(tǒng)、統(tǒng)計(jì)報(bào)告。2、 互聯(lián)網(wǎng)信息米集系統(tǒng)采用元搜索與信息雷達(dá)技術(shù)。智能信息抽取技術(shù)主要是針對(duì)特殊

客戶進(jìn)行特定領(lǐng)域的信息采集。3、搜索引擎數(shù)據(jù)管理系統(tǒng)搜索引擎數(shù)據(jù)管理功能主要包括以下功能：對(duì)收集到信息進(jìn)行預(yù)處理；對(duì)搜索引擎數(shù)據(jù)集進(jìn)行階段性的數(shù)據(jù)維護(hù)；支持系統(tǒng)多用戶分級(jí)管理系統(tǒng)，包括用戶逐級(jí)進(jìn)行審核功能；支持信息服務(wù)：最新報(bào)道、熱點(diǎn)新聞、分類閱讀、輿情簡(jiǎn)報(bào)、信息檢索、RSS訂閱等服務(wù)；信息、文檔轉(zhuǎn)換技術(shù)：可以對(duì)信息進(jìn)行傳統(tǒng)文件格式轉(zhuǎn)換。如：Doc、Excel、Access>Rss等文件生成?？缮蓤?bào)表。ii.au*曜推疙花JavaScfim^jHiHTMLWListjf/htft挽計(jì).M黠虹由fltHla雄神折蚣就城侶息涅聊思［F稅最般替地，F(xiàn)幟耳耳補(bǔ)卑F皿棍株臨聊Eii.au*曜推疙花JavaScfim^jHiHTMLWListjf/htft挽計(jì).M黠虹由fltHla雄神折蚣就城侶息涅聊思［F稅最般替地，F(xiàn)幟耳耳補(bǔ)卑F皿棍株臨聊E快峻做是阿米幻段京互聯(lián)啊監(jiān)捶部丹地同最皤內(nèi)向尸肖站BBSitf.-. 境升讖站 員它_-I- 網(wǎng)絡(luò)Bj火堵，安全設(shè)臆俏息采瑰 .個(gè)文搜索啪擎IS執(zhí)史也控：f矣理詞版KU■曲血莎村/BBS也門帖fi「浙右什思陪*（二）、功能簡(jiǎn)述?熱點(diǎn)識(shí)別能力可以根據(jù)新聞出處權(quán)威度、評(píng)論數(shù)量、發(fā)言時(shí)間密集程度等參數(shù)，識(shí)別出給定時(shí)間段內(nèi)的熱門話題。?傾向性分析與統(tǒng)計(jì)對(duì)信息的闡述的觀點(diǎn)、主旨進(jìn)行傾向性分析。以提供參考分析依據(jù)。分析的依據(jù)可根據(jù)信息的轉(zhuǎn)載量、評(píng)論的回言信息時(shí)間密集度。來判別信息的發(fā)展傾向。?主題跟蹤主題跟蹤主要是指針對(duì)熱點(diǎn)話題進(jìn)行信息跟蹤，并對(duì)其進(jìn)行傾向性與趁勢(shì)分析。跟蹤的具體內(nèi)容包括：信息來源、轉(zhuǎn)載量、轉(zhuǎn)載地址、地域分布、信息發(fā)布者等相關(guān)信息元素。其建立在傾向性與趁勢(shì)分析的基礎(chǔ)上。?信息自動(dòng)摘要功能能夠根據(jù)文檔內(nèi)容自動(dòng)抽取文檔摘要信息，這些摘要能夠準(zhǔn)確代表文章內(nèi)容主題和中心思想。用戶無需查看全部文章內(nèi)容，通過該智能摘要即可快速了解文章大意與核心內(nèi)容，提高用戶信息利用效率。而且該智能摘要可以根據(jù)用戶需求調(diào)整不同長(zhǎng)度，滿足不同的需求。主要包括文本信息摘要與網(wǎng)頁(yè)信息摘要兩個(gè)方面。?趨勢(shì)分析通過圖表展示監(jiān)控詞匯和時(shí)間的分布關(guān)系以及趨勢(shì)分析，包括地域信息分布。以提供階段性的分析。如：信息傳播的區(qū)域分布，轉(zhuǎn)載量與轉(zhuǎn)載網(wǎng)站類型等。?突發(fā)事件分析突發(fā)事件不外乎有以下幾種：自然災(zāi)害、社會(huì)災(zāi)難、戰(zhàn)爭(zhēng)、動(dòng)亂和偶發(fā)事件等等?；ヂ?lián)網(wǎng)信息監(jiān)控分析系統(tǒng)主要是針對(duì)互聯(lián)網(wǎng)信息進(jìn)行突發(fā)事件監(jiān)聽與分析。對(duì)熱點(diǎn)信息的傾向分析與趁勢(shì)分析，以監(jiān)聽信息的突發(fā)性。?報(bào)警系統(tǒng)報(bào)警系統(tǒng)主要是針對(duì)輿情分析引擎系統(tǒng)的熱點(diǎn)信息與突發(fā)事件進(jìn)行監(jiān)聽分析，然后根據(jù)信息的語(yǔ)料庫(kù)與報(bào)警監(jiān)控信息庫(kù)進(jìn)行分析。以確保信息的輿論健康發(fā)展。?統(tǒng)計(jì)報(bào)告根據(jù)輿情分析引擎處理后的結(jié)果庫(kù)生成報(bào)告，用戶可通過瀏覽器瀏覽，提供信息檢索功能，根據(jù)指定條件對(duì)熱點(diǎn)話題、傾向性進(jìn)行查詢，并瀏覽信息的具體內(nèi)容，提供決策支持。（三）、系統(tǒng)應(yīng)用目標(biāo)?自定義監(jiān)察范圍，可按行業(yè)、按地域、按信息發(fā)布時(shí)間……等方式監(jiān)察信息內(nèi)容；?自定義監(jiān)察信息級(jí)別；?自定義監(jiān)察信息方式，手工與自動(dòng)監(jiān)察相結(jié)合；?自動(dòng)預(yù)警、報(bào)警，追查信息來源與散布范圍；?自定義規(guī)則實(shí)現(xiàn)對(duì)文字、圖片、視頻、論壇、博客、評(píng)論……等等信息的監(jiān)察與監(jiān)控；?自定義或自動(dòng)掃瞄管轄段的網(wǎng)站；?自動(dòng)重點(diǎn)跟蹤異常內(nèi)容變動(dòng)頻繁的網(wǎng)站或信息來源；?自動(dòng)保留計(jì)算機(jī)無法判別的意識(shí)形態(tài)內(nèi)容進(jìn)行匯總反饋；?實(shí)現(xiàn)信息判別的自我學(xué)習(xí)和信息庫(kù)自動(dòng)升級(jí)。四、項(xiàng)目承擔(dān)單位及基礎(chǔ)工作情況本項(xiàng)日將由昆明道林格科技有限公司及昆明理工大學(xué)信息工程與自動(dòng)化學(xué)院共同承擔(dān)。1、昆明道林格科技有限公司簡(jiǎn)介2、昆明理工大學(xué)信息工程與自動(dòng)化學(xué)院五、項(xiàng)目市場(chǎng)策略《互聯(lián)網(wǎng)信息收集分析系統(tǒng)》根據(jù)其原有客戶希望能夠及時(shí)了解互聯(lián)網(wǎng)上與其有關(guān)的輿情信息的需求，使用多用戶版輿情監(jiān)控系統(tǒng)，為多家客戶提供輿情監(jiān)控、商情分析服務(wù)?！痘ヂ?lián)網(wǎng)信息收集分析系統(tǒng)》增強(qiáng)了針對(duì)信息情報(bào)分析的能力，能夠24小時(shí)自動(dòng)對(duì)日標(biāo)行業(yè)網(wǎng)站（新聞、論壇、博客等）進(jìn)行實(shí)時(shí)監(jiān)控，及時(shí)獲取與己行業(yè)有關(guān)的各項(xiàng)情報(bào)數(shù)據(jù)！系統(tǒng)提供用戶針對(duì)本行業(yè)的特點(diǎn)，使用智能輿情監(jiān)控系統(tǒng)，對(duì)各網(wǎng)站、論壇進(jìn)行24小時(shí)監(jiān)控，將當(dāng)天（24小時(shí)內(nèi)）的用戶發(fā)帖數(shù)據(jù)進(jìn)行整理分析（系統(tǒng)自動(dòng)分析），歸類出一天內(nèi)、三天內(nèi)、一周內(nèi)、一月內(nèi)論壇用戶最關(guān)注的相關(guān)信息，以此做出符合用戶需求的決策，及時(shí)的把握行業(yè)的發(fā)展趨勢(shì)，走在同行的前邊?！痘ヂ?lián)網(wǎng)信息收集分析系統(tǒng)》結(jié)