CBM（降解樹脂）項(xiàng)目數(shù)據(jù)采集分析與知識(shí)管理

1、CBM（降解樹脂）項(xiàng)目數(shù)據(jù)采集分析與知識(shí)管理一、 網(wǎng)絡(luò)信息搜索和提取方法（一）概過現(xiàn)在，雖然不能說人類所有文獻(xiàn)與其他信息都上了互聯(lián)網(wǎng)，但是網(wǎng)上的信息極為豐富，許多都可用于咨詢。但是，許多咨詢?nèi)藛T還不善于甚至不知道如何從網(wǎng)上快速、安全、有效地獲得自己需要的信息和知識(shí)。咨詢工程師應(yīng)當(dāng)知曉網(wǎng)上有何利信息，應(yīng)掌握從網(wǎng)上獲取信息的方法與基本技巧。對(duì)于網(wǎng)上的信息，可利用瀏覽器和搜索引擎獲取。瀏覽器是供用戶閱讀網(wǎng)頁內(nèi)容的軟件；而搜索引擎，指從互聯(lián)網(wǎng)上搜集信息的特定電腦程序。早期的搜索引擎是收集互聯(lián)網(wǎng)中服務(wù)器的地址，按這些服務(wù)器擁有的資源類型將其編成不同的目錄，各個(gè)目錄再逐層分類。搜索引擎則沿著此類層級(jí)向下搜

2、索，找到用戶想要的信息。這種方式只適用于互聯(lián)網(wǎng)信息不多的時(shí)代。隨著互聯(lián)網(wǎng)上信息的迅猛增長，出現(xiàn)了新式搜索引擎，性能大為改進(jìn)，能夠找到網(wǎng)站每一頁的起始地址，隨后搜索網(wǎng)上所有超級(jí)鏈接，把代表超級(jí)鏈接的所有詞匯放入一個(gè)數(shù)據(jù)庫。搜索引擎的功能不再限于搜索，已經(jīng)添加了電子商務(wù)、新聞信息服務(wù)、個(gè)人免費(fèi)電子信箱服務(wù)等。（二）搜索引擎工作原理搜索引擎有信息搜集、信息整理和接受用戶查詢?nèi)糠郑髯怨ぷ髟泶笾氯缦拢?搜集信息：搜索引擎利用稱為網(wǎng)絡(luò)蜘蛛（spider）的自動(dòng)搜索機(jī)器人程序，從少數(shù)幾個(gè)網(wǎng)頁開始，將各個(gè)網(wǎng)頁的超鏈接連結(jié)在一起，只要網(wǎng)頁上有適當(dāng)?shù)某溄樱瑱C(jī)器人便可以遍歷絕大部分網(wǎng)頁。2整理信息：這個(gè)過程

3、稱為“建立索引”。搜索引擎不僅要保存搜集到的信息，還要按照一定規(guī)則編排之。這樣，搜索引擎無須重新翻查已保存的所有信息，便能迅速找到所要的資料，從而能夠大大加快搜索速度。3接受查詢：對(duì)于每時(shí)每刻都會(huì)接到的大量用戶幾乎同時(shí)發(fā)出的查詢請(qǐng)求，搜索引擎按照各個(gè)用戶的要求檢查自己的索引，能在極短時(shí)間內(nèi)找到用戶需要的資料，并交給用戶。目前，搜索引擎交給用戶的主要是網(wǎng)頁鏈接，用戶按照這些鏈接便能找到含有自己所需資料的網(wǎng)頁。搜索引擎一般會(huì)在這些鏈接下加一段有關(guān)這些網(wǎng)頁的摘要，以便用戶判斷此網(wǎng)頁是否含有自己需要的內(nèi)容。（三）搜索引擎種類現(xiàn)在，搜索引擎有很多種，可以從不同的角度分類。按搜索方法，分全文索引、目錄索引

4、、元搜索、垂直搜索、集合式搜索、門戶搜索、個(gè)性搜索、專家型搜索與免費(fèi)鏈接列表等。按搜索對(duì)象，分購物、自然語言、新聞、MP3、圖片等搜索引擎。按搜索范圍，分桌面、地址欄、本地等搜索引擎。按出現(xiàn)的時(shí)間，分第三代、第四代搜索引擎等。現(xiàn)在，用的較多的搜索引擎有Google，百度、Yahoo、MSNSearch，Webcrawler，Lycos，CNetSearch，LookSmart等。（四）搜索方法與技巧要想使搜索引擎能在網(wǎng)上快速找到有關(guān)咨詢的資料，首先要明確查詢目的。目的不同，查詢策略與方法不同。在明確目的之后，還應(yīng)了解查詢的種類與技巧，學(xué)會(huì)恰當(dāng)?shù)厥褂藐P(guān)鍵詞。搜索方法的選擇取決于搜索的內(nèi)容。不同搜

5、索引擎的復(fù)雜條件查詢功能和實(shí)現(xiàn)方法各有不同，網(wǎng)站中一般都有“幫助”和“說明”解釋各自的功能和方法。現(xiàn)在的搜索引擎都有模糊查詢功能。當(dāng)用戶輸入關(guān)鍵詞時(shí)，搜索引擎不但交給用戶關(guān)鍵詞的網(wǎng)址，還發(fā)來與關(guān)鍵詞意義相近的內(nèi)容。比如，查找“建筑報(bào)”一詞時(shí)，模糊查詢搜索的結(jié)果會(huì)有“建筑報(bào)”“建設(shè)報(bào)”“建筑時(shí)報(bào)”等的網(wǎng)址。網(wǎng)址的排列，一般是完全符合關(guān)鍵詞在最前邊，其次是相近的。模糊查詢的結(jié)果往往并非用戶所需，為了排除不需要的結(jié)果，各種搜索引擎也設(shè)置了相應(yīng)的功能。二、 工程咨詢信息采集途徑調(diào)查方法可分為普查與抽樣調(diào)查兩大類，這兩類都有文案調(diào)查、實(shí)地調(diào)查、問卷調(diào)查、實(shí)驗(yàn)調(diào)查等幾種。選擇調(diào)查方法要考慮收集信息的能力、

6、調(diào)查研究的成本、時(shí)間要求、樣本控制和人員效應(yīng)的控制程度。上述各種方法，各有利弊，各有適用范圍。文案調(diào)查是上述各種調(diào)查方法中最簡單、最一般和常用的方法，也是其他調(diào)查方法的基礎(chǔ)。實(shí)地調(diào)查能夠控制調(diào)查過程，應(yīng)用靈活，信息充分，但耗時(shí)長、費(fèi)用多，調(diào)查對(duì)象易受心理暗示影響，不夠客觀。問卷調(diào)查適應(yīng)范圍廣、簡單易行、費(fèi)用較低，得到了大量應(yīng)用。實(shí)驗(yàn)調(diào)查最復(fù)雜、費(fèi)用高、應(yīng)用范圍有限，但調(diào)查結(jié)果可信度較高。（一）文案調(diào)查法文案調(diào)查法是指對(duì)已經(jīng)存在的各種資料檔案，以查閱和歸納的方式進(jìn)行的市場調(diào)查。文案調(diào)查法又稱二手資料或文獻(xiàn)調(diào)查。文案資料來源很多，主要有：國際組織和政府機(jī)構(gòu)資料；行業(yè)資料；公開出版物；相關(guān)企業(yè)和行業(yè)

7、網(wǎng)站；有關(guān)企業(yè)的內(nèi)部資料。（二）問卷調(diào)查法這種方法是調(diào)查人員以面談、電話詢問、網(wǎng)上填表或郵寄問卷等方式，了解調(diào)查對(duì)象的行為方式，從而收集信息。問卷調(diào)查法是市場調(diào)查常用方法，尤其在消費(fèi)者行為調(diào)查中大量應(yīng)用，其核心工作是設(shè)計(jì)問卷，實(shí)施問卷調(diào)查。（三）實(shí)地調(diào)查法此法是調(diào)查人員通過跟蹤、記錄調(diào)查對(duì)象的行為取得第一手資料的方法。這種方法是調(diào)查人員直接到市場或某些場所（商品展銷會(huì)、商品博覽會(huì)、商場等）親身感受或借助于某些攝錄設(shè)備和儀器，跟蹤、記錄調(diào)查對(duì)象的活動(dòng)、行為和事物的特點(diǎn)，獲取所需信息資料。（四）實(shí)驗(yàn)調(diào)查法該法是指調(diào)查人員在調(diào)查過程中，通過改變某些影響調(diào)查對(duì)象的因素，觀察調(diào)查對(duì)象行為的變化，從而獲得

8、消費(fèi)行為和某些因素之間的內(nèi)在因果關(guān)系。該法主要用于消費(fèi)行為的調(diào)查，企業(yè)推出新產(chǎn)品、改變產(chǎn)品外形和包裝、調(diào)整產(chǎn)品價(jià)格、改變廣告方式時(shí)，都可以用這種方法。三、 數(shù)據(jù)分析與挖掘概述（一）信息分析信息分析是根據(jù)咨詢問題的具體需要，對(duì)與之有關(guān)的信息進(jìn)行整理、鑒別、評(píng)價(jià)、分析和綜合，以便取得咨詢所需新信息的過程。信息分析有如下幾種用途：1跟蹤。所謂跟蹤，就是及時(shí)了解各領(lǐng)域新動(dòng)向、新發(fā)展，從而發(fā)現(xiàn)問題、提出問題。2比較。比較各種事物的內(nèi)部矛盾之后，把握事物間的聯(lián)系，認(rèn)識(shí)事物的本質(zhì)，從而提出問題、確定目標(biāo)、擬定方案并作出選擇。3預(yù)測。利用已掌握的信息、知識(shí)和手段，推斷事物的未來或未知方面。4評(píng)價(jià)。進(jìn)行評(píng)價(jià)時(shí)應(yīng)

9、選擇合適的變量和評(píng)價(jià)指標(biāo)，應(yīng)當(dāng)考慮評(píng)價(jià)對(duì)象之間的可比性。信息分析所用方法，可分為定性和定量分析兩種。定性方法主要靠邏輯推理；而定量方法涉及數(shù)據(jù)間的數(shù)量關(guān)系，要建立數(shù)學(xué)模型，計(jì)算、求解。如今，信息越來越復(fù)雜，定性與定量分析已無法單獨(dú)奏效，只能越來越多地結(jié)合起來。（二）數(shù)據(jù)分析數(shù)據(jù)分析是信息分析的一部分，數(shù)據(jù)分析是對(duì)收集數(shù)據(jù)進(jìn)行系統(tǒng)的分析，建立適當(dāng)?shù)哪Ｐ?，揭示?shù)據(jù)中隱含的技術(shù)、經(jīng)濟(jì)、社會(huì)和其他關(guān)系，以及發(fā)展趨勢，為有關(guān)的咨詢活動(dòng)提交的有用的數(shù)字、信息或建議。數(shù)據(jù)分析的對(duì)象可分為時(shí)間序列和截面數(shù)據(jù)。如企業(yè)歷年的咨詢收入、利潤總額等就是時(shí)間序列。截面數(shù)據(jù)是在同一時(shí)間的數(shù)據(jù)，如企業(yè)同一年咨詢業(yè)務(wù)數(shù)目、營

10、業(yè)額、費(fèi)用、收入、人工耗費(fèi)等。兩種數(shù)據(jù)都要注意樣本容量大小。對(duì)于截面數(shù)據(jù)，常用線性或非線性回歸模型體現(xiàn)數(shù)據(jù)之間的各種關(guān)系。數(shù)據(jù)分析屬定量分析，包括數(shù)據(jù)統(tǒng)計(jì)分析、時(shí)間數(shù)據(jù)分析、空間數(shù)據(jù)分析。（三）數(shù)據(jù)挖掘數(shù)據(jù)挖掘就是從數(shù)據(jù)中挖掘出隱含、先前未知、有潛在用途，最終可為人理解的關(guān)系、模式、趨勢和其他有用信息，并建立模型，用于預(yù)測、判斷或決策，幫助企業(yè)更好地適應(yīng)變化并做出更明智的決策的過程。數(shù)據(jù)挖掘廣泛應(yīng)用于制造、金融、零售、保健、中醫(yī)藥及電信等行業(yè)的客戶關(guān)系管理、風(fēng)險(xiǎn)防范、供應(yīng)鏈管理、競爭優(yōu)勢分析、部門分析等領(lǐng)域。數(shù)據(jù)挖掘要用到統(tǒng)計(jì)分析、人工智能、數(shù)據(jù)庫和神經(jīng)網(wǎng)絡(luò)等方面的知識(shí)，如記憶推理、聚類分析、

11、關(guān)聯(lián)分析、決策樹、神經(jīng)網(wǎng)絡(luò)、基因算法等。數(shù)據(jù)挖掘需要用戶參與，并非某種單一工具、技術(shù)或軟件即可獨(dú)自完成。另一方面，并非所有信息查詢都可視為數(shù)據(jù)挖掘。例如，使用數(shù)據(jù)庫管理系統(tǒng)查找個(gè)別記錄，或用搜索引擎查找互聯(lián)網(wǎng)特定的網(wǎng)頁，屬于信息檢索，不能視為數(shù)據(jù)挖掘。當(dāng)然，數(shù)據(jù)挖掘技術(shù)也有強(qiáng)大的信息檢索能力。四、 數(shù)據(jù)統(tǒng)計(jì)分析數(shù)據(jù)分析重要的一類是對(duì)具有隨機(jī)性質(zhì)的數(shù)據(jù)進(jìn)行分析，在多數(shù)情況下是用于預(yù)測。本段僅介紹統(tǒng)計(jì)分析。統(tǒng)計(jì)分析不僅是計(jì)算樣本的數(shù)字特征（期望值、方差、相關(guān)系數(shù)、協(xié)方差、離散度、概率分布等），還應(yīng)當(dāng)建立適當(dāng)?shù)哪Ｐ?，進(jìn)而做出預(yù)測。統(tǒng)計(jì)分析一般有如下工作或階段。1選擇數(shù)字特征。統(tǒng)計(jì)分析，就是利用若干數(shù)

12、字特征全面認(rèn)識(shí)數(shù)據(jù)的統(tǒng)計(jì)規(guī)律。選擇數(shù)字特征是統(tǒng)計(jì)分析研究問題的準(zhǔn)備階段，是統(tǒng)計(jì)過程的重要環(huán)節(jié)。數(shù)字特征應(yīng)當(dāng)：（1）能夠客觀地反映研究分析對(duì)象的性質(zhì)、特點(diǎn)、內(nèi)在聯(lián)系和運(yùn)動(dòng)過程；（2）盡可能突出重點(diǎn)，反映分析對(duì)象的全貌；（3）應(yīng)能反映分析對(duì)象的變化；（4）便于資料獲取。2收集并整理數(shù)據(jù)。確定了需用的數(shù)字特征之后，就要收集并整理所需的數(shù)據(jù)。樣本的容量與質(zhì)量對(duì)統(tǒng)計(jì)結(jié)果影響極大。3計(jì)算數(shù)字特征。利用整理后的樣本計(jì)算必要的數(shù)字特征。這項(xiàng)工作可以同下面的建模合在一起，利用適當(dāng)?shù)能浖M(jìn)行。4建立模型。計(jì)算出樣本數(shù)字特征后，應(yīng)選擇適合樣本模式的模型。統(tǒng)計(jì)分析可用的模型很多，都有各自的特點(diǎn)及適用條件。選擇模型時(shí)，

13、應(yīng)全面考慮研究對(duì)象與目的、到手的數(shù)據(jù)與資料、統(tǒng)計(jì)方法等各自的特點(diǎn)，以及咨詢?nèi)藛T對(duì)方法的熟悉程度等。5檢驗(yàn)?zāi)Ｐ驼`差。建模之后，可利用樣本檢驗(yàn)?zāi)Ｐ偷恼`差，誤差大小由樣本與所選模型與方法所決定。根據(jù)經(jīng)濟(jì)學(xué)理論和研究對(duì)象的具體特點(diǎn)，分析和評(píng)價(jià)模型誤差，以及模型和方法本身；若誤差未達(dá)到要求，應(yīng)改進(jìn)模型與方法。6利用模型預(yù)測。預(yù)測是咨詢結(jié)論和建議的基本依據(jù)之一，應(yīng)成為咨詢及決策人員的高質(zhì)量信息。7評(píng)價(jià)統(tǒng)計(jì)與預(yù)測結(jié)果。對(duì)統(tǒng)計(jì)與預(yù)測結(jié)果進(jìn)行評(píng)價(jià)的任務(wù)是對(duì)初步統(tǒng)計(jì)結(jié)果（如離散程度、影響、走勢等）進(jìn)行概括，并尋找它們之間的聯(lián)系。評(píng)價(jià)過程一般有：形成初步概念；對(duì)現(xiàn)象定性；提出主要觀點(diǎn)；闡述所提觀點(diǎn)的理由；提出論據(jù)；

14、得出結(jié)論。咨詢工程師在進(jìn)行評(píng)價(jià)時(shí)，要在大局高度上全面、長遠(yuǎn)地看問題，多方面觀察，不偏廢任何一方；注意數(shù)據(jù)的銜接，當(dāng)來源不同的數(shù)據(jù)矛盾時(shí)應(yīng)弄清情況后再做取舍。五、 信息鑒別及必要性（一）信息鑒別數(shù)據(jù)與信息鑒別，可稱信息識(shí)別，就是將信息與具有特定屬性的“模式”進(jìn)行比較，進(jìn)而判斷信息的類別或?qū)傩?。具體而言，就是信息收集或使用者運(yùn)用已有的知識(shí)和經(jīng)驗(yàn)，在對(duì)獲取的信息進(jìn)行初步分析之后，按照一定原則和目的，辨認(rèn)與甄別信息的真?zhèn)?、輕重主次、是否完整、是否有用，以及用途大小等。（二）信息鑒別的必要性互聯(lián)網(wǎng)時(shí)代，信息極為豐富，大大開闊了人們的眼界。然而，蜂擁而至，難辨真假的信息摻雜在一起，常常使人們陷入另一種迷茫

15、，甚至成了海量信息的奴隸。過量的信息若不篩選，會(huì)使決策者無所適從?，F(xiàn)在，互聯(lián)網(wǎng)上充斥著偽造、篡改缺失、無代表性、誤傳、以及過時(shí)等信息。有些信息背后隱藏著各種政治、經(jīng)濟(jì)社會(huì)的利益團(tuán)體正當(dāng)或不正當(dāng)?shù)哪康暮推髨D。信息識(shí)別及時(shí)與否決定了決策是否正確而又及時(shí)，決定了企業(yè)、事業(yè)、項(xiàng)目和其他活動(dòng)的命運(yùn)。對(duì)于工程咨詢，信息識(shí)別同樣十分必要。信息識(shí)別并非簡單工作，對(duì)從事者有很高的要求。決策者固然應(yīng)高瞻遠(yuǎn)矚，但決策的基礎(chǔ)是真實(shí)、可靠的信息。決定信息識(shí)別成敗的主要因素有：對(duì)服務(wù)目標(biāo)的正確認(rèn)識(shí)及其深刻程度；識(shí)別者實(shí)事求是的態(tài)度和已有的知識(shí)、推理與判斷能力。六、 信息的綜合信息綜合是信息工作的重要內(nèi)容。采集來的信息經(jīng)常

16、是零散、無序，甚至殘缺不全，無法直接使用。對(duì)于這樣的信息，須進(jìn)行分析、聯(lián)系、推斷、整理和組合，使之成為有用信息，然后確定其特征，如精度、類型、長度、保密度、保留時(shí)間、用途等。信息綜合有兩種方式：一是對(duì)已有信息挖掘、延伸，引發(fā)創(chuàng)新需求的新信息，達(dá)到信息的“增值”，二是通過設(shè)計(jì)和試驗(yàn)創(chuàng)造新的信息。有價(jià)值的信息往往是反復(fù)推理分析和猜想后的結(jié)果，這個(gè)過程要求咨詢工程師具備很強(qiáng)的分析、聯(lián)想、綜合與創(chuàng)造能力。七、 現(xiàn)代工程咨詢方法的特點(diǎn)現(xiàn)代工程咨詢方法的特點(diǎn)是，定性分析和定量分析相結(jié)合，重視定量分析；靜態(tài)分析與動(dòng)態(tài)分析相結(jié)合，重視動(dòng)態(tài)分析；統(tǒng)計(jì)分析與預(yù)測分析相結(jié)合，重視預(yù)測分析。定性分析與定量分析1定性分

17、析定性分析是通過研究事物構(gòu)成要素間的相互聯(lián)系來揭示事物本質(zhì)的方法，它是在邏輯分析、判斷推理的基礎(chǔ)上，對(duì)客觀事物進(jìn)行分析與綜合，從而找出事物發(fā)展內(nèi)在規(guī)律性，確定事物的本質(zhì)。在工程咨詢研究中，許多難以用計(jì)量表達(dá)的場合，定性分析方法可以發(fā)揮重要作用。2定量分析定量分析是依據(jù)統(tǒng)計(jì)數(shù)據(jù)，選擇建立合適的數(shù)學(xué)模型，計(jì)算出分析對(duì)象的各項(xiàng)指標(biāo)及其數(shù)值的一種方法。它是通過反映一定質(zhì)的事物量的關(guān)系來揭示事物內(nèi)在規(guī)律的方法，在數(shù)學(xué)、統(tǒng)計(jì)學(xué)、運(yùn)籌學(xué)、計(jì)量學(xué)、計(jì)算機(jī)等學(xué)科基礎(chǔ)之上，通過方程、數(shù)學(xué)圖表和模型等方式來研究事物的本質(zhì)。在工程咨詢工作中采用定量分析的方法，對(duì)復(fù)雜事物進(jìn)行數(shù)據(jù)處理，進(jìn)行比較分析，可以使問題更為清晰，

18、解決方案更精確。靜態(tài)分析與動(dòng)態(tài)分析1靜態(tài)分析靜態(tài)分析是觀測和評(píng)價(jià)事物某一時(shí)點(diǎn)狀態(tài)的一種方法。如項(xiàng)目評(píng)價(jià)中通過計(jì)算靜態(tài)投資回收期、總投資收益率、資本金凈利潤率等指標(biāo)，可以對(duì)項(xiàng)目的財(cái)務(wù)效益得出初步的判斷。2動(dòng)態(tài)分析在工程咨詢服務(wù)的各個(gè)階段，特別是在項(xiàng)目決策評(píng)價(jià)階段，要樹立動(dòng)態(tài)觀念，如考慮資金時(shí)間價(jià)值、市場供求變化、技術(shù)發(fā)展變化、社會(huì)經(jīng)濟(jì)環(huán)境的變化等。現(xiàn)代項(xiàng)目財(cái)務(wù)評(píng)價(jià)一般以動(dòng)態(tài)分析為主，主要進(jìn)行項(xiàng)目現(xiàn)金流量分析，計(jì)算財(cái)務(wù)凈現(xiàn)值、內(nèi)部收益率等指標(biāo)，并進(jìn)行風(fēng)險(xiǎn)概率分析等。統(tǒng)計(jì)分析與預(yù)測分析1統(tǒng)計(jì)分析統(tǒng)計(jì)分析是對(duì)分析對(duì)象過去和現(xiàn)在的信息進(jìn)行收集、整理、統(tǒng)計(jì)和分析。在現(xiàn)代工程決策研究咨詢中經(jīng)常需要采取多種方法和渠道，收集大量的統(tǒng)計(jì)數(shù)據(jù)，包括行業(yè)、區(qū)域、市場、技術(shù)、企業(yè)等的統(tǒng)計(jì)資料和信息，從而分析、歸納和總結(jié)事物的發(fā)展規(guī)律，把握發(fā)展動(dòng)向；在項(xiàng)目執(zhí)行階段，也需要對(duì)項(xiàng)目的執(zhí)行情況進(jìn)行監(jiān)控，對(duì)投資、質(zhì)量