自粘墻紙公司工程項目數(shù)據(jù)采集分析與知識管理（完整版）

1、泓域咨詢/自粘墻紙公司工程項目數(shù)據(jù)采集分析與知識管理自粘墻紙公司工程項目數(shù)據(jù)采集分析與知識管理xxx投資管理公司一、 “互聯(lián)網(wǎng)+”背景下的工程咨詢信息管理“互聯(lián)網(wǎng)+”模式能充分發(fā)揮互聯(lián)網(wǎng)在社會資源配置中的優(yōu)化和集成作用，將互聯(lián)網(wǎng)的創(chuàng)新成果深度融合于各領(lǐng)域之中。工程咨詢行業(yè)本身就具有數(shù)據(jù)化的天然屬性，對“互聯(lián)網(wǎng)+”模式有著接納和融合的先天優(yōu)勢?！盎ヂ?lián)網(wǎng)+”模式的到來給工程咨詢行業(yè)的發(fā)展帶來了新的催化劑和生產(chǎn)力，也帶來新思維模式和發(fā)展空間。隨著計算機(jī)與通信技術(shù)的飛速發(fā)展，互聯(lián)網(wǎng)不斷擴(kuò)展和普及，網(wǎng)絡(luò)技術(shù)的發(fā)展使工程咨詢機(jī)構(gòu)能夠以快捷、低成本的方式獲取更多的信息資源?！盎ヂ?lián)網(wǎng)+工程咨詢”系統(tǒng)是建設(shè)基于

2、互聯(lián)網(wǎng)的工程咨詢機(jī)構(gòu)系統(tǒng)，以豐富的信息資源為管理重心，同時全面集成客戶、咨詢、銷售等業(yè)務(wù)處理系統(tǒng)及業(yè)務(wù)信息，支持工程咨詢機(jī)構(gòu)內(nèi)部各層級間及工程咨詢機(jī)構(gòu)與外部環(huán)境有效溝通的信息管理系統(tǒng)。（一）“互聯(lián)網(wǎng)+”對工程咨詢數(shù)據(jù)分析的作用工程咨詢的工作與互聯(lián)網(wǎng)連接，使工程咨詢可與無限的知識、專家、信息等實現(xiàn)即時對接。一個項目可通過互聯(lián)網(wǎng)連接強(qiáng)大數(shù)據(jù)信息庫，提供大量相關(guān)理論知識與概念，然后通過線上咨詢與更多專家進(jìn)行溝通、研討，最后可自動與全球其他類似案例進(jìn)行匹配，提供建設(shè)性的意見與建議?！盎ヂ?lián)網(wǎng)+工程咨詢”系統(tǒng)突破傳統(tǒng)局限，利用互聯(lián)網(wǎng)信息化技術(shù)將信息流、數(shù)據(jù)流、工作流和資金流集成，形成強(qiáng)大的集聚效應(yīng)，使工程

3、咨詢行業(yè)在未來的市場競爭中不斷發(fā)展，呈現(xiàn)一種無限制發(fā)展的態(tài)勢。是提高工程咨詢服務(wù)效率和水平。應(yīng)用互聯(lián)網(wǎng)有利于工程咨詢?nèi)藛T掌握和有效利用相關(guān)數(shù)據(jù)信息，及時跟蹤新政策、新技術(shù)的變化，增強(qiáng)決策者信息處理能力，提高工程咨詢的服務(wù)效率。二是提高信息的準(zhǔn)確性和及時性。及時、準(zhǔn)確的獲取信息是工程咨詢的基礎(chǔ)，信息技術(shù)改變了工程咨詢?nèi)藛T獲取信息、搜集信息和傳遞信息的方式，工程咨詢數(shù)據(jù)的存儲、整理、分析、查詢、統(tǒng)計和傳遞可通過專業(yè)的信息系統(tǒng)實現(xiàn)，縮短了信息傳遞周期。三是有效控制工程咨詢項目成本。將工程咨詢項目執(zhí)行成本納入管理范圍，通過統(tǒng)計分析發(fā)現(xiàn)項目管理中的問題，找出制約效益的瓶頸，從而降低項目成本，提高工程咨詢

4、單位的效益。（二）信息管理目的與任務(wù)工程咨詢企業(yè)自己擁有大量信息，使用方便、可靠、費用低。因此，只有當(dāng)本企業(yè)缺乏所需信息時，才考慮其他來源。工程咨詢企業(yè)在長期為客戶服務(wù)中產(chǎn)生很多成果與文件，如客戶資料、產(chǎn)品配方、生產(chǎn)工藝、設(shè)計圖紙、貨源資料、營銷方案、財務(wù)報告等，往往使工程咨詢企業(yè)形成競爭優(yōu)勢。這些寶貴資源若管理不善則不但無法得到有效利用，還會危及工程咨詢企業(yè)的競爭地位和安全。目前，上述信息十分龐雜，有些企業(yè)不善于管理，仍然依靠資料室、圖書館等傳統(tǒng)手段保存和管理上述信息，未設(shè)立有效的信息管理系統(tǒng)，致使員工在查找所需信息時耗費了大量不必要的時間，甚至找不到本企業(yè)實際上有的數(shù)據(jù)、信息、文件或其他資

5、料，造成了資源的極大浪費；即使使用數(shù)據(jù)庫，能力也很有限。另一方面，一些企業(yè)內(nèi)的某些部門囿于自身利益，不愿意將自己掌握的信息與其他部門共事。落后的信息管理已經(jīng)嚴(yán)重妨礙了咨詢業(yè)務(wù)的發(fā)展，工程咨詢企業(yè)應(yīng)當(dāng)了解信息管理的重要性及緊迫性，迅速改變現(xiàn)狀。信息管理是指將分散、無序、龐雜的數(shù)據(jù)信息按照一定規(guī)則加以識別、編排并記載各種信息之間的聯(lián)系，進(jìn)而保存、添加、檢索、共享和利用。為了使信息管理行之有效，應(yīng)當(dāng)建立有效的制度，促使企業(yè)內(nèi)各部門之間共享各自掌握的數(shù)據(jù)與信息，盡可能地減少因重復(fù)收集數(shù)據(jù)與信息而浪費的資源，增加企業(yè)的整體收益。信息管理的任務(wù)是了解信息使用者的具體需要，對信息進(jìn)行全面的收集、適當(dāng)?shù)暮Y選、

6、正確的分析、恰當(dāng)?shù)恼砗蛢Υ妫⑦m合需要的信息及時、準(zhǔn)確、經(jīng)濟(jì)地交給各級工程咨詢和決策人員。咨詢企業(yè)應(yīng)當(dāng)利用先進(jìn)的信息管理手段，建立適合本企業(yè)需要的數(shù)據(jù)庫管理系統(tǒng)，加強(qiáng)對本企業(yè)內(nèi)外信息的全面管理，為本企業(yè)咨詢業(yè)務(wù)及時提供全面、準(zhǔn)確、最新的信息。（三）信息管理技術(shù)與方法1信息管理基本做法對于數(shù)量巨大、種類繁多的數(shù)據(jù)、信息或其他資料，有一些基本辦法，不僅適用于以往的圖書室、圖書館、檔案館、博物館等，也適用于計算機(jī)數(shù)據(jù)庫系統(tǒng)。例如，分類與編目方法，現(xiàn)在微軟公司的Windows文件系統(tǒng)所依據(jù)的就是歷史悠久的分類與編目原則。2信息分類與編目對于工程咨詢企業(yè)掌握的信息，有多種分類與編目方式。例如，按企業(yè)

7、管理層次分類編目，大企業(yè)，目錄第一層按企業(yè)總體組織劃分，如公司總部、子（分）公司；第二層可按企業(yè)各級的職能部門劃分，如人力資源部、財務(wù)資產(chǎn)部、綜合管理部、技術(shù)質(zhì)量部、經(jīng)營計劃部等職能部門，以及規(guī)劃部門、設(shè)計部門等業(yè)務(wù)部門；第三層可按各業(yè)務(wù)部門的行政科室或者項目團(tuán)隊來劃分。分類方法的選擇，既要考慮企業(yè)擁有的信息內(nèi)容、形式與性質(zhì)，也要考慮企業(yè)為客戶提供咨詢服務(wù)的方式與特點，或者將兩方面結(jié)合起來，使各種類別的信息便于查詢。例如，公司新聞、企業(yè)規(guī)章制度、會議紀(jì)要等，可以歸為一類，供一般用戶查詢。而對于圖檔，可以按項目名稱、時間、業(yè)務(wù)部門、版本、關(guān)鍵字、文字說明、關(guān)聯(lián)信息等逐層分類。為了便于企業(yè)員工更好

8、地利用企業(yè)擁有的信息資源，可以信息地圖導(dǎo)航的方式編制目錄。信息地圖可按照上述分類方法編制，使用戶能夠快速找到他們需要的信息與資料。3檢索功能與權(quán)限信息管理系統(tǒng)必須有完善的查詢功能，允許使用者以多種方式查詢。查詢系統(tǒng)應(yīng)當(dāng)靈活、具有模糊查詢功能，以滿足不同人員的查詢習(xí)慣與偏好。查詢結(jié)果能夠以多種方式顯示或交給用戶。當(dāng)然，為了信息的安全，查詢系統(tǒng)應(yīng)當(dāng)具備權(quán)限管理功能。（四）現(xiàn)代信息管理技術(shù)信息管理人員應(yīng)確保將必要的原始信息收集齊全，加工成可用信息。還要確保企業(yè)內(nèi)部人員在合適的時間以合適的形式取得并利用。信息管理要確保企業(yè)的信息準(zhǔn)確、及時、安全，確保滿足所有與工程咨詢有關(guān)的信息要求。對于非數(shù)字信息，可

9、參考圖書館藏書、文獻(xiàn)分類與編目規(guī)則加以編排，購置相應(yīng)設(shè)施存放此類信息。對于數(shù)字信息，可以保存在計算機(jī)數(shù)據(jù)庫中并備份。1建立數(shù)據(jù)庫管理系統(tǒng)數(shù)據(jù)庫管理系統(tǒng)是根據(jù)數(shù)據(jù)模型研制的描述、建立和管理數(shù)據(jù)庫的專用軟件，一般由數(shù)據(jù)庫語言、數(shù)據(jù)庫管理程序和數(shù)據(jù)庫使用程序三部分組成。數(shù)據(jù)庫語言主要用于建立數(shù)據(jù)庫、使用數(shù)據(jù)庫和對數(shù)據(jù)庫進(jìn)行維護(hù)。數(shù)據(jù)庫管理程序是對數(shù)據(jù)庫的運(yùn)行進(jìn)行管理、調(diào)度和控制的例行程序。數(shù)據(jù)庫使用程序是對數(shù)據(jù)進(jìn)行維護(hù)使其處于運(yùn)行狀態(tài)而使用的各種數(shù)據(jù)庫服務(wù)程序。數(shù)據(jù)庫管理系統(tǒng)的功能因系統(tǒng)不同而有所差異，一般包括：定義數(shù)據(jù)庫、裝人數(shù)據(jù)庫、操作數(shù)據(jù)庫、維護(hù)數(shù)據(jù)庫、數(shù)據(jù)通信等。數(shù)據(jù)庫管理系統(tǒng)可分為小型和大

10、中型數(shù)據(jù)庫；亦可分為關(guān)系數(shù)據(jù)庫、面向?qū)ο髷?shù)據(jù)庫、工程數(shù)據(jù)庫、多媒體數(shù)據(jù)庫等。關(guān)系數(shù)據(jù)庫在一般信息系統(tǒng)中發(fā)揮著巨大作用，是面向?qū)ο髷?shù)據(jù)庫、工程數(shù)據(jù)庫和多媒體數(shù)據(jù)庫的基礎(chǔ)。2信息安全管理信息安全一般指信息的完整和用途是否得到了有效保護(hù)。信息安全分為信息系統(tǒng)、數(shù)據(jù)庫、個人隱私、商用信息、國家機(jī)密的保護(hù)等方面。保密技術(shù)的缺陷、網(wǎng)絡(luò)無限制傳播、計算機(jī)病毒、網(wǎng)上犯罪等都威脅到信息的安全。工程咨詢企業(yè)向委托人提出的方案和技術(shù)，以及委托人提供的信息容易為競爭對手取得，從而損害自己的競爭力，損害委托人的利益。目前某些項目的可行性研究報告未刪除客戶的敏感信息就上傳到很多網(wǎng)站，不同程度地泄漏了本應(yīng)為客戶保密的內(nèi)容。

11、對此，應(yīng)當(dāng)給予充分重視，配備必要的設(shè)備，安裝可靠的防護(hù)軟件。企業(yè)若不能及時有效地采取措施，信息一旦泄漏會造成不可估量的損失和損害。企業(yè)必須防止委托人和自身因泄密而受到損害。良好的信息安全管理可以降低運(yùn)營風(fēng)險、保持企業(yè)競爭力。保密有多種方式，主要有：1）咨詢業(yè)務(wù)當(dāng)事人事先簽訂保密協(xié)議，并嚴(yán)格執(zhí)行；2）對信息庫設(shè)置使用權(quán)限。一般可根據(jù)信息的重要性和敏感程度分為若干密級，為各級信息設(shè)置相應(yīng)的使用權(quán)限。橫向權(quán)限用來控制查詢和使用?？v向權(quán)限可考慮信息屬性和用戶兩方面，為各種信息設(shè)置相應(yīng)的安全級別。普通知識，如企業(yè)文化、常用規(guī)章制度等，安全級別較低，可在企業(yè)內(nèi)部充分共享。而諸如合同、經(jīng)驗、涉密圖檔等，只能

12、在小范圍內(nèi)交流，安全級別要高。各種用戶也應(yīng)設(shè)置權(quán)限級別，并將其與信息的安全級別對應(yīng)起來。橫向與縱向的保護(hù)辦法結(jié)合起來，可構(gòu)成比較嚴(yán)密、完善的安全體系，既能保證信息得到充分利用，又能減少泄露的機(jī)會。二、 工程咨詢信息及其管理概述（一）工程咨詢信息的內(nèi)涵信息資源是工程咨詢行業(yè)的核心資源，通過獲取海量有效的信息，依靠信息、知識和智慧、先進(jìn)科技手段進(jìn)行服務(wù)。信息爆炸的社會要求工程咨詢行業(yè)服務(wù)機(jī)構(gòu)擁有獲取信息、處理信息的能力和手段。工程咨詢項目管理信息化是結(jié)合行業(yè)業(yè)務(wù)特點，以信息資源開發(fā)利用為核心，利用現(xiàn)代信息技術(shù)、網(wǎng)絡(luò)技術(shù)等現(xiàn)代科技，強(qiáng)化信息技術(shù)在業(yè)務(wù)中的滲透，在工程咨詢項目各環(huán)節(jié)中推廣應(yīng)用信息技術(shù)，

13、以提高工程咨詢機(jī)構(gòu)管理決策能力，提升咨詢工作效率，增強(qiáng)機(jī)構(gòu)行業(yè)競爭力。工程咨詢需要的信息，涉及自然、資源、氣候、水文、地質(zhì)、人口、人文、項目投入產(chǎn)出、市場（商品、勞動力、金融）、財政及政策、貨幣政策、法規(guī)、標(biāo)準(zhǔn)與規(guī)范、發(fā)展規(guī)劃等。（二）工程咨詢信息管理的必要性我國經(jīng)濟(jì)進(jìn)入新常態(tài)，全球化、綠色發(fā)展、結(jié)構(gòu)調(diào)整、新技術(shù)應(yīng)用等成為發(fā)展主基調(diào)，這不僅需要規(guī)模巨大的投資，而且更加注重發(fā)展質(zhì)量，這就給工程咨詢業(yè)帶來了極大的發(fā)展機(jī)遇，也對工程咨詢信息管理提出了新的需求。未來工程咨詢將更多的應(yīng)用建筑信息模型技術(shù)（BIM）、大數(shù)據(jù)、物聯(lián)網(wǎng)、地理信息系統(tǒng)（GIS）無人機(jī)應(yīng)用、AR仿真模擬、人工智能輔助查詢與分析系統(tǒng)

14、等，也迫切要求工程咨詢業(yè)能夠盡快改變傳統(tǒng)咨詢手段，必須針對新技術(shù)、新產(chǎn)業(yè)進(jìn)行調(diào)整，建立完善的數(shù)據(jù)分析與知識管理方法。傳統(tǒng)的信息管理模式工作流程繁瑣，耗費人力物力，亟待向智能管理模式邁進(jìn)。工程咨詢信息管理以豐富的信息資源為管理重點，利用“互聯(lián)網(wǎng)+”、數(shù)據(jù)庫管理系統(tǒng)等先進(jìn)的信息管理手段，協(xié)助工程咨詢?nèi)藛T能夠從海量的業(yè)務(wù)數(shù)據(jù)中提供有用的信息，進(jìn)而做出科學(xué)的判斷以及正確的決策，從而實現(xiàn)為工程咨詢的決策提供更加全面及時的信息支出，使工作更加便捷，回復(fù)也更加及時，大幅減少出現(xiàn)錯誤的概率，安全性更高。三、 數(shù)據(jù)分析與挖掘概述（一）信息分析信息分析是根據(jù)咨詢問題的具體需要，對與之有關(guān)的信息進(jìn)行整理、鑒別、評價

15、、分析和綜合，以便取得咨詢所需新信息的過程。信息分析有如下幾種用途：1跟蹤。所謂跟蹤，就是及時了解各領(lǐng)域新動向、新發(fā)展，從而發(fā)現(xiàn)問題、提出問題。2比較。比較各種事物的內(nèi)部矛盾之后，把握事物間的聯(lián)系，認(rèn)識事物的本質(zhì)，從而提出問題、確定目標(biāo)、擬定方案并作出選擇。3預(yù)測。利用已掌握的信息、知識和手段，推斷事物的未來或未知方面。4評價。進(jìn)行評價時應(yīng)選擇合適的變量和評價指標(biāo)，應(yīng)當(dāng)考慮評價對象之間的可比性。信息分析所用方法，可分為定性和定量分析兩種。定性方法主要靠邏輯推理；而定量方法涉及數(shù)據(jù)間的數(shù)量關(guān)系，要建立數(shù)學(xué)模型，計算、求解。如今，信息越來越復(fù)雜，定性與定量分析已無法單獨奏效，只能越來越多地結(jié)合起來

16、。（二）數(shù)據(jù)分析數(shù)據(jù)分析是信息分析的一部分，數(shù)據(jù)分析是對收集數(shù)據(jù)進(jìn)行系統(tǒng)的分析，建立適當(dāng)?shù)哪Ｐ?，揭示?shù)據(jù)中隱含的技術(shù)、經(jīng)濟(jì)、社會和其他關(guān)系，以及發(fā)展趨勢，為有關(guān)的咨詢活動提交的有用的數(shù)字、信息或建議。數(shù)據(jù)分析的對象可分為時間序列和截面數(shù)據(jù)。如企業(yè)歷年的咨詢收入、利潤總額等就是時間序列。截面數(shù)據(jù)是在同一時間的數(shù)據(jù)，如企業(yè)同一年咨詢業(yè)務(wù)數(shù)目、營業(yè)額、費用、收入、人工耗費等。兩種數(shù)據(jù)都要注意樣本容量大小。對于截面數(shù)據(jù)，常用線性或非線性回歸模型體現(xiàn)數(shù)據(jù)之間的各種關(guān)系。數(shù)據(jù)分析屬定量分析，包括數(shù)據(jù)統(tǒng)計分析、時間數(shù)據(jù)分析、空間數(shù)據(jù)分析。（三）數(shù)據(jù)挖掘數(shù)據(jù)挖掘就是從數(shù)據(jù)中挖掘出隱含、先前未知、有潛在用途，最

17、終可為人理解的關(guān)系、模式、趨勢和其他有用信息，并建立模型，用于預(yù)測、判斷或決策，幫助企業(yè)更好地適應(yīng)變化并做出更明智的決策的過程。數(shù)據(jù)挖掘廣泛應(yīng)用于制造、金融、零售、保健、中醫(yī)藥及電信等行業(yè)的客戶關(guān)系管理、風(fēng)險防范、供應(yīng)鏈管理、競爭優(yōu)勢分析、部門分析等領(lǐng)域。數(shù)據(jù)挖掘要用到統(tǒng)計分析、人工智能、數(shù)據(jù)庫和神經(jīng)網(wǎng)絡(luò)等方面的知識，如記憶推理、聚類分析、關(guān)聯(lián)分析、決策樹、神經(jīng)網(wǎng)絡(luò)、基因算法等。數(shù)據(jù)挖掘需要用戶參與，并非某種單一工具、技術(shù)或軟件即可獨自完成。另一方面，并非所有信息查詢都可視為數(shù)據(jù)挖掘。例如，使用數(shù)據(jù)庫管理系統(tǒng)查找個別記錄，或用搜索引擎查找互聯(lián)網(wǎng)特定的網(wǎng)頁，屬于信息檢索，不能視為數(shù)據(jù)挖掘。當(dāng)然，

18、數(shù)據(jù)挖掘技術(shù)也有強(qiáng)大的信息檢索能力。四、 大數(shù)據(jù)系統(tǒng)和數(shù)據(jù)挖掘技術(shù)（一）數(shù)據(jù)挖掘概述1大數(shù)據(jù)大數(shù)據(jù)是指超過既往數(shù)據(jù)庫系統(tǒng)規(guī)模、傳輸速度和處理能力，或者既往數(shù)據(jù)庫系統(tǒng)結(jié)構(gòu)無法容納的數(shù)據(jù)。大數(shù)據(jù)常以萬億或EB衡量，且種類多、實時性強(qiáng)，蘊(yùn)藏的商業(yè)價值大。很多現(xiàn)有的新或舊的信息基礎(chǔ)設(shè)施、工具和技術(shù)可用來開發(fā)和利用大數(shù)據(jù)中蘊(yùn)藏的價值。大數(shù)據(jù)有各種各樣的來源：傳感器、氣候信息、公開的信息、如雜志、報紙、文章、買賣記錄、網(wǎng)絡(luò)日志、病歷、事監(jiān)控、視頻和圖像檔案，及大型電子商務(wù)。大數(shù)據(jù)是數(shù)據(jù)挖掘產(chǎn)生與生存發(fā)展的土壤。如今數(shù)據(jù)每五年翻一番，面對前所未有的海量數(shù)據(jù)，為了從中發(fā)現(xiàn)有用的信息必須進(jìn)行數(shù)據(jù)挖掘。此外，計算

19、機(jī)存儲、處理大量數(shù)據(jù)，以及運(yùn)算的能力大為增強(qiáng)，為數(shù)據(jù)挖掘創(chuàng)造了條件，使其成為一門獨特的學(xué)科和技術(shù)。2數(shù)據(jù)挖掘與數(shù)據(jù)分析的區(qū)別數(shù)據(jù)挖掘與數(shù)據(jù)分析的主要區(qū)別在于：（1）處理工作量。數(shù)據(jù)分析的數(shù)據(jù)量可能并不大，而數(shù)據(jù)挖掘的數(shù)據(jù)量極大。（2）制約條件。數(shù)據(jù)分析是從某些假設(shè)出發(fā)，建立方程或模型，而數(shù)據(jù)挖掘不作假設(shè)，可以自動建立方程。（3）處理對象。數(shù)據(jù)分析往往是針對數(shù)字型數(shù)據(jù)，而數(shù)據(jù)挖掘?qū)ο箢愋头倍?，例如圖像、聲音、文本等。（4）處理結(jié)果。數(shù)據(jù)分析可以解釋結(jié)果的含義；數(shù)據(jù)挖掘的結(jié)果不易解釋，著眼于預(yù)測未來，并提出決策建議。想要從數(shù)據(jù)中發(fā)現(xiàn)規(guī)律（即認(rèn)知），往往需將數(shù)據(jù)分析和數(shù)據(jù)挖掘結(jié)合起來。（二）數(shù)據(jù)挖掘

20、步驟按挖掘?qū)ο?，?shù)據(jù)挖掘分為數(shù)據(jù)庫與數(shù)據(jù)倉庫挖掘和網(wǎng)絡(luò)挖掘兩種，各自步驟分述如下。1數(shù)據(jù)庫與數(shù)據(jù)倉庫挖掘數(shù)據(jù)挖掘一般有信息收集、數(shù)據(jù)集成、數(shù)據(jù)規(guī)約、數(shù)據(jù)清理、數(shù)據(jù)變換、數(shù)據(jù)挖掘、模式評估和知識表示8個步驟。（1）信息收集。從確定的挖掘?qū)ο笾刑崛√卣鳎缓筮x擇合適的收集方法，將收集到的信息存入數(shù)據(jù)庫。對于海量數(shù)據(jù)，必須選擇合適的數(shù)據(jù)倉庫。（2）數(shù)據(jù)集成。把來源、格式、特點、性質(zhì)不同的數(shù)據(jù)按邏輯或物理屬性加以編排，以便以后使用。（3）數(shù)據(jù)規(guī)約。多數(shù)數(shù)據(jù)挖掘算法耗時很長，商業(yè)數(shù)據(jù)往往較多，數(shù)據(jù)挖掘更耗時間。數(shù)據(jù)規(guī)約就是簡化已有可用數(shù)據(jù)集的表示，規(guī)約后數(shù)量大減，但仍能保持原數(shù)據(jù)的完整性，對規(guī)約數(shù)據(jù)的挖

21、掘結(jié)果，與對規(guī)約前數(shù)據(jù)的挖掘結(jié)果相同或幾乎相同。（4）數(shù)據(jù)清理。有些數(shù)據(jù)不完整（屬性缺少屬性值）、含噪聲（屬性值錯誤），不一致（同一信息有多種表示），需要清理，使其完整、正確、一致后存入數(shù)據(jù)倉庫。（5）數(shù)據(jù)變換。將數(shù)據(jù)變換成適合數(shù)據(jù)挖掘的形式。實數(shù)型數(shù)據(jù)，可將其分層和離散化。（6）數(shù)據(jù)挖掘。根據(jù)數(shù)據(jù)格式、屬性與特點，選擇合適的處理工具，例如統(tǒng)計方法、事例推理、決策樹、規(guī)則推理、模糊集，甚至神經(jīng)網(wǎng)絡(luò)，取得有用的信息。（7）模式評估。由行業(yè)專家核實數(shù)據(jù)挖掘結(jié)果是否合理、是否可用。（8）知識表示。將數(shù)據(jù)挖掘得到的信息以可視方式交給用戶，或作為新的知識存人知識庫，供其他應(yīng)用程序使用。并非所有的數(shù)據(jù)挖掘

22、都要走上述的每一步。若只有一個數(shù)據(jù)源，則可以省略數(shù)據(jù)集成。數(shù)據(jù)規(guī)約、數(shù)據(jù)清理、數(shù)據(jù)變換合稱數(shù)據(jù)預(yù)處理。數(shù)據(jù)挖掘至少60%的費用要花在信息收集階段，而至少60%以上的精力和時間要花在數(shù)據(jù)預(yù)處理上。數(shù)據(jù)挖掘是一個反復(fù)多次的過程，若一次未滿足要求或未得到有用結(jié)果，則需回到前面，經(jīng)過調(diào)整后重新開始。2，網(wǎng)絡(luò)挖掘網(wǎng)絡(luò)挖掘可分為網(wǎng)絡(luò)用戶行為挖掘與網(wǎng)絡(luò)信息挖掘。前者基本不在工程咨詢?nèi)藛T關(guān)心之列。后者可理解為“從WWW中發(fā)現(xiàn)和分析有用的信息”。網(wǎng)絡(luò)信息挖掘是在已知數(shù)據(jù)樣本的基礎(chǔ)上，通過歸納學(xué)習(xí)、機(jī)器學(xué)習(xí)、統(tǒng)計分析等發(fā)現(xiàn)挖掘?qū)ο箝g的內(nèi)在關(guān)系與特性，進(jìn)而在網(wǎng)絡(luò)中提取用戶感興趣的信息，獲得更高層次的知識和規(guī)律。網(wǎng)絡(luò)

23、信息挖掘沿用了Robot，全文檢索、人工智能的模式識別、神經(jīng)網(wǎng)絡(luò)等技術(shù)。現(xiàn)在的搜索引擎使用了這些技術(shù)，能夠在網(wǎng)頁或網(wǎng)站數(shù)據(jù)庫中為用戶搜尋有用信息。網(wǎng)絡(luò)信息挖掘具體步驟如下：（1）確立目標(biāo)樣本。由用戶選擇目標(biāo)文本，提取特征信息。（2）提取特征信息。根據(jù)目標(biāo)樣本的詞頻分布，從統(tǒng)計詞典中提取挖掘目標(biāo)的特征向量并計算出相應(yīng)的權(quán)值。（3）網(wǎng)絡(luò)信息獲取。先利用搜索引擎站點選擇待采集站點，再利用Robot程序采集靜態(tài)Web頁面，最后獲取被訪問站點網(wǎng)絡(luò)數(shù)據(jù)庫中的動態(tài)信息，生成WWW資源索引庫。（4）信息特征匹配。提取索引庫中的源信息特征向量，并與目標(biāo)樣本的特征向量對照，將符合要求的信息交給用戶。五、 工程咨詢

24、知識及其特點（一）工程咨詢知識工程咨詢需要多方面知識與技能。知識，有哲學(xué)、工程學(xué)、經(jīng)濟(jì)學(xué)、社會學(xué)、管理學(xué)、財務(wù)會計、法律等方面的知識；技能，有專業(yè)知識、項目管理、公共關(guān)系、野外考察、外國語、信息處理等方面的技能。（二）工程咨詢知識的特點1數(shù)量多，種類龐雜工程咨詢行業(yè)涉及國民經(jīng)濟(jì)眾多部門，專業(yè)門類多，大小不一，跨地區(qū)、跨國界。即便是行業(yè)工程咨詢，也涉及多種專業(yè)。例如對校舍工程的咨詢，就涉及國民經(jīng)濟(jì)、統(tǒng)計、消防、建筑、結(jié)構(gòu)、給排水、暖通、電氣、技術(shù)經(jīng)濟(jì)、法律等十多個專業(yè)。2隱性知識難以提煉隱性知識，特別是經(jīng)驗，在工程咨詢中有重要作用。經(jīng)驗需要積累，且常難以提煉和恰當(dāng)表達(dá)。正因為如此，長期積累的經(jīng)驗

25、最容易隨著這些經(jīng)驗的載體人離去而散失。3保密要求高咨詢企業(yè)在咨詢過程中獲得了客戶大量信息，有些很敏感，客戶不希望透漏給第三方。在本企業(yè)內(nèi)部共享由此而獲得的信息、經(jīng)驗與知識時，或?qū)頌槠渌蛻舴?wù)時，應(yīng)確保不透漏給第三方。六、 工程咨詢企業(yè)知識管理（一）知識管理及知識管理的組織1知識管理的概念日益激烈的競爭以及其他眾多因素對工程咨詢企業(yè)知識的數(shù)量與質(zhì)量提出了更高的要求。從某種意義上說，知識管理是咨詢企業(yè)最重要的能力。經(jīng)常有人將知識管理與信息管理混為一談。信息是知識的來源，但不一定成為知識。要想從信息中提煉知識，需要有意識地開展必要的活動，使信息經(jīng)過大腦的處理、加工與提煉。知識管理，是建立一套制度

26、，開展一系列活動，獲取、記錄、整合、存取、更新和創(chuàng)新知識，以適當(dāng)?shù)男问綖樽稍兤髽I(yè)所掌握，成為企業(yè)知識積累中的一部分，用來為客戶、社會創(chuàng)造價值，不至隨著企業(yè)活動的結(jié)束或停止或因當(dāng)事人的離開而流失。知識管理可以延伸到人在知識方面的行為、企業(yè)管理制度與企業(yè)文化等方面。簡而言之，知識管理就是對知識提煉、創(chuàng)造、共享和積累，以及應(yīng)用等過程進(jìn)行規(guī)劃、實施和控制的活動。2，知識管理的必要性知識管理能夠減少重復(fù)勞動，增強(qiáng)企業(yè)的記憶，豐富咨詢企業(yè)的智慧。知識管理在全球迅猛發(fā)展的原因在于：（1）競爭。市場競爭日益激烈，創(chuàng)新速度加快。咨詢企業(yè)必須不斷獲得新知識，利用知識為企業(yè)和社會創(chuàng)造價值。要走向世界，就必須掌握與世

27、界交流，以及獲取、創(chuàng)造與轉(zhuǎn)換知識的能力。企業(yè)文化對企業(yè)學(xué)習(xí)能力影響極大，必須擺脫封閉、保守、不思進(jìn)取的陳舊文化，轉(zhuǎn)變成學(xué)習(xí)型企業(yè)，才能在競爭中立于不敗之地。（2）以客戶為中心。企業(yè)要為客戶創(chuàng)造價值。（3）員工流動。如果企業(yè)不能及時妥善地處理，就會喪失員工在本企業(yè)工作期間獲得的知識。很多咨詢企業(yè)，當(dāng)某專業(yè)骨干離職后，在相當(dāng)長一段時間內(nèi)，無法正常開展該專業(yè)的業(yè)務(wù)，給企業(yè)和客戶造成了損失。（4）不確定性。咨詢企業(yè)內(nèi)外不確定因素眾多，市場競爭使咨詢企業(yè)不能確保客戶上門。當(dāng)前的世界，新技術(shù)頻出，更新加快，咨詢企業(yè)不能確信自己為客戶提出的技術(shù)方案一定成功。企業(yè)及其成員獲取和使用知識的能力成為企業(yè)生存與發(fā)展

28、的決定性因素，知識已成為企業(yè)獲取競爭優(yōu)勢的基礎(chǔ)與稀缺資產(chǎn)。3知識管理的組織工程咨詢企業(yè)必須建立知識管理需要的組織，明確必要的角色及其職責(zé)、權(quán)限和相互關(guān)系，并分派給適當(dāng)人員。必須制訂管理方針、目標(biāo)以及實現(xiàn)這些目標(biāo)所需要的規(guī)章制度。此外，還要設(shè)立必要的知識庫、多渠道知識收集系統(tǒng)等。知識管理需要長期堅持并且努力使其成為企業(yè)文化的一部分。知識管理體系應(yīng)當(dāng)具備如下特征：（1）以人為本。知識管理要以人為本，咨詢企業(yè)應(yīng)充分發(fā)動每個部門、每一員工，貢獻(xiàn)自己掌握的信息與知識，使之成為企業(yè)的知識與智慧。（2）以無形資產(chǎn)為主要對象。知識管理比以往任何管理形式都更重視知識資產(chǎn)。（3）無間斷的循環(huán)。在企業(yè)存續(xù)期間，知識

29、管理是一個不間斷的“積累一創(chuàng)造一應(yīng)用一再積累一再創(chuàng)造一再應(yīng)用”的循環(huán)過程（4）以提煉隱性知識為主。知識管理對象有顯性和隱性知識，但以提煉隱性知識為重點，設(shè)法將隱性知識轉(zhuǎn)換為易于企業(yè)內(nèi)共享的知識。研究表明，大多數(shù)企業(yè)，有序、關(guān)系清楚，可供員工參考的信息與知識只占自身擁有總量的10%，其他90%存在員工個人大腦之中，且難于用語言、文字或圖形清楚地表達(dá)出來供企業(yè)使用。一旦這些人流失，企業(yè)將蒙受巨大損失。（5）以創(chuàng)新為目標(biāo)。知識管理以創(chuàng)新，以建立創(chuàng)造新知識平臺為目標(biāo)，創(chuàng)新和孕育新智慧是知識管理的標(biāo)志。（6）建立學(xué)習(xí)型組織。便于知識管理的組織與疊床架屋的層級組織不同，只有中間層次簡單的“扁平”、開放學(xué)習(xí)

30、型組織，才有利于知識管理。知識管理必須利用先進(jìn)的信息技術(shù)與工具。有些咨詢企業(yè)已按自身的發(fā)展戰(zhàn)略及管理體制建立了獨特的知識管理系統(tǒng)。與信息管理一樣，知識管理也應(yīng)具備安全管理功能，保護(hù)本企業(yè)掌握的知識不受損害。（二）知識管理原則與功能1知識管理原則（1）積累原則。知識積累是實施知識管理的基礎(chǔ)（2）共享原則。咨詢企業(yè)應(yīng)使每一員工都能接觸和使用公司的知識和信息。（3）交流原則。知識管理的核心是要在企業(yè)內(nèi)部建立有利于交流的結(jié)構(gòu)和文化，消除員工之間的交流的障礙。知識交流在上述原則中處于最高層次。2知識管理功能知識管理要獲得成功，需要有完整的知識管理制度。該制度應(yīng)具備的主要功能如下：（1）能夠清楚地了解企業(yè)

31、已有何種知識，還需要何種知識；（2）要能夠及時將知識傳遞給真正需要的人；（3）一定要使需要知識的人能夠獲??；不斷生產(chǎn)新知識，并使整個企業(yè)的人能夠使用；（4）確保進(jìn)入企業(yè)的知識可靠、有生命力；（5）定期檢查企業(yè)的知識是否仍然有效；（6）改造企業(yè)文化，建立激勵機(jī)制，為知識管理創(chuàng)造便利條件。（三）內(nèi)部交流與共享咨詢企業(yè)內(nèi)部的知識交流一方面可以讓不同項目組之間交流咨詢方法和經(jīng)驗，促進(jìn)隱性知識的提煉；另一方面也便于彼此加深了解和信任，促進(jìn)合作，促進(jìn)知識的創(chuàng)新與共享。知識共享有多種方式，例如即時通信、培訓(xùn)與及時交流會等。知識共享將分散于各部門和各員工頭腦中的知識匯集起來，將知識孤島連成大陸，產(chǎn)生孤島無法產(chǎn)

32、生的價值。交流可以最大限度地使知識和經(jīng)驗得到融合和升華，也是使舊知識得以發(fā)展、新知識得以產(chǎn)生的催化劑。咨詢企業(yè)應(yīng)當(dāng)成為學(xué)習(xí)型組織，內(nèi)部的知識交流是員工學(xué)習(xí)與組織學(xué)習(xí)的重要方式。咨詢單位應(yīng)當(dāng)建立適當(dāng)?shù)募钪贫龋龠M(jìn)知識共享，在共享中充實。企業(yè)的知識管理規(guī)章和制度，應(yīng)當(dāng)全面鼓勵各部門奉獻(xiàn)自己的知識，與他人共享。只有這樣，才有利于企業(yè)的知識積累。四）知識管理成效的評估咨詢企業(yè)知識管理的好壞與成效，可從以下幾個方面評估：1人力資源：培訓(xùn)費用、員工向心力與經(jīng)驗；2創(chuàng)新成果：研發(fā)費用、員工創(chuàng)新態(tài)度與比率、咨詢業(yè)務(wù)的更新、知識產(chǎn)權(quán)；3客戶態(tài)度：服務(wù)質(zhì)量、合作時間、咨詢次數(shù)、銷售額等。七、 信息的綜合信息綜合

33、是信息工作的重要內(nèi)容。采集來的信息經(jīng)常是零散、無序，甚至殘缺不全，無法直接使用。對于這樣的信息，須進(jìn)行分析、聯(lián)系、推斷、整理和組合，使之成為有用信息，然后確定其特征，如精度、類型、長度、保密度、保留時間、用途等。信息綜合有兩種方式：一是對已有信息挖掘、延伸，引發(fā)創(chuàng)新需求的新信息，達(dá)到信息的“增值”，二是通過設(shè)計和試驗創(chuàng)造新的信息。有價值的信息往往是反復(fù)推理分析和猜想后的結(jié)果，這個過程要求咨詢工程師具備很強(qiáng)的分析、聯(lián)想、綜合與創(chuàng)造能力。八、 信息鑒別及必要性（一）信息鑒別數(shù)據(jù)與信息鑒別，可稱信息識別，就是將信息與具有特定屬性的“模式”進(jìn)行比較，進(jìn)而判斷信息的類別或?qū)傩?。具體而言，就是信息收集或使用者運(yùn)用已有的知識和經(jīng)驗，在對獲取的信息進(jìn)行初步分析之后，按照一定原則和目的，辨認(rèn)與甄別信息的真?zhèn)?、輕重主次、是否完整、是否有用，以及用途大小等。（二）信息鑒別的必要性互聯(lián)網(wǎng)時代，信息極為豐富，大大開闊了人們的眼界。然而，蜂擁而至，難辨真假的信息摻雜在一起，