自粘墻紙公司工程項(xiàng)目數(shù)據(jù)采集分析與知識(shí)管理（完整版）

1、泓域咨詢(xún)/自粘墻紙公司工程項(xiàng)目數(shù)據(jù)采集分析與知識(shí)管理自粘墻紙公司工程項(xiàng)目數(shù)據(jù)采集分析與知識(shí)管理xxx投資管理公司一、 “互聯(lián)網(wǎng)+”背景下的工程咨詢(xún)信息管理“互聯(lián)網(wǎng)+”模式能充分發(fā)揮互聯(lián)網(wǎng)在社會(huì)資源配置中的優(yōu)化和集成作用，將互聯(lián)網(wǎng)的創(chuàng)新成果深度融合于各領(lǐng)域之中。工程咨詢(xún)行業(yè)本身就具有數(shù)據(jù)化的天然屬性，對(duì)“互聯(lián)網(wǎng)+”模式有著接納和融合的先天優(yōu)勢(shì)?！盎ヂ?lián)網(wǎng)+”模式的到來(lái)給工程咨詢(xún)行業(yè)的發(fā)展帶來(lái)了新的催化劑和生產(chǎn)力，也帶來(lái)新思維模式和發(fā)展空間。隨著計(jì)算機(jī)與通信技術(shù)的飛速發(fā)展，互聯(lián)網(wǎng)不斷擴(kuò)展和普及，網(wǎng)絡(luò)技術(shù)的發(fā)展使工程咨詢(xún)機(jī)構(gòu)能夠以快捷、低成本的方式獲取更多的信息資源?！盎ヂ?lián)網(wǎng)+工程咨詢(xún)”系統(tǒng)是建設(shè)基于

2、互聯(lián)網(wǎng)的工程咨詢(xún)機(jī)構(gòu)系統(tǒng)，以豐富的信息資源為管理重心，同時(shí)全面集成客戶、咨詢(xún)、銷(xiāo)售等業(yè)務(wù)處理系統(tǒng)及業(yè)務(wù)信息，支持工程咨詢(xún)機(jī)構(gòu)內(nèi)部各層級(jí)間及工程咨詢(xún)機(jī)構(gòu)與外部環(huán)境有效溝通的信息管理系統(tǒng)。（一）“互聯(lián)網(wǎng)+”對(duì)工程咨詢(xún)數(shù)據(jù)分析的作用工程咨詢(xún)的工作與互聯(lián)網(wǎng)連接，使工程咨詢(xún)可與無(wú)限的知識(shí)、專(zhuān)家、信息等實(shí)現(xiàn)即時(shí)對(duì)接。一個(gè)項(xiàng)目可通過(guò)互聯(lián)網(wǎng)連接強(qiáng)大數(shù)據(jù)信息庫(kù)，提供大量相關(guān)理論知識(shí)與概念，然后通過(guò)線上咨詢(xún)與更多專(zhuān)家進(jìn)行溝通、研討，最后可自動(dòng)與全球其他類(lèi)似案例進(jìn)行匹配，提供建設(shè)性的意見(jiàn)與建議?！盎ヂ?lián)網(wǎng)+工程咨詢(xún)”系統(tǒng)突破傳統(tǒng)局限，利用互聯(lián)網(wǎng)信息化技術(shù)將信息流、數(shù)據(jù)流、工作流和資金流集成，形成強(qiáng)大的集聚效應(yīng)，使工程

3、咨詢(xún)行業(yè)在未來(lái)的市場(chǎng)競(jìng)爭(zhēng)中不斷發(fā)展，呈現(xiàn)一種無(wú)限制發(fā)展的態(tài)勢(shì)。是提高工程咨詢(xún)服務(wù)效率和水平。應(yīng)用互聯(lián)網(wǎng)有利于工程咨詢(xún)?nèi)藛T掌握和有效利用相關(guān)數(shù)據(jù)信息，及時(shí)跟蹤新政策、新技術(shù)的變化，增強(qiáng)決策者信息處理能力，提高工程咨詢(xún)的服務(wù)效率。二是提高信息的準(zhǔn)確性和及時(shí)性。及時(shí)、準(zhǔn)確的獲取信息是工程咨詢(xún)的基礎(chǔ)，信息技術(shù)改變了工程咨詢(xún)?nèi)藛T獲取信息、搜集信息和傳遞信息的方式，工程咨詢(xún)數(shù)據(jù)的存儲(chǔ)、整理、分析、查詢(xún)、統(tǒng)計(jì)和傳遞可通過(guò)專(zhuān)業(yè)的信息系統(tǒng)實(shí)現(xiàn)，縮短了信息傳遞周期。三是有效控制工程咨詢(xún)項(xiàng)目成本。將工程咨詢(xún)項(xiàng)目執(zhí)行成本納入管理范圍，通過(guò)統(tǒng)計(jì)分析發(fā)現(xiàn)項(xiàng)目管理中的問(wèn)題，找出制約效益的瓶頸，從而降低項(xiàng)目成本，提高工程咨詢(xún)

4、單位的效益。（二）信息管理目的與任務(wù)工程咨詢(xún)企業(yè)自己擁有大量信息，使用方便、可靠、費(fèi)用低。因此，只有當(dāng)本企業(yè)缺乏所需信息時(shí)，才考慮其他來(lái)源。工程咨詢(xún)企業(yè)在長(zhǎng)期為客戶服務(wù)中產(chǎn)生很多成果與文件，如客戶資料、產(chǎn)品配方、生產(chǎn)工藝、設(shè)計(jì)圖紙、貨源資料、營(yíng)銷(xiāo)方案、財(cái)務(wù)報(bào)告等，往往使工程咨詢(xún)企業(yè)形成競(jìng)爭(zhēng)優(yōu)勢(shì)。這些寶貴資源若管理不善則不但無(wú)法得到有效利用，還會(huì)危及工程咨詢(xún)企業(yè)的競(jìng)爭(zhēng)地位和安全。目前，上述信息十分龐雜，有些企業(yè)不善于管理，仍然依靠資料室、圖書(shū)館等傳統(tǒng)手段保存和管理上述信息，未設(shè)立有效的信息管理系統(tǒng)，致使員工在查找所需信息時(shí)耗費(fèi)了大量不必要的時(shí)間，甚至找不到本企業(yè)實(shí)際上有的數(shù)據(jù)、信息、文件或其他資

5、料，造成了資源的極大浪費(fèi)；即使使用數(shù)據(jù)庫(kù)，能力也很有限。另一方面，一些企業(yè)內(nèi)的某些部門(mén)囿于自身利益，不愿意將自己掌握的信息與其他部門(mén)共事。落后的信息管理已經(jīng)嚴(yán)重妨礙了咨詢(xún)業(yè)務(wù)的發(fā)展，工程咨詢(xún)企業(yè)應(yīng)當(dāng)了解信息管理的重要性及緊迫性，迅速改變現(xiàn)狀。信息管理是指將分散、無(wú)序、龐雜的數(shù)據(jù)信息按照一定規(guī)則加以識(shí)別、編排并記載各種信息之間的聯(lián)系，進(jìn)而保存、添加、檢索、共享和利用。為了使信息管理行之有效，應(yīng)當(dāng)建立有效的制度，促使企業(yè)內(nèi)各部門(mén)之間共享各自掌握的數(shù)據(jù)與信息，盡可能地減少因重復(fù)收集數(shù)據(jù)與信息而浪費(fèi)的資源，增加企業(yè)的整體收益。信息管理的任務(wù)是了解信息使用者的具體需要，對(duì)信息進(jìn)行全面的收集、適當(dāng)?shù)暮Y選、

6、正確的分析、恰當(dāng)?shù)恼砗蛢?chǔ)存，并將適合需要的信息及時(shí)、準(zhǔn)確、經(jīng)濟(jì)地交給各級(jí)工程咨詢(xún)和決策人員。咨詢(xún)企業(yè)應(yīng)當(dāng)利用先進(jìn)的信息管理手段，建立適合本企業(yè)需要的數(shù)據(jù)庫(kù)管理系統(tǒng)，加強(qiáng)對(duì)本企業(yè)內(nèi)外信息的全面管理，為本企業(yè)咨詢(xún)業(yè)務(wù)及時(shí)提供全面、準(zhǔn)確、最新的信息。（三）信息管理技術(shù)與方法1信息管理基本做法對(duì)于數(shù)量巨大、種類(lèi)繁多的數(shù)據(jù)、信息或其他資料，有一些基本辦法，不僅適用于以往的圖書(shū)室、圖書(shū)館、檔案館、博物館等，也適用于計(jì)算機(jī)數(shù)據(jù)庫(kù)系統(tǒng)。例如，分類(lèi)與編目方法，現(xiàn)在微軟公司的Windows文件系統(tǒng)所依據(jù)的就是歷史悠久的分類(lèi)與編目原則。2信息分類(lèi)與編目對(duì)于工程咨詢(xún)企業(yè)掌握的信息，有多種分類(lèi)與編目方式。例如，按企業(yè)

7、管理層次分類(lèi)編目，大企業(yè)，目錄第一層按企業(yè)總體組織劃分，如公司總部、子（分）公司；第二層可按企業(yè)各級(jí)的職能部門(mén)劃分，如人力資源部、財(cái)務(wù)資產(chǎn)部、綜合管理部、技術(shù)質(zhì)量部、經(jīng)營(yíng)計(jì)劃部等職能部門(mén)，以及規(guī)劃部門(mén)、設(shè)計(jì)部門(mén)等業(yè)務(wù)部門(mén)；第三層可按各業(yè)務(wù)部門(mén)的行政科室或者項(xiàng)目團(tuán)隊(duì)來(lái)劃分。分類(lèi)方法的選擇，既要考慮企業(yè)擁有的信息內(nèi)容、形式與性質(zhì)，也要考慮企業(yè)為客戶提供咨詢(xún)服務(wù)的方式與特點(diǎn)，或者將兩方面結(jié)合起來(lái)，使各種類(lèi)別的信息便于查詢(xún)。例如，公司新聞、企業(yè)規(guī)章制度、會(huì)議紀(jì)要等，可以歸為一類(lèi)，供一般用戶查詢(xún)。而對(duì)于圖檔，可以按項(xiàng)目名稱(chēng)、時(shí)間、業(yè)務(wù)部門(mén)、版本、關(guān)鍵字、文字說(shuō)明、關(guān)聯(lián)信息等逐層分類(lèi)。為了便于企業(yè)員工更好

8、地利用企業(yè)擁有的信息資源，可以信息地圖導(dǎo)航的方式編制目錄。信息地圖可按照上述分類(lèi)方法編制，使用戶能夠快速找到他們需要的信息與資料。3檢索功能與權(quán)限信息管理系統(tǒng)必須有完善的查詢(xún)功能，允許使用者以多種方式查詢(xún)。查詢(xún)系統(tǒng)應(yīng)當(dāng)靈活、具有模糊查詢(xún)功能，以滿足不同人員的查詢(xún)習(xí)慣與偏好。查詢(xún)結(jié)果能夠以多種方式顯示或交給用戶。當(dāng)然，為了信息的安全，查詢(xún)系統(tǒng)應(yīng)當(dāng)具備權(quán)限管理功能。（四）現(xiàn)代信息管理技術(shù)信息管理人員應(yīng)確保將必要的原始信息收集齊全，加工成可用信息。還要確保企業(yè)內(nèi)部人員在合適的時(shí)間以合適的形式取得并利用。信息管理要確保企業(yè)的信息準(zhǔn)確、及時(shí)、安全，確保滿足所有與工程咨詢(xún)有關(guān)的信息要求。對(duì)于非數(shù)字信息，可

9、參考圖書(shū)館藏書(shū)、文獻(xiàn)分類(lèi)與編目規(guī)則加以編排，購(gòu)置相應(yīng)設(shè)施存放此類(lèi)信息。對(duì)于數(shù)字信息，可以保存在計(jì)算機(jī)數(shù)據(jù)庫(kù)中并備份。1建立數(shù)據(jù)庫(kù)管理系統(tǒng)數(shù)據(jù)庫(kù)管理系統(tǒng)是根據(jù)數(shù)據(jù)模型研制的描述、建立和管理數(shù)據(jù)庫(kù)的專(zhuān)用軟件，一般由數(shù)據(jù)庫(kù)語(yǔ)言、數(shù)據(jù)庫(kù)管理程序和數(shù)據(jù)庫(kù)使用程序三部分組成。數(shù)據(jù)庫(kù)語(yǔ)言主要用于建立數(shù)據(jù)庫(kù)、使用數(shù)據(jù)庫(kù)和對(duì)數(shù)據(jù)庫(kù)進(jìn)行維護(hù)。數(shù)據(jù)庫(kù)管理程序是對(duì)數(shù)據(jù)庫(kù)的運(yùn)行進(jìn)行管理、調(diào)度和控制的例行程序。數(shù)據(jù)庫(kù)使用程序是對(duì)數(shù)據(jù)進(jìn)行維護(hù)使其處于運(yùn)行狀態(tài)而使用的各種數(shù)據(jù)庫(kù)服務(wù)程序。數(shù)據(jù)庫(kù)管理系統(tǒng)的功能因系統(tǒng)不同而有所差異，一般包括：定義數(shù)據(jù)庫(kù)、裝人數(shù)據(jù)庫(kù)、操作數(shù)據(jù)庫(kù)、維護(hù)數(shù)據(jù)庫(kù)、數(shù)據(jù)通信等。數(shù)據(jù)庫(kù)管理系統(tǒng)可分為小型和大

10、中型數(shù)據(jù)庫(kù)；亦可分為關(guān)系數(shù)據(jù)庫(kù)、面向?qū)ο髷?shù)據(jù)庫(kù)、工程數(shù)據(jù)庫(kù)、多媒體數(shù)據(jù)庫(kù)等。關(guān)系數(shù)據(jù)庫(kù)在一般信息系統(tǒng)中發(fā)揮著巨大作用，是面向?qū)ο髷?shù)據(jù)庫(kù)、工程數(shù)據(jù)庫(kù)和多媒體數(shù)據(jù)庫(kù)的基礎(chǔ)。2信息安全管理信息安全一般指信息的完整和用途是否得到了有效保護(hù)。信息安全分為信息系統(tǒng)、數(shù)據(jù)庫(kù)、個(gè)人隱私、商用信息、國(guó)家機(jī)密的保護(hù)等方面。保密技術(shù)的缺陷、網(wǎng)絡(luò)無(wú)限制傳播、計(jì)算機(jī)病毒、網(wǎng)上犯罪等都威脅到信息的安全。工程咨詢(xún)企業(yè)向委托人提出的方案和技術(shù)，以及委托人提供的信息容易為競(jìng)爭(zhēng)對(duì)手取得，從而損害自己的競(jìng)爭(zhēng)力，損害委托人的利益。目前某些項(xiàng)目的可行性研究報(bào)告未刪除客戶的敏感信息就上傳到很多網(wǎng)站，不同程度地泄漏了本應(yīng)為客戶保密的內(nèi)容。

11、對(duì)此，應(yīng)當(dāng)給予充分重視，配備必要的設(shè)備，安裝可靠的防護(hù)軟件。企業(yè)若不能及時(shí)有效地采取措施，信息一旦泄漏會(huì)造成不可估量的損失和損害。企業(yè)必須防止委托人和自身因泄密而受到損害。良好的信息安全管理可以降低運(yùn)營(yíng)風(fēng)險(xiǎn)、保持企業(yè)競(jìng)爭(zhēng)力。保密有多種方式，主要有：1）咨詢(xún)業(yè)務(wù)當(dāng)事人事先簽訂保密協(xié)議，并嚴(yán)格執(zhí)行；2）對(duì)信息庫(kù)設(shè)置使用權(quán)限。一般可根據(jù)信息的重要性和敏感程度分為若干密級(jí)，為各級(jí)信息設(shè)置相應(yīng)的使用權(quán)限。橫向權(quán)限用來(lái)控制查詢(xún)和使用?？v向權(quán)限可考慮信息屬性和用戶兩方面，為各種信息設(shè)置相應(yīng)的安全級(jí)別。普通知識(shí)，如企業(yè)文化、常用規(guī)章制度等，安全級(jí)別較低，可在企業(yè)內(nèi)部充分共享。而諸如合同、經(jīng)驗(yàn)、涉密圖檔等，只能

12、在小范圍內(nèi)交流，安全級(jí)別要高。各種用戶也應(yīng)設(shè)置權(quán)限級(jí)別，并將其與信息的安全級(jí)別對(duì)應(yīng)起來(lái)。橫向與縱向的保護(hù)辦法結(jié)合起來(lái)，可構(gòu)成比較嚴(yán)密、完善的安全體系，既能保證信息得到充分利用，又能減少泄露的機(jī)會(huì)。二、 工程咨詢(xún)信息及其管理概述（一）工程咨詢(xún)信息的內(nèi)涵信息資源是工程咨詢(xún)行業(yè)的核心資源，通過(guò)獲取海量有效的信息，依靠信息、知識(shí)和智慧、先進(jìn)科技手段進(jìn)行服務(wù)。信息爆炸的社會(huì)要求工程咨詢(xún)行業(yè)服務(wù)機(jī)構(gòu)擁有獲取信息、處理信息的能力和手段。工程咨詢(xún)項(xiàng)目管理信息化是結(jié)合行業(yè)業(yè)務(wù)特點(diǎn)，以信息資源開(kāi)發(fā)利用為核心，利用現(xiàn)代信息技術(shù)、網(wǎng)絡(luò)技術(shù)等現(xiàn)代科技，強(qiáng)化信息技術(shù)在業(yè)務(wù)中的滲透，在工程咨詢(xún)項(xiàng)目各環(huán)節(jié)中推廣應(yīng)用信息技術(shù)，

13、以提高工程咨詢(xún)機(jī)構(gòu)管理決策能力，提升咨詢(xún)工作效率，增強(qiáng)機(jī)構(gòu)行業(yè)競(jìng)爭(zhēng)力。工程咨詢(xún)需要的信息，涉及自然、資源、氣候、水文、地質(zhì)、人口、人文、項(xiàng)目投入產(chǎn)出、市場(chǎng)（商品、勞動(dòng)力、金融）、財(cái)政及政策、貨幣政策、法規(guī)、標(biāo)準(zhǔn)與規(guī)范、發(fā)展規(guī)劃等。（二）工程咨詢(xún)信息管理的必要性我國(guó)經(jīng)濟(jì)進(jìn)入新常態(tài)，全球化、綠色發(fā)展、結(jié)構(gòu)調(diào)整、新技術(shù)應(yīng)用等成為發(fā)展主基調(diào)，這不僅需要規(guī)模巨大的投資，而且更加注重發(fā)展質(zhì)量，這就給工程咨詢(xún)業(yè)帶來(lái)了極大的發(fā)展機(jī)遇，也對(duì)工程咨詢(xún)信息管理提出了新的需求。未來(lái)工程咨詢(xún)將更多的應(yīng)用建筑信息模型技術(shù)（BIM）、大數(shù)據(jù)、物聯(lián)網(wǎng)、地理信息系統(tǒng)（GIS）無(wú)人機(jī)應(yīng)用、AR仿真模擬、人工智能輔助查詢(xún)與分析系統(tǒng)

14、等，也迫切要求工程咨詢(xún)業(yè)能夠盡快改變傳統(tǒng)咨詢(xún)手段，必須針對(duì)新技術(shù)、新產(chǎn)業(yè)進(jìn)行調(diào)整，建立完善的數(shù)據(jù)分析與知識(shí)管理方法。傳統(tǒng)的信息管理模式工作流程繁瑣，耗費(fèi)人力物力，亟待向智能管理模式邁進(jìn)。工程咨詢(xún)信息管理以豐富的信息資源為管理重點(diǎn)，利用“互聯(lián)網(wǎng)+”、數(shù)據(jù)庫(kù)管理系統(tǒng)等先進(jìn)的信息管理手段，協(xié)助工程咨詢(xún)?nèi)藛T能夠從海量的業(yè)務(wù)數(shù)據(jù)中提供有用的信息，進(jìn)而做出科學(xué)的判斷以及正確的決策，從而實(shí)現(xiàn)為工程咨詢(xún)的決策提供更加全面及時(shí)的信息支出，使工作更加便捷，回復(fù)也更加及時(shí)，大幅減少出現(xiàn)錯(cuò)誤的概率，安全性更高。三、 數(shù)據(jù)分析與挖掘概述（一）信息分析信息分析是根據(jù)咨詢(xún)問(wèn)題的具體需要，對(duì)與之有關(guān)的信息進(jìn)行整理、鑒別、評(píng)價(jià)

15、、分析和綜合，以便取得咨詢(xún)所需新信息的過(guò)程。信息分析有如下幾種用途：1跟蹤。所謂跟蹤，就是及時(shí)了解各領(lǐng)域新動(dòng)向、新發(fā)展，從而發(fā)現(xiàn)問(wèn)題、提出問(wèn)題。2比較。比較各種事物的內(nèi)部矛盾之后，把握事物間的聯(lián)系，認(rèn)識(shí)事物的本質(zhì)，從而提出問(wèn)題、確定目標(biāo)、擬定方案并作出選擇。3預(yù)測(cè)。利用已掌握的信息、知識(shí)和手段，推斷事物的未來(lái)或未知方面。4評(píng)價(jià)。進(jìn)行評(píng)價(jià)時(shí)應(yīng)選擇合適的變量和評(píng)價(jià)指標(biāo)，應(yīng)當(dāng)考慮評(píng)價(jià)對(duì)象之間的可比性。信息分析所用方法，可分為定性和定量分析兩種。定性方法主要靠邏輯推理；而定量方法涉及數(shù)據(jù)間的數(shù)量關(guān)系，要建立數(shù)學(xué)模型，計(jì)算、求解。如今，信息越來(lái)越復(fù)雜，定性與定量分析已無(wú)法單獨(dú)奏效，只能越來(lái)越多地結(jié)合起來(lái)

16、。（二）數(shù)據(jù)分析數(shù)據(jù)分析是信息分析的一部分，數(shù)據(jù)分析是對(duì)收集數(shù)據(jù)進(jìn)行系統(tǒng)的分析，建立適當(dāng)?shù)哪Ｐ?，揭示?shù)據(jù)中隱含的技術(shù)、經(jīng)濟(jì)、社會(huì)和其他關(guān)系，以及發(fā)展趨勢(shì)，為有關(guān)的咨詢(xún)活動(dòng)提交的有用的數(shù)字、信息或建議。數(shù)據(jù)分析的對(duì)象可分為時(shí)間序列和截面數(shù)據(jù)。如企業(yè)歷年的咨詢(xún)收入、利潤(rùn)總額等就是時(shí)間序列。截面數(shù)據(jù)是在同一時(shí)間的數(shù)據(jù)，如企業(yè)同一年咨詢(xún)業(yè)務(wù)數(shù)目、營(yíng)業(yè)額、費(fèi)用、收入、人工耗費(fèi)等。兩種數(shù)據(jù)都要注意樣本容量大小。對(duì)于截面數(shù)據(jù)，常用線性或非線性回歸模型體現(xiàn)數(shù)據(jù)之間的各種關(guān)系。數(shù)據(jù)分析屬定量分析，包括數(shù)據(jù)統(tǒng)計(jì)分析、時(shí)間數(shù)據(jù)分析、空間數(shù)據(jù)分析。（三）數(shù)據(jù)挖掘數(shù)據(jù)挖掘就是從數(shù)據(jù)中挖掘出隱含、先前未知、有潛在用途，最

17、終可為人理解的關(guān)系、模式、趨勢(shì)和其他有用信息，并建立模型，用于預(yù)測(cè)、判斷或決策，幫助企業(yè)更好地適應(yīng)變化并做出更明智的決策的過(guò)程。數(shù)據(jù)挖掘廣泛應(yīng)用于制造、金融、零售、保健、中醫(yī)藥及電信等行業(yè)的客戶關(guān)系管理、風(fēng)險(xiǎn)防范、供應(yīng)鏈管理、競(jìng)爭(zhēng)優(yōu)勢(shì)分析、部門(mén)分析等領(lǐng)域。數(shù)據(jù)挖掘要用到統(tǒng)計(jì)分析、人工智能、數(shù)據(jù)庫(kù)和神經(jīng)網(wǎng)絡(luò)等方面的知識(shí)，如記憶推理、聚類(lèi)分析、關(guān)聯(lián)分析、決策樹(shù)、神經(jīng)網(wǎng)絡(luò)、基因算法等。數(shù)據(jù)挖掘需要用戶參與，并非某種單一工具、技術(shù)或軟件即可獨(dú)自完成。另一方面，并非所有信息查詢(xún)都可視為數(shù)據(jù)挖掘。例如，使用數(shù)據(jù)庫(kù)管理系統(tǒng)查找個(gè)別記錄，或用搜索引擎查找互聯(lián)網(wǎng)特定的網(wǎng)頁(yè)，屬于信息檢索，不能視為數(shù)據(jù)挖掘。當(dāng)然，

18、數(shù)據(jù)挖掘技術(shù)也有強(qiáng)大的信息檢索能力。四、 大數(shù)據(jù)系統(tǒng)和數(shù)據(jù)挖掘技術(shù)（一）數(shù)據(jù)挖掘概述1大數(shù)據(jù)大數(shù)據(jù)是指超過(guò)既往數(shù)據(jù)庫(kù)系統(tǒng)規(guī)模、傳輸速度和處理能力，或者既往數(shù)據(jù)庫(kù)系統(tǒng)結(jié)構(gòu)無(wú)法容納的數(shù)據(jù)。大數(shù)據(jù)常以萬(wàn)億或EB衡量，且種類(lèi)多、實(shí)時(shí)性強(qiáng)，蘊(yùn)藏的商業(yè)價(jià)值大。很多現(xiàn)有的新或舊的信息基礎(chǔ)設(shè)施、工具和技術(shù)可用來(lái)開(kāi)發(fā)和利用大數(shù)據(jù)中蘊(yùn)藏的價(jià)值。大數(shù)據(jù)有各種各樣的來(lái)源：傳感器、氣候信息、公開(kāi)的信息、如雜志、報(bào)紙、文章、買(mǎi)賣(mài)記錄、網(wǎng)絡(luò)日志、病歷、事監(jiān)控、視頻和圖像檔案，及大型電子商務(wù)。大數(shù)據(jù)是數(shù)據(jù)挖掘產(chǎn)生與生存發(fā)展的土壤。如今數(shù)據(jù)每五年翻一番，面對(duì)前所未有的海量數(shù)據(jù)，為了從中發(fā)現(xiàn)有用的信息必須進(jìn)行數(shù)據(jù)挖掘。此外，計(jì)算

19、機(jī)存儲(chǔ)、處理大量數(shù)據(jù)，以及運(yùn)算的能力大為增強(qiáng)，為數(shù)據(jù)挖掘創(chuàng)造了條件，使其成為一門(mén)獨(dú)特的學(xué)科和技術(shù)。2數(shù)據(jù)挖掘與數(shù)據(jù)分析的區(qū)別數(shù)據(jù)挖掘與數(shù)據(jù)分析的主要區(qū)別在于：（1）處理工作量。數(shù)據(jù)分析的數(shù)據(jù)量可能并不大，而數(shù)據(jù)挖掘的數(shù)據(jù)量極大。（2）制約條件。數(shù)據(jù)分析是從某些假設(shè)出發(fā)，建立方程或模型，而數(shù)據(jù)挖掘不作假設(shè)，可以自動(dòng)建立方程。（3）處理對(duì)象。數(shù)據(jù)分析往往是針對(duì)數(shù)字型數(shù)據(jù)，而數(shù)據(jù)挖掘?qū)ο箢?lèi)型繁多，例如圖像、聲音、文本等。（4）處理結(jié)果。數(shù)據(jù)分析可以解釋結(jié)果的含義；數(shù)據(jù)挖掘的結(jié)果不易解釋?zhuān)塾陬A(yù)測(cè)未來(lái)，并提出決策建議。想要從數(shù)據(jù)中發(fā)現(xiàn)規(guī)律（即認(rèn)知），往往需將數(shù)據(jù)分析和數(shù)據(jù)挖掘結(jié)合起來(lái)。（二）數(shù)據(jù)挖掘

20、步驟按挖掘?qū)ο?，?shù)據(jù)挖掘分為數(shù)據(jù)庫(kù)與數(shù)據(jù)倉(cāng)庫(kù)挖掘和網(wǎng)絡(luò)挖掘兩種，各自步驟分述如下。1數(shù)據(jù)庫(kù)與數(shù)據(jù)倉(cāng)庫(kù)挖掘數(shù)據(jù)挖掘一般有信息收集、數(shù)據(jù)集成、數(shù)據(jù)規(guī)約、數(shù)據(jù)清理、數(shù)據(jù)變換、數(shù)據(jù)挖掘、模式評(píng)估和知識(shí)表示8個(gè)步驟。（1）信息收集。從確定的挖掘?qū)ο笾刑崛√卣?，然后選擇合適的收集方法，將收集到的信息存入數(shù)據(jù)庫(kù)。對(duì)于海量數(shù)據(jù)，必須選擇合適的數(shù)據(jù)倉(cāng)庫(kù)。（2）數(shù)據(jù)集成。把來(lái)源、格式、特點(diǎn)、性質(zhì)不同的數(shù)據(jù)按邏輯或物理屬性加以編排，以便以后使用。（3）數(shù)據(jù)規(guī)約。多數(shù)數(shù)據(jù)挖掘算法耗時(shí)很長(zhǎng)，商業(yè)數(shù)據(jù)往往較多，數(shù)據(jù)挖掘更耗時(shí)間。數(shù)據(jù)規(guī)約就是簡(jiǎn)化已有可用數(shù)據(jù)集的表示，規(guī)約后數(shù)量大減，但仍能保持原數(shù)據(jù)的完整性，對(duì)規(guī)約數(shù)據(jù)的挖

21、掘結(jié)果，與對(duì)規(guī)約前數(shù)據(jù)的挖掘結(jié)果相同或幾乎相同。（4）數(shù)據(jù)清理。有些數(shù)據(jù)不完整（屬性缺少屬性值）、含噪聲（屬性值錯(cuò)誤），不一致（同一信息有多種表示），需要清理，使其完整、正確、一致后存入數(shù)據(jù)倉(cāng)庫(kù)。（5）數(shù)據(jù)變換。將數(shù)據(jù)變換成適合數(shù)據(jù)挖掘的形式。實(shí)數(shù)型數(shù)據(jù)，可將其分層和離散化。（6）數(shù)據(jù)挖掘。根據(jù)數(shù)據(jù)格式、屬性與特點(diǎn)，選擇合適的處理工具，例如統(tǒng)計(jì)方法、事例推理、決策樹(shù)、規(guī)則推理、模糊集，甚至神經(jīng)網(wǎng)絡(luò)，取得有用的信息。（7）模式評(píng)估。由行業(yè)專(zhuān)家核實(shí)數(shù)據(jù)挖掘結(jié)果是否合理、是否可用。（8）知識(shí)表示。將數(shù)據(jù)挖掘得到的信息以可視方式交給用戶，或作為新的知識(shí)存人知識(shí)庫(kù)，供其他應(yīng)用程序使用。并非所有的數(shù)據(jù)挖掘

22、都要走上述的每一步。若只有一個(gè)數(shù)據(jù)源，則可以省略數(shù)據(jù)集成。數(shù)據(jù)規(guī)約、數(shù)據(jù)清理、數(shù)據(jù)變換合稱(chēng)數(shù)據(jù)預(yù)處理。數(shù)據(jù)挖掘至少60%的費(fèi)用要花在信息收集階段，而至少60%以上的精力和時(shí)間要花在數(shù)據(jù)預(yù)處理上。數(shù)據(jù)挖掘是一個(gè)反復(fù)多次的過(guò)程，若一次未滿足要求或未得到有用結(jié)果，則需回到前面，經(jīng)過(guò)調(diào)整后重新開(kāi)始。2，網(wǎng)絡(luò)挖掘網(wǎng)絡(luò)挖掘可分為網(wǎng)絡(luò)用戶行為挖掘與網(wǎng)絡(luò)信息挖掘。前者基本不在工程咨詢(xún)?nèi)藛T關(guān)心之列。后者可理解為“從WWW中發(fā)現(xiàn)和分析有用的信息”。網(wǎng)絡(luò)信息挖掘是在已知數(shù)據(jù)樣本的基礎(chǔ)上，通過(guò)歸納學(xué)習(xí)、機(jī)器學(xué)習(xí)、統(tǒng)計(jì)分析等發(fā)現(xiàn)挖掘?qū)ο箝g的內(nèi)在關(guān)系與特性，進(jìn)而在網(wǎng)絡(luò)中提取用戶感興趣的信息，獲得更高層次的知識(shí)和規(guī)律。網(wǎng)絡(luò)

23、信息挖掘沿用了Robot，全文檢索、人工智能的模式識(shí)別、神經(jīng)網(wǎng)絡(luò)等技術(shù)?，F(xiàn)在的搜索引擎使用了這些技術(shù)，能夠在網(wǎng)頁(yè)或網(wǎng)站數(shù)據(jù)庫(kù)中為用戶搜尋有用信息。網(wǎng)絡(luò)信息挖掘具體步驟如下：（1）確立目標(biāo)樣本。由用戶選擇目標(biāo)文本，提取特征信息。（2）提取特征信息。根據(jù)目標(biāo)樣本的詞頻分布，從統(tǒng)計(jì)詞典中提取挖掘目標(biāo)的特征向量并計(jì)算出相應(yīng)的權(quán)值。（3）網(wǎng)絡(luò)信息獲取。先利用搜索引擎站點(diǎn)選擇待采集站點(diǎn)，再利用Robot程序采集靜態(tài)Web頁(yè)面，最后獲取被訪問(wèn)站點(diǎn)網(wǎng)絡(luò)數(shù)據(jù)庫(kù)中的動(dòng)態(tài)信息，生成WWW資源索引庫(kù)。（4）信息特征匹配。提取索引庫(kù)中的源信息特征向量，并與目標(biāo)樣本的特征向量對(duì)照，將符合要求的信息交給用戶。五、 工程咨詢(xún)

24、知識(shí)及其特點(diǎn)（一）工程咨詢(xún)知識(shí)工程咨詢(xún)需要多方面知識(shí)與技能。知識(shí)，有哲學(xué)、工程學(xué)、經(jīng)濟(jì)學(xué)、社會(huì)學(xué)、管理學(xué)、財(cái)務(wù)會(huì)計(jì)、法律等方面的知識(shí)；技能，有專(zhuān)業(yè)知識(shí)、項(xiàng)目管理、公共關(guān)系、野外考察、外國(guó)語(yǔ)、信息處理等方面的技能。（二）工程咨詢(xún)知識(shí)的特點(diǎn)1數(shù)量多，種類(lèi)龐雜工程咨詢(xún)行業(yè)涉及國(guó)民經(jīng)濟(jì)眾多部門(mén)，專(zhuān)業(yè)門(mén)類(lèi)多，大小不一，跨地區(qū)、跨國(guó)界。即便是行業(yè)工程咨詢(xún)，也涉及多種專(zhuān)業(yè)。例如對(duì)校舍工程的咨詢(xún)，就涉及國(guó)民經(jīng)濟(jì)、統(tǒng)計(jì)、消防、建筑、結(jié)構(gòu)、給排水、暖通、電氣、技術(shù)經(jīng)濟(jì)、法律等十多個(gè)專(zhuān)業(yè)。2隱性知識(shí)難以提煉隱性知識(shí)，特別是經(jīng)驗(yàn)，在工程咨詢(xún)中有重要作用。經(jīng)驗(yàn)需要積累，且常難以提煉和恰當(dāng)表達(dá)。正因?yàn)槿绱?，長(zhǎng)期積累的經(jīng)驗(yàn)

25、最容易隨著這些經(jīng)驗(yàn)的載體人離去而散失。3保密要求高咨詢(xún)企業(yè)在咨詢(xún)過(guò)程中獲得了客戶大量信息，有些很敏感，客戶不希望透漏給第三方。在本企業(yè)內(nèi)部共享由此而獲得的信息、經(jīng)驗(yàn)與知識(shí)時(shí)，或?qū)?lái)為其他客戶服務(wù)時(shí)，應(yīng)確保不透漏給第三方。六、 工程咨詢(xún)企業(yè)知識(shí)管理（一）知識(shí)管理及知識(shí)管理的組織1知識(shí)管理的概念日益激烈的競(jìng)爭(zhēng)以及其他眾多因素對(duì)工程咨詢(xún)企業(yè)知識(shí)的數(shù)量與質(zhì)量提出了更高的要求。從某種意義上說(shuō)，知識(shí)管理是咨詢(xún)企業(yè)最重要的能力。經(jīng)常有人將知識(shí)管理與信息管理混為一談。信息是知識(shí)的來(lái)源，但不一定成為知識(shí)。要想從信息中提煉知識(shí)，需要有意識(shí)地開(kāi)展必要的活動(dòng)，使信息經(jīng)過(guò)大腦的處理、加工與提煉。知識(shí)管理，是建立一套制度

26、，開(kāi)展一系列活動(dòng)，獲取、記錄、整合、存取、更新和創(chuàng)新知識(shí)，以適當(dāng)?shù)男问綖樽稍?xún)企業(yè)所掌握，成為企業(yè)知識(shí)積累中的一部分，用來(lái)為客戶、社會(huì)創(chuàng)造價(jià)值，不至隨著企業(yè)活動(dòng)的結(jié)束或停止或因當(dāng)事人的離開(kāi)而流失。知識(shí)管理可以延伸到人在知識(shí)方面的行為、企業(yè)管理制度與企業(yè)文化等方面。簡(jiǎn)而言之，知識(shí)管理就是對(duì)知識(shí)提煉、創(chuàng)造、共享和積累，以及應(yīng)用等過(guò)程進(jìn)行規(guī)劃、實(shí)施和控制的活動(dòng)。2，知識(shí)管理的必要性知識(shí)管理能夠減少重復(fù)勞動(dòng)，增強(qiáng)企業(yè)的記憶，豐富咨詢(xún)企業(yè)的智慧。知識(shí)管理在全球迅猛發(fā)展的原因在于：（1）競(jìng)爭(zhēng)。市場(chǎng)競(jìng)爭(zhēng)日益激烈，創(chuàng)新速度加快。咨詢(xún)企業(yè)必須不斷獲得新知識(shí)，利用知識(shí)為企業(yè)和社會(huì)創(chuàng)造價(jià)值。要走向世界，就必須掌握與世

27、界交流，以及獲取、創(chuàng)造與轉(zhuǎn)換知識(shí)的能力。企業(yè)文化對(duì)企業(yè)學(xué)習(xí)能力影響極大，必須擺脫封閉、保守、不思進(jìn)取的陳舊文化，轉(zhuǎn)變成學(xué)習(xí)型企業(yè)，才能在競(jìng)爭(zhēng)中立于不敗之地。（2）以客戶為中心。企業(yè)要為客戶創(chuàng)造價(jià)值。（3）員工流動(dòng)。如果企業(yè)不能及時(shí)妥善地處理，就會(huì)喪失員工在本企業(yè)工作期間獲得的知識(shí)。很多咨詢(xún)企業(yè)，當(dāng)某專(zhuān)業(yè)骨干離職后，在相當(dāng)長(zhǎng)一段時(shí)間內(nèi)，無(wú)法正常開(kāi)展該專(zhuān)業(yè)的業(yè)務(wù)，給企業(yè)和客戶造成了損失。（4）不確定性。咨詢(xún)企業(yè)內(nèi)外不確定因素眾多，市場(chǎng)競(jìng)爭(zhēng)使咨詢(xún)企業(yè)不能確?？蛻羯祥T(mén)。當(dāng)前的世界，新技術(shù)頻出，更新加快，咨詢(xún)企業(yè)不能確信自己為客戶提出的技術(shù)方案一定成功。企業(yè)及其成員獲取和使用知識(shí)的能力成為企業(yè)生存與發(fā)展

28、的決定性因素，知識(shí)已成為企業(yè)獲取競(jìng)爭(zhēng)優(yōu)勢(shì)的基礎(chǔ)與稀缺資產(chǎn)。3知識(shí)管理的組織工程咨詢(xún)企業(yè)必須建立知識(shí)管理需要的組織，明確必要的角色及其職責(zé)、權(quán)限和相互關(guān)系，并分派給適當(dāng)人員。必須制訂管理方針、目標(biāo)以及實(shí)現(xiàn)這些目標(biāo)所需要的規(guī)章制度。此外，還要設(shè)立必要的知識(shí)庫(kù)、多渠道知識(shí)收集系統(tǒng)等。知識(shí)管理需要長(zhǎng)期堅(jiān)持并且努力使其成為企業(yè)文化的一部分。知識(shí)管理體系應(yīng)當(dāng)具備如下特征：（1）以人為本。知識(shí)管理要以人為本，咨詢(xún)企業(yè)應(yīng)充分發(fā)動(dòng)每個(gè)部門(mén)、每一員工，貢獻(xiàn)自己掌握的信息與知識(shí)，使之成為企業(yè)的知識(shí)與智慧。（2）以無(wú)形資產(chǎn)為主要對(duì)象。知識(shí)管理比以往任何管理形式都更重視知識(shí)資產(chǎn)。（3）無(wú)間斷的循環(huán)。在企業(yè)存續(xù)期間，知識(shí)

29、管理是一個(gè)不間斷的“積累一創(chuàng)造一應(yīng)用一再積累一再創(chuàng)造一再應(yīng)用”的循環(huán)過(guò)程（4）以提煉隱性知識(shí)為主。知識(shí)管理對(duì)象有顯性和隱性知識(shí)，但以提煉隱性知識(shí)為重點(diǎn)，設(shè)法將隱性知識(shí)轉(zhuǎn)換為易于企業(yè)內(nèi)共享的知識(shí)。研究表明，大多數(shù)企業(yè)，有序、關(guān)系清楚，可供員工參考的信息與知識(shí)只占自身?yè)碛锌偭康?0%，其他90%存在員工個(gè)人大腦之中，且難于用語(yǔ)言、文字或圖形清楚地表達(dá)出來(lái)供企業(yè)使用。一旦這些人流失，企業(yè)將蒙受巨大損失。（5）以創(chuàng)新為目標(biāo)。知識(shí)管理以創(chuàng)新，以建立創(chuàng)造新知識(shí)平臺(tái)為目標(biāo)，創(chuàng)新和孕育新智慧是知識(shí)管理的標(biāo)志。（6）建立學(xué)習(xí)型組織。便于知識(shí)管理的組織與疊床架屋的層級(jí)組織不同，只有中間層次簡(jiǎn)單的“扁平”、開(kāi)放學(xué)習(xí)

30、型組織，才有利于知識(shí)管理。知識(shí)管理必須利用先進(jìn)的信息技術(shù)與工具。有些咨詢(xún)企業(yè)已按自身的發(fā)展戰(zhàn)略及管理體制建立了獨(dú)特的知識(shí)管理系統(tǒng)。與信息管理一樣，知識(shí)管理也應(yīng)具備安全管理功能，保護(hù)本企業(yè)掌握的知識(shí)不受損害。（二）知識(shí)管理原則與功能1知識(shí)管理原則（1）積累原則。知識(shí)積累是實(shí)施知識(shí)管理的基礎(chǔ)（2）共享原則。咨詢(xún)企業(yè)應(yīng)使每一員工都能接觸和使用公司的知識(shí)和信息。（3）交流原則。知識(shí)管理的核心是要在企業(yè)內(nèi)部建立有利于交流的結(jié)構(gòu)和文化，消除員工之間的交流的障礙。知識(shí)交流在上述原則中處于最高層次。2知識(shí)管理功能知識(shí)管理要獲得成功，需要有完整的知識(shí)管理制度。該制度應(yīng)具備的主要功能如下：（1）能夠清楚地了解企業(yè)

31、已有何種知識(shí)，還需要何種知識(shí)；（2）要能夠及時(shí)將知識(shí)傳遞給真正需要的人；（3）一定要使需要知識(shí)的人能夠獲??；不斷生產(chǎn)新知識(shí)，并使整個(gè)企業(yè)的人能夠使用；（4）確保進(jìn)入企業(yè)的知識(shí)可靠、有生命力；（5）定期檢查企業(yè)的知識(shí)是否仍然有效；（6）改造企業(yè)文化，建立激勵(lì)機(jī)制，為知識(shí)管理創(chuàng)造便利條件。（三）內(nèi)部交流與共享咨詢(xún)企業(yè)內(nèi)部的知識(shí)交流一方面可以讓不同項(xiàng)目組之間交流咨詢(xún)方法和經(jīng)驗(yàn)，促進(jìn)隱性知識(shí)的提煉；另一方面也便于彼此加深了解和信任，促進(jìn)合作，促進(jìn)知識(shí)的創(chuàng)新與共享。知識(shí)共享有多種方式，例如即時(shí)通信、培訓(xùn)與及時(shí)交流會(huì)等。知識(shí)共享將分散于各部門(mén)和各員工頭腦中的知識(shí)匯集起來(lái)，將知識(shí)孤島連成大陸，產(chǎn)生孤島無(wú)法產(chǎn)

32、生的價(jià)值。交流可以最大限度地使知識(shí)和經(jīng)驗(yàn)得到融合和升華，也是使舊知識(shí)得以發(fā)展、新知識(shí)得以產(chǎn)生的催化劑。咨詢(xún)企業(yè)應(yīng)當(dāng)成為學(xué)習(xí)型組織，內(nèi)部的知識(shí)交流是員工學(xué)習(xí)與組織學(xué)習(xí)的重要方式。咨詢(xún)單位應(yīng)當(dāng)建立適當(dāng)?shù)募?lì)制度，促進(jìn)知識(shí)共享，在共享中充實(shí)。企業(yè)的知識(shí)管理規(guī)章和制度，應(yīng)當(dāng)全面鼓勵(lì)各部門(mén)奉獻(xiàn)自己的知識(shí)，與他人共享。只有這樣，才有利于企業(yè)的知識(shí)積累。四）知識(shí)管理成效的評(píng)估咨詢(xún)企業(yè)知識(shí)管理的好壞與成效，可從以下幾個(gè)方面評(píng)估：1人力資源：培訓(xùn)費(fèi)用、員工向心力與經(jīng)驗(yàn)；2創(chuàng)新成果：研發(fā)費(fèi)用、員工創(chuàng)新態(tài)度與比率、咨詢(xún)業(yè)務(wù)的更新、知識(shí)產(chǎn)權(quán)；3客戶態(tài)度：服務(wù)質(zhì)量、合作時(shí)間、咨詢(xún)次數(shù)、銷(xiāo)售額等。七、 信息的綜合信息綜合

33、是信息工作的重要內(nèi)容。采集來(lái)的信息經(jīng)常是零散、無(wú)序，甚至殘缺不全，無(wú)法直接使用。對(duì)于這樣的信息，須進(jìn)行分析、聯(lián)系、推斷、整理和組合，使之成為有用信息，然后確定其特征，如精度、類(lèi)型、長(zhǎng)度、保密度、保留時(shí)間、用途等。信息綜合有兩種方式：一是對(duì)已有信息挖掘、延伸，引發(fā)創(chuàng)新需求的新信息，達(dá)到信息的“增值”，二是通過(guò)設(shè)計(jì)和試驗(yàn)創(chuàng)造新的信息。有價(jià)值的信息往往是反復(fù)推理分析和猜想后的結(jié)果，這個(gè)過(guò)程要求咨詢(xún)工程師具備很強(qiáng)的分析、聯(lián)想、綜合與創(chuàng)造能力。八、 信息鑒別及必要性（一）信息鑒別數(shù)據(jù)與信息鑒別，可稱(chēng)信息識(shí)別，就是將信息與具有特定屬性的“模式”進(jìn)行比較，進(jìn)而判斷信息的類(lèi)別或?qū)傩?。具體而言，就是信息收集或使用者運(yùn)用已有的知識(shí)和經(jīng)驗(yàn)，在對(duì)獲取的信息進(jìn)行初步分析之后，按照一定原則和目的，辨認(rèn)與甄別信息的真?zhèn)?、輕重主次、是否完整、是否有用，以及用途大小等。（二）信息鑒別的必要性互聯(lián)網(wǎng)時(shí)代，信息極為豐富，大大開(kāi)闊了人們的眼界。然而，蜂擁而至，難辨真假的信息摻雜在一起，