近紅外光譜檢測(cè)關(guān)鍵技術(shù)

1、近紅外光譜檢測(cè)關(guān)鍵技術(shù)第1頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三基本概念近紅外光譜分析技術(shù)主要利用有機(jī)分子的含氫基團(tuán)在中紅外譜區(qū)的倍頻與合頻的吸收來(lái)分析分子的結(jié)構(gòu)、組成、狀態(tài)等信息，記錄的主要是CH、OH、NH、SH、PH等含氫基團(tuán)振動(dòng)的倍頻、合頻吸收。不同基團(tuán)(如甲基亞甲基、苯環(huán)等)或同一基團(tuán)在不同化學(xué)環(huán)境中的近紅外吸收波長(zhǎng)與強(qiáng)度都有明顯差別。第2頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三兩大原理第3頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三漫反射定量分析原理近紅外光譜分析與中紅外、紫外可見(jiàn)光譜分析是完全不同的。其測(cè)量方式主要是用漫反射技術(shù)

2、完成，光與固體物質(zhì)的作用方式如下所示:第4頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三由光源發(fā)出的近紅外光照射到固體物質(zhì)后，進(jìn)入樣品內(nèi)部經(jīng)過(guò)多次反射、折射和吸收后又返回到樣品表面的光稱(chēng)為漫反射光。其負(fù)載了樣品的結(jié)構(gòu)和組成的大量信息。但由于漫反射光與樣品的作用形式多樣，除了樣品的組成成分外，其顆粒大小、軟硬程度、顏色及溫度等性質(zhì)都會(huì)對(duì)漫反射光的強(qiáng)度產(chǎn)生影響。因此，漫反射不遵守比爾定律，而遵守KubelkaMurk方程:第5頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三第6頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三第7頁(yè)，共28頁(yè)，2022年，5月20日，

3、18點(diǎn)59分，星期三儀器技術(shù)關(guān)鍵在于：提高儀器的信噪比表現(xiàn)在：吸光度的重現(xiàn)性某一樣品進(jìn)行多次掃描，各掃描點(diǎn)下不同一次測(cè)量吸光度之間的差異，通常用多次測(cè)量某一譜峰位置所得吸光度的標(biāo)準(zhǔn)差表示。吸光度重現(xiàn)性對(duì)近紅外光譜檢測(cè)來(lái)說(shuō)是很重要的指標(biāo)，它直接影響模型建立的效果和測(cè)量的準(zhǔn)確性。第8頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三儀器系統(tǒng)由：光源、分光系統(tǒng)、樣品池、探測(cè)器 組成。近紅外光譜儀的四個(gè)組成部分，每個(gè)部分都可能引入噪聲。透射式近 紅外光譜儀適于半透明、大顆粒樣品漫反射式 近紅外光譜儀適于薄層、稀疏或粉末狀樣品半反半透式 近紅外光譜儀結(jié)合前兩種的優(yōu)點(diǎn)，普適性好第9頁(yè)，共28頁(yè)，2

4、022年，5月20日，18點(diǎn)59分，星期三光源光源譜帶足夠?qū)捯ＷC光源的高穩(wěn)定性方法：增大光信號(hào)強(qiáng)度：噪聲一定，增大光強(qiáng)=增加信號(hào)強(qiáng)度=提高信噪比對(duì)光信號(hào)進(jìn)行調(diào)制：直流變交流，再通過(guò)后續(xù)濾波電路消除干擾信號(hào)使用濾光片：直接把不需要的光濾掉，減少雜光干擾第10頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三分光系統(tǒng)一般來(lái)講，光學(xué)質(zhì)量可靠的分光系統(tǒng)本身不會(huì)直接影響到儀器的信噪比，但由于儀器中裝載分光系統(tǒng)的可動(dòng)部件如光柵轉(zhuǎn)軸、濾光片盤(pán)軸，在連續(xù)高強(qiáng)度的運(yùn)行中可能存在磨損問(wèn)題，從而影響光譜數(shù)據(jù)的可靠性，這樣也可能會(huì)影響到儀器信噪比。方法：研制無(wú)移動(dòng)部件光譜儀，直接使有用的光譜落在線陣探測(cè)器的

5、有效區(qū)域，這樣整個(gè)分光系統(tǒng)就不存在移動(dòng)部件，也就不存在磨損部件的問(wèn)題。第11頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三探測(cè)器合格的探測(cè)器一般都能滿足使用要求，主要問(wèn)題是探測(cè)器多數(shù)對(duì)于溫度十分敏感，保持恒溫工作環(huán)境很重要。方法：人工通過(guò)安裝空調(diào)、風(fēng)扇、散熱管等降溫，另有一些高檔儀器會(huì)直接采用自帶液氮、半導(dǎo)體制冷的探測(cè)器。第12頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三樣品池幾乎所有近紅外光譜儀在樣品池的表面都是一個(gè)玻璃或石英的蓋子，其目的是保證樣品有一個(gè)勻質(zhì)的表面。但由于各個(gè)蓋子間的厚度不可能加工到完全一致，因此，蓋子的厚度和折射率的不同將影響分析結(jié)果的準(zhǔn)確性。方

6、法：配置開(kāi)放式樣品池，這種樣品池沒(méi)有玻璃或石英的蓋子，也就消除了由于蓋子的不一致而產(chǎn)生的分析誤差。但在裝樣到上機(jī)掃描過(guò)程中，由于樣品表面蒸發(fā)或吸濕作用，會(huì)導(dǎo)致樣品含水量的變化。第13頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三光譜預(yù)處理技術(shù)近紅外光譜儀所采集的光譜數(shù)據(jù)不僅包含了被測(cè)樣品的組成和結(jié)構(gòu)信息，而且還包含了噪音、背景及其它系統(tǒng)干擾的信息。這些干擾信息使得近紅外譜圖信息復(fù)雜化，在有些情況下甚至?xí)螞](méi)待測(cè)物質(zhì)的信息。光譜預(yù)處理主要內(nèi)容就是是消噪。方法主要有濾波、基線校正、歸一化處理、多元散射校正。第14頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三濾波一般認(rèn)為，近

7、紅外光譜的譜帶較寬，從頻譜上看，有用信息處于低頻部分，而隨機(jī)噪聲一般處于高頻部分；因此，很容易通過(guò)平滑除去這部分噪聲。有關(guān)濾噪處理的數(shù)學(xué)方法有很多種，如小波變換、傅立葉變換、奇異值分解及其它一些方法。這些方法在解決不同類(lèi)型的噪音、改善信噪比方面都各有特點(diǎn)。其中，信號(hào)平滑是一種最常用的消除高頻噪聲干擾的方法;其原理是將各數(shù)據(jù)點(diǎn)的值按一定的權(quán)重在自身和臨近點(diǎn)重新分配，得到較光滑的曲線;常用的平滑方法主要有：平均窗口平滑法、中位值平滑法、savitskyGolay平滑法等。第15頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三基線校正由于樣品狀態(tài)與測(cè)量條件的差異，導(dǎo)致近紅外光譜的平移或旋轉(zhuǎn)

8、，這對(duì)譜圖解析造成了較大的干擾，如不加處理，會(huì)影響所建立校正模型的質(zhì)量和對(duì)未知樣品預(yù)測(cè)結(jié)果的準(zhǔn)確性。要消除這種干擾，可以通過(guò)基線校正處理，從而使校正模型的穩(wěn)健性更強(qiáng)?；€校正最常用的解決辦法是對(duì)光譜進(jìn)行一階導(dǎo)數(shù)或二階導(dǎo)數(shù)處理，前者主要解決基線的偏移，后者則解決基線的漂移。第16頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三歸一化處理在使用多元校正方法建立近紅外光譜分析模型時(shí)，將光譜的變動(dòng)（而非光譜的絕對(duì)量）與待測(cè)性質(zhì)或組成的變動(dòng)進(jìn)行關(guān)聯(lián)?；谝陨咸攸c(diǎn)，在建立定量或定性模型前，往往采用一些數(shù)據(jù)增強(qiáng)算法增加樣品之間的差異，從而提高模型的穩(wěn)健性和預(yù)測(cè)能力。常用的算法有均值中心化、標(biāo)準(zhǔn)化和

9、歸一化等。從每個(gè)光譜數(shù)據(jù)中減去各個(gè)樣品的平均值，使所有數(shù)據(jù)都分布在零點(diǎn)兩側(cè)，充分反映變化信息，消除光程或樣品稀釋等變化對(duì)光譜響應(yīng)造成的影響，并且可簡(jiǎn)化以后的回歸運(yùn)算。第17頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三多元散射校正吸光度不僅與成分含量有關(guān)，還與樣品顆粒大小、均勻性及裝樣的松緊度有很大關(guān)系，這些因素統(tǒng)稱(chēng)為顆粒原因。不同樣品間吸光度的差異中通常只有極小部分與樣品的成分含量差異有關(guān)，其他絕大部分由顆粒度原因造成的吸光度的差異可視為干擾信息，在對(duì)光譜進(jìn)行分析時(shí)應(yīng)當(dāng)盡量消除。多元散射校正則在解決樣品的粒徑不均勻或測(cè)樣容器不一致對(duì)光譜的影響上有良好的效果。第18頁(yè)，共28頁(yè)，2

10、022年，5月20日，18點(diǎn)59分，星期三信息提取技術(shù)在近紅外光譜分析中由于光譜譜帶較寬、吸收峰重疊嚴(yán)重、信息復(fù)雜。要使近紅外光譜技術(shù)有所作為，就離不開(kāi)信息提取技術(shù)的支持。光譜信息的提取有兩種方式，一種是只提取特定波長(zhǎng)點(diǎn)的信息，在早期的光譜檢測(cè)中經(jīng)常使用這種方式。另一種方法采用化學(xué)計(jì)量學(xué)知識(shí)進(jìn)行連續(xù)譜校正，是現(xiàn)代近紅外光譜技術(shù)的特征之一。不管哪種方式，都是建立在化學(xué)計(jì)量學(xué)(Chemometrics)理論基礎(chǔ)之上的。第19頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三主要方法：多元線性回歸(MLR)主成分回歸(PCR)偏最小二乘回歸(LSR)人工神經(jīng)網(wǎng)絡(luò)(ANN)線性問(wèn)題非線性問(wèn)題第

11、20頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三多元線性回歸(MultiplyLinearRegression，MLR)多元線性回歸是一元線性回歸的擴(kuò)展，用于建立多個(gè)自變量和因變量之間的關(guān)系。在近紅外光譜的定量分析中，常常涉及到處理多個(gè)近紅外光譜信息與所研究質(zhì)量指標(biāo)的相關(guān)性，多元線性回歸是最早使用的統(tǒng)計(jì)分析方法。多元線性回歸適用于線性關(guān)系特別好的簡(jiǎn)單體系，不需考慮組分之間相互干擾的影響，計(jì)算簡(jiǎn)單，公式含義也較清晰。第21頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三主成分回歸(PrincipleComponentRegression，PCR)PCR是先把原始數(shù)據(jù)進(jìn)行主

12、成分分析，它是以因子分析為基礎(chǔ)，將光譜數(shù)據(jù)向協(xié)方差最大方向投影，使數(shù)目較少的主成分成為原變量的線性組合，主成分最大限度地反映了被測(cè)樣品的組成和結(jié)構(gòu)信息，而最小限度地包含噪音。通過(guò)對(duì)主成分個(gè)數(shù)的合理選取，去掉代表干擾組分和干擾因素的主成分,然后再用其中的幾個(gè)主成分與物質(zhì)的化學(xué)成分進(jìn)行多元線性回歸，這就是主成分回歸分析的主要思想。第22頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三偏最小二乘回歸(PartialLeastSquareRegression，PLSR)PLSR從80年代開(kāi)始應(yīng)用于化學(xué)研究，現(xiàn)已成為化學(xué)計(jì)量學(xué)中最常用的多元校正方法，也是近紅外光譜分析上應(yīng)用最多的回歸方法。PL

13、SR也是一種基于因子分析的多元校正方法，與主成分回歸的區(qū)別是：它不僅將響應(yīng)矩陣進(jìn)分解，提取主因子，還將濃度矩陣進(jìn)行分解提取主因子，因而具有更強(qiáng)的提供信息的能力，所建立的校正模型更穩(wěn)定，有更強(qiáng)的抗干擾能力。第23頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三人工神經(jīng)網(wǎng)絡(luò)(Artificial Neural Network，ANN)MLR、PCR、PLSR等多元校正方法都是基于這樣一個(gè)假設(shè)前提，即所研究的體系是線性體系。但在使用近紅外光譜分析技術(shù)的實(shí)際工作中，吸光度與樣品含量化學(xué)測(cè)之間具有一定的非線性，這主要是由于體系中各組分的相互作用、儀器的噪聲及基線漂移等原因，會(huì)引起非線性現(xiàn)象；特

14、別是當(dāng)樣品的組分含量變化范圍較大時(shí)，其非線性較明顯。ANN是利用大量簡(jiǎn)單的處理單元廣泛連接組成復(fù)雜網(wǎng)絡(luò)，來(lái)模擬人腦神經(jīng)網(wǎng)結(jié)構(gòu)和行為，具有人腦的基本功能，比如學(xué)習(xí)、記憶、概括、歸納和抽取等。人工神經(jīng)網(wǎng)絡(luò)有多種算法，按學(xué)習(xí)策略可分為兩類(lèi)：有監(jiān)督式的人工神經(jīng)網(wǎng)絡(luò)和無(wú)監(jiān)督式的人工神經(jīng)網(wǎng)。有監(jiān)督式的人工神經(jīng)網(wǎng)絡(luò)的方法主要是對(duì)已知樣本進(jìn)行訓(xùn)練，然后對(duì)未知樣本進(jìn)行預(yù)測(cè)。無(wú)監(jiān)督式方法，亦稱(chēng)自組織人工神經(jīng)網(wǎng)絡(luò)，無(wú)須對(duì)已知樣本進(jìn)行訓(xùn)練，則可用于樣本的聚類(lèi)和識(shí)別。第24頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三常見(jiàn)問(wèn)題：欠擬合：線性回歸定標(biāo)方法中參與變量太少，如定標(biāo)所用的主成分因子數(shù)太少，會(huì)使一些有

15、用的信息沒(méi)有包含在模型中，導(dǎo)致得到的校正的結(jié)果和預(yù)測(cè)的結(jié)果都不會(huì)很好。過(guò)擬合：得到相關(guān)性好且偏差小的模型固然重要，但也要防止過(guò)擬合現(xiàn)象的產(chǎn)生。譬如在基于多變量（波長(zhǎng)點(diǎn)）的多元線性回歸模型中所選擇的變量數(shù)過(guò)多或在PLSR、PCR回歸中所用的主成分因子數(shù)過(guò)多等都可能造成過(guò)擬合，所得結(jié)果很有可能是校正集樣品的校正結(jié)果很好，但是對(duì)沒(méi)有在校正集中樣品的預(yù)測(cè)時(shí)，結(jié)果會(huì)很差，往往導(dǎo)致預(yù)測(cè)失敗。第25頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三1.對(duì)象廣泛，多場(chǎng)合應(yīng)用幾乎可用于所有與含氫基團(tuán)有關(guān)的樣品物化性質(zhì)分析，而且對(duì)某些無(wú)近紅外光譜吸收的物質(zhì)(如某些無(wú)機(jī)離子化合物)，也可通過(guò)它對(duì)共存的本體物

16、質(zhì)影響引起的光譜變化，間接地反映它存在的信息。同時(shí)適合多種場(chǎng)合，可用于實(shí)驗(yàn)室分析，也可用于現(xiàn)場(chǎng)檢測(cè)和實(shí)時(shí)在線分析。2.分析過(guò)程簡(jiǎn)單近紅外光譜與中紅外光譜不同的是水分的吸收不會(huì)覆蓋C一H、N一H和0一H基團(tuán)的吸收帶，因此可用于對(duì)水溶液樣品、固體和泥漿狀樣品的直接分析，而不必經(jīng)溶劑稀釋或制備嗅化鉀片等處理，便于生產(chǎn)中實(shí)時(shí)測(cè)定,避免離線檢測(cè)時(shí)制備樣品帶入誤差。優(yōu)勢(shì)：第26頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三3.可以利用光纖傳輸，實(shí)現(xiàn)遠(yuǎn)程一主機(jī)多探頭分布式檢測(cè)光纖對(duì)電磁干擾不敏感，可在困難條件下或危險(xiǎn)的如有毒的、充滿易燃易爆樣品的境中采樣分析。4.多組分可同時(shí)快速測(cè)量在大多數(shù)情況下，通過(guò)建立的數(shù)學(xué)模型就可以利用樣品的近紅外光譜在幾十秒至幾分鐘內(nèi)完成一個(gè)樣品的多種性質(zhì)的測(cè)量，與傳統(tǒng)的方法相比，節(jié)省了大量人力和物力，分析工作的效率大大提高。第27頁(yè)，共28頁(yè)，2022年，5月20日，18點(diǎn)59分，星期三局限：1.需要大量定標(biāo)樣品和準(zhǔn)確的化學(xué)成分資料以建立