高光譜成像技術(shù)是一項令人振奮的新技術(shù),非常有前景,尤其是結合現代機器學(xué)習軟件和執行器(如:機器人或空氣噴氣機)使用時(shí),高光譜成像技術(shù)有能力革新工業(yè)分類(lèi)方法,使機器能夠執行人類(lèi)難以完成的復雜任務(wù)。

圖1:農場(chǎng)的高光譜假彩色圖像(左),指定區域的反射光譜曲線(xiàn)(右)
什么是高光譜成像儀?
高光譜成像技術(shù)指的是測量二維圖像中每個(gè)像素的高分辨率光譜數據。標準相機在每個(gè)像素上提供三個(gè)光譜數據通道:紅、綠、藍(RGB),視覺(jué)者的大腦輸入了這三種顏色的混合顏色,并將它們解釋為一種獨特的顏色。在高光譜圖像中,材料的反射光譜是連續的波長(cháng)曲線(xiàn),每個(gè)像素上有數百個(gè)光譜數據點(diǎn),它是光譜學(xué)的一種,標準光譜儀只提供一個(gè)“像素”的光譜測量-沒(méi)有成像信息。多光譜成像儀指的是每個(gè)像素提供幾個(gè)光譜數據通道的照相機,通道數通常在4-12之間?!案吖庾V”這個(gè)術(shù)語(yǔ)指的是:許多光譜數據點(diǎn),它們產(chǎn)生一個(gè)近乎連續的光譜曲線(xiàn),通常在每條曲線(xiàn)上有數百個(gè)光譜數據通道。然而,高光譜成像儀的設計和制造要比非成像光譜儀復雜得多,因為二維圖像中每個(gè)像素點(diǎn)都需要有連續的光譜曲線(xiàn),而且最小化光譜失真一直是一個(gè)非常困難的光學(xué)問(wèn)題。
圖1顯示了一個(gè)農場(chǎng)的高光譜假彩色圖像以及指定區域像素的高光譜曲線(xiàn);圖2顯示了相同的高光譜數據,但是光譜通道數降低至4個(gè),4個(gè)光譜通道的數據類(lèi)似于Landsat衛星獲得的數據,可以直觀(guān)的看出圖1的數據比圖2包含了更多的光譜信息,從而能夠對場(chǎng)景中的對象進(jìn)行更加精準、可靠的分類(lèi)。

圖2:與圖1相同像素區域的多光譜數據,光譜波段與Landsat衛星影像波段一致?
高光譜成像儀越來(lái)越受歡迎的主要原因:
1.????隨著(zhù)科技發(fā)展,相機越來(lái)越普及,而且拍照速度越來(lái)越快;
2.????計算機可以提供足夠的計算能力來(lái)處理大量數據;
3.????結合現代的機器學(xué)習算法,科學(xué)家可以利用高光譜數據準確識別材料,甚至那些看起來(lái)非常相似的材料。
基于不同的材料具有不同的反射光譜這個(gè)事實(shí),使得這項技術(shù)具有很強的實(shí)用性,在研究和工業(yè)應用中發(fā)展迅速。
?
高光譜成像技術(shù)的應用:
農業(yè)應用
農業(yè)方面,不同植物有不同的光譜,相同植物在不同條件下光譜也有差異。例如,高光譜數據可以用來(lái)提醒農民作物脅迫或有害雜草的早期跡象,也可以確定成熟度。高光譜成像技術(shù)在精準農業(yè)和環(huán)境監測方面的應用越來(lái)越多,相信在不久的將來(lái),會(huì )有質(zhì)的飛躍。
確定光譜特征和植物生理特征參數的準確關(guān)系是全球性研究的一部分,這使定點(diǎn)使用除草劑、農藥和化肥成為可能。這種作物管理技術(shù)會(huì )讓農民有針對性的定量使用化肥,節省成本,并獲取更大收益。因此,高光譜技術(shù)獲得了強有力的體制支撐,尤其是將食品供應和環(huán)境保護作為核心問(wèn)題的亞洲。??
工業(yè)應用
相比于野外農田和森林,工廠(chǎng)的環(huán)境更好控制,因此,高光譜成像在工業(yè)分類(lèi)中的應用越來(lái)越廣泛。傳統的視覺(jué)系統很難對具有相似顏色或外觀(guān)的物體進(jìn)行分類(lèi),如:很難辨別具有相似顏色的果實(shí)、蔬菜或與組成其可見(jiàn)顏色無(wú)關(guān)的材料(如再生塑料)。當標準視覺(jué)系統分類(lèi)失敗時(shí),這些分類(lèi)工作只能由人工來(lái)完成,價(jià)格高昂、速度慢、錯誤率高。
應用高光譜成像技術(shù),不僅可以利用高光譜數據去分類(lèi)相似顏色的材料,也可以獲取可見(jiàn)光范圍以外的信息,如紅外和紫外波段。實(shí)時(shí)的機器學(xué)習算法可以秒級處理數據并且傳遞這些信息至機器人手臂或空氣噴氣機等執行器上完成分類(lèi)工作。?
軟件及算法
雖然相機的設計和制造在技術(shù)上具有挑戰性,但研發(fā)出可靠的用于工業(yè)分類(lèi)的高光譜分析軟件是機遇,也是挑戰。由于深層機器學(xué)習知識伴隨在廣泛應用的簡(jiǎn)單算法中,高光譜機器視覺(jué)軟件開(kāi)發(fā)是一項令人興奮的科技領(lǐng)域。
光譜圖像數據分析的傳統方法是使用植被指數或光譜指數的概念,俗稱(chēng)波段組合,這些指數是每個(gè)像元的指標,通過(guò)測量幾個(gè)指定波段的光譜強度,再由簡(jiǎn)單代數組合計算得出。例如,最常見(jiàn)的植被指數(NDVI)即歸一化差分植被指數,最早用于多光譜遙感影像中,給定每個(gè)像素的全反射光譜,可以在每個(gè)像素中提取NDVI指數。

NIR是指紅外波段(750nm左右)反射率,Red指紅光波段(650nm)反射率,NDVI的值在-1.0—1.0之間。NDVI的大小是衡量植物健康狀況的重要指標。NDVI非常適用于早前的多光譜相機,如Landsat衛星影像,每個(gè)像素點(diǎn)記錄4個(gè)光譜通道(紅綠藍及近紅外)。
NDVI可以粗略估計植物健康狀況,機載高光譜成像傳感器問(wèn)世后,涌現出許多更精確的新光譜指數,如測量植物葉綠素含量的指數,修改葉綠素吸收反射的指數(MCARI),

衡量植物花青素含量的指數,花青素反射指數ARI2:


圖3:與圖1相對應的修改葉綠素吸收反射指數MCARI分布圖?
圖3顯示了與圖1相對應的修改葉綠素吸收反射指數MCARI分布圖。途中高亮區域代表MCARI值高,意味著(zhù)葉綠素活性高,黑暗區代表低值。?
這些指數最初是為農業(yè)和環(huán)境監測而開(kāi)發(fā)的,現在已擴展到醫學(xué)、水質(zhì)、生物和地質(zhì)等多個(gè)領(lǐng)域。在醫學(xué)中,研究者會(huì )利用與水和氧有關(guān)的指數來(lái)確定手術(shù)過(guò)程中人體肌肉組織的特性。
雖然指數是有用的工具,但是它們只包含了整個(gè)連續波長(cháng)曲線(xiàn)的小部分信息。高光譜數據攜帶的信息要遠多于幾個(gè)波段的信息,并且可以根據要求誕生出不同的光譜指數。這意味著(zhù)整個(gè)波段的統計方法會(huì )產(chǎn)生更可靠的分類(lèi)效果,這也是先進(jìn)的視覺(jué)應用程序所使用的方法。
機器視覺(jué)算法通過(guò)統計方法,利用整個(gè)光譜進(jìn)行更精準的植物或材料的分類(lèi),如:支持向量機(SVM)和神經(jīng)網(wǎng)絡(luò )?(CNN),在高光譜分類(lèi)中取得了顯著(zhù)的成績(jì)。特別是結合了空間識別算法后,高光譜機器視覺(jué)可以作為計算機敏銳的眼睛,廣泛應用于食品、材料、顏料、圖案、涂層、缺陷和污染物等識別工作。
前途一片光明
盡管高光譜成像技術(shù)仍處于起步階段,但是相對于傳統成像系統來(lái)說(shuō),可以提供更豐富的數據,這是它的明顯優(yōu)勢。更值得一提的是,該技術(shù)的數據采集、處理速度和計算復雜度,已經(jīng)被許多實(shí)際應用所克服。隨著(zhù)高光譜成像技術(shù)的不斷改進(jìn),用戶(hù)將逐漸認識到高光譜成像技術(shù)的能力,該技術(shù)將在更大尺度上幫助用戶(hù)解決之前難以攻克的問(wèn)題,高光譜成像技術(shù)將會(huì )大放異彩。