之前介紹過機器視覺中常用到的一種特征：LBP

LBP可以有效地處理光照變化，在紋理分析，紋理識別方面被廣泛應(yīng)用。

但是LBP只能處理單張的二維圖像，對于視頻或者圖像序列，如何用LBP來提取特征，捕捉視頻序列的運動信息呢。今天我們就介紹一種稱為LBP-TOP的特征，是芬蘭奧盧大學(xué)的GuoyingZhao等人提出來的，最早是用來處理動態(tài)紋理的識別，但是現(xiàn)在已經(jīng)被廣泛用在基于視頻的人臉表情識別上面。

LBP-TOP是LBP從二維空間到三維空間的拓展，LBP-TOP的全稱為:localbinarypatternsfromthreeorthogonalplanes,這里的threeorthogonalplanes指的就是三個正交平面，我們知道，單張的圖像只有X,Y兩個方向，而一個視頻或者圖像序列除了X,Y方向之外，還有一個沿著時間軸T的方向，而X-Y,X-T和Y-T三個方向是相互正交的。可以看看如下的圖：

圖片來自參考文獻[1]

一個圖像序列，給出三個正交平面的紋理圖，X-Y就是我們正常看到的圖像，X-T是每一行沿著時間軸掃描而過的紋理，Y-T是每一列沿著時間軸掃描而過的圖像，簡單來說，我們可以在這三個平面都提取LBP特征，然后把三個平面的LBP特征連接起來，就是LBP-TOP。如下圖所示：

圖片來自參考文獻[1]

所以說LBP-TOP是LBP從二維到三維的拓展，與LBP相比，LBP-TOP不僅考慮了X-Y平面的紋理信息，還考慮了X-T,Y-T的紋理信息，而X-T，Y-T的紋理信息，記錄著重要的動態(tài)紋理。

從之前介紹的LBP我們知道，提取LBP特征，采用uniformcode編碼的話，會生成一個59維的數(shù)組，記錄著LBP的直方圖信息，那么LBP-TOP特征，在三個正交平面都提取LBP，最終會生成一個59&TImes;3的數(shù)組，特征的維數(shù)一下增加了三倍。很多時候，我們會把圖像分塊，一個圖像分成4&TImes;4個blocks,每個block都會生成一個59&TImes;3的數(shù)組，最后生成的特征的維數(shù)是4&TImes;4×59×3=2832,所以LBP-TOP是一種高維特征。

LBP-TOP源代碼可以在奧盧大學(xué)的官網(wǎng)下載

聲明：博客上用到的圖片都來自參考文獻[1],只能用于學(xué)習(xí)交流，嚴禁用于任何商業(yè)目的，如需轉(zhuǎn)載或引用，請注明文獻[1]為出處。