陳 婧,許敏芬,王立強(qiáng),袁 波,段會(huì)龍,唐 佳
(1.浙江大學(xué)現(xiàn)代光學(xué)儀器國家重點(diǎn)實(shí)驗(yàn)室,浙江杭州310027;2.浙江大學(xué)生物醫(yī)學(xué)工程研究所,浙江杭州310027)
用于FICE圖像增強(qiáng)效果的客觀評(píng)價(jià)方法
陳 婧1,許敏芬1,王立強(qiáng)1,袁 波1,段會(huì)龍2,唐 佳1
(1.浙江大學(xué)現(xiàn)代光學(xué)儀器國家重點(diǎn)實(shí)驗(yàn)室,浙江杭州310027;2.浙江大學(xué)生物醫(yī)學(xué)工程研究所,浙江杭州310027)
根據(jù)FICE10組波長在增強(qiáng)黏膜微細(xì)血管對(duì)比度方面的不同增強(qiáng)效果,提出基于亮度對(duì)比度統(tǒng)計(jì)的客觀評(píng)價(jià)方法.采用Otsu法對(duì)圖像各像素亮度對(duì)比度進(jìn)行統(tǒng)計(jì)來準(zhǔn)確地標(biāo)記出圖像的血管區(qū)域,對(duì)血管區(qū)域各像素的亮度對(duì)比度進(jìn)行累加,累加值越大,對(duì)應(yīng)圖像的血管對(duì)比度越高.統(tǒng)計(jì)數(shù)據(jù)表明:增強(qiáng)血管對(duì)比度效果最優(yōu)的3個(gè)FICE波長組合依次是波段組合2、波段組合6以及波段組合1.該方法的統(tǒng)計(jì)結(jié)果符合病理學(xué)診斷結(jié)果,為臨床醫(yī)生在FICE波長組合選擇方面提供了一種客觀評(píng)價(jià)方法.
FICE;客觀評(píng)價(jià)方法;亮度對(duì)比度;Otsu法
由日本Yoichi Miyake發(fā)明的FICE[1-2](Fuji intelligent chromo endoscopy)技術(shù)是一項(xiàng)先進(jìn)的內(nèi)鏡診斷技術(shù).該技術(shù)將一幅電子內(nèi)鏡圖像分為多個(gè)單一波長的分光圖像,選取對(duì)獲取臨床信息價(jià)值最大的幾組波長圖像,將這幾組圖像重組為FICE圖像[3].該技術(shù)不僅有利于觀察不同部位病變的黏膜微細(xì)凹凸變化以及毛細(xì)血管形態(tài)結(jié)構(gòu),而且可以大大地增強(qiáng)微細(xì)血管與周圍組織的對(duì)比度[4-6].經(jīng)過研究者們長期的臨床實(shí)驗(yàn)總結(jié)及驗(yàn)證可知,目前FICE的臨床應(yīng)用中,都是首先在內(nèi)鏡主機(jī)中預(yù)設(shè)10組常用波長[7-9],按F1~F10對(duì)波長組進(jìn)行編號(hào).
對(duì)于FICE現(xiàn)有的10組常用波長,其分別適用于何種病變器官及病灶的檢查,已成為一個(gè)新的研究熱點(diǎn).Coriat等[9]采用Fujinon130萬像素的放大內(nèi)窺鏡分別對(duì)31位患者進(jìn)行胃鏡檢查,并邀請(qǐng)6位從未使用過FICE技術(shù)內(nèi)窺鏡的資深臨床醫(yī)生對(duì)患者的病變圖像進(jìn)行分析評(píng)分,分析證明增強(qiáng)效果最好的前3個(gè)波段組合依次是F5、F8及F1.Pohl 等[10]采用EXP-4400醫(yī)用電子內(nèi)窺鏡對(duì)一系列標(biāo)準(zhǔn)內(nèi)鏡圖像及其FICE處理后圖像的血管清晰度進(jìn)行比較.比較結(jié)果表明,增強(qiáng)毛細(xì)血管對(duì)比度與腺管開口分型的最優(yōu)波長組合是組合6,增強(qiáng)效果最好的前3個(gè)波段組合依次是F6、F2以及F1.何輝等[11]采用FICE10組常用波長分別對(duì)病變進(jìn)行腺管開口分型及毛細(xì)血管形態(tài)觀察,并對(duì)圖像清晰度進(jìn)行評(píng)分,選出最佳波長組合為F5與F8.
目前已有的對(duì)FICE常用10組波長增強(qiáng)微細(xì)血管對(duì)比度效果的評(píng)價(jià)方案都是基于醫(yī)生的臨床經(jīng)驗(yàn)以及主觀意識(shí)進(jìn)行統(tǒng)計(jì)的結(jié)果,而對(duì)FICE圖像增強(qiáng)效果理論的、客觀的評(píng)價(jià)方案尚未出現(xiàn)任何報(bào)道.盡管上述評(píng)價(jià)方法能夠統(tǒng)計(jì)出FICE常用10組波長的作用效果,但是由于這些方法主要依賴于醫(yī)生的主觀性及臨床經(jīng)驗(yàn),造成10組波長的作用效果評(píng)價(jià)結(jié)果不盡統(tǒng)一的缺陷,導(dǎo)致FICE技術(shù)的實(shí)際應(yīng)用及推廣存在一定的局限性及風(fēng)險(xiǎn)性.本文提出基于圖像亮度對(duì)比度統(tǒng)計(jì)的客觀評(píng)價(jià)方法.
1.1 主要思路
由于消化道黏膜微細(xì)血管與周圍組織的對(duì)比度主要體現(xiàn)在兩者的亮度差異上,對(duì)微細(xì)血管與周圍組織的對(duì)比度的評(píng)價(jià)可以轉(zhuǎn)化為對(duì)各像素亮度對(duì)比度的累加值進(jìn)行比較,累加值較大的圖像對(duì)應(yīng)其微細(xì)血管對(duì)比度較大.一幅內(nèi)鏡圖像的血管只占整幅圖像較小的區(qū)域,若對(duì)整幅圖像的所有像素點(diǎn)進(jìn)行亮度對(duì)比度的累加統(tǒng)計(jì),則大部分非血管區(qū)域像素將會(huì)對(duì)血管區(qū)域造成嚴(yán)重干擾,從而導(dǎo)致統(tǒng)計(jì)結(jié)果不準(zhǔn)確.在進(jìn)行對(duì)比度統(tǒng)計(jì)累加之前,首先要通過算法準(zhǔn)確地識(shí)別內(nèi)鏡圖像上的血管區(qū)域,然后對(duì)血管區(qū)域的亮度對(duì)比度進(jìn)行累加,最后對(duì)每幅圖像的累加結(jié)果進(jìn)行比較.累加值越大,說明該圖像微細(xì)血管與周圍組織的對(duì)比度越大.
對(duì)一幅內(nèi)鏡圖像上的血管區(qū)域進(jìn)行準(zhǔn)確識(shí)別的主要依據(jù)是圖像上每個(gè)像素的亮度對(duì)比度.采用Roberts差分算子計(jì)算某像素沿45°方向的亮度相對(duì)差分值Ycon1:
采用Roberts差分算子,計(jì)算該像素沿135°方向的亮度相對(duì)差分值Ycon2:
選擇兩者中的較大值作為該像素的亮度對(duì)比度:
式中:Y(i,j)為圖像上第i行j列像素的亮度,因此Ycon為0~1.0的浮點(diǎn)數(shù).
按照式(3)計(jì)算出整幅圖像每一個(gè)像素的亮度對(duì)比度之后,由于血管分布在亮度對(duì)比度較大的區(qū)域,需要確定一個(gè)亮度對(duì)比度的閾值Ty,亮度對(duì)比度大于Ty的像素即認(rèn)為是血管區(qū)域.閾值Ty的確定采用最大類間方法[12](Otsu法).最后對(duì)血管區(qū)域各像素的亮度對(duì)比度進(jìn)行累加,通過每幅圖對(duì)比度累加值的大小來比較FICE各波長組合的增強(qiáng)效果.
1.2 具體算法
根據(jù)主要思路,確定基于亮度對(duì)比度統(tǒng)計(jì)的血管識(shí)別算法模型,如圖1所示.
按照算法模型,首先計(jì)算出圖像各像素的亮度及亮度對(duì)比度,然后應(yīng)用Otsu法統(tǒng)計(jì)亮度,從而得出劃分目標(biāo)及背景區(qū)域的亮度閾值T.最后將小于新閾值T的像素點(diǎn)標(biāo)記為黑色,作為背景區(qū)域;大于閾值T的像素作為目標(biāo)區(qū)域進(jìn)行血管識(shí)別.
在目標(biāo)區(qū)域內(nèi),判斷是否是血管區(qū)域的主要標(biāo)準(zhǔn)即各像素的亮度對(duì)比度,亮度對(duì)比度較大者則為血管附近區(qū)域像素.因此,需要確定一個(gè)劃分血管區(qū)域與非血管區(qū)域的亮度對(duì)比度閾值Tcon.參照Otsu法原理對(duì)目標(biāo)區(qū)域所有像素的亮度對(duì)比度進(jìn)行統(tǒng)計(jì),得到Tcon.該閾值將目標(biāo)區(qū)域劃分為亮度對(duì)比度類間方差最大的2個(gè)區(qū)域,亮度對(duì)比度大于Tcon的像素即為血管區(qū)域,用亮點(diǎn)標(biāo)記,小于該閾值的則為其他組織.
2.1 血管的識(shí)別效果
采用上述算法對(duì)5幅FICE處理圖分別進(jìn)行血管識(shí)別,如圖2所示.如圖2(a)、(b)分別為FICE處理圖與基于亮度對(duì)比度的Otsu法的血管標(biāo)記圖.可以看出,采用基于亮度對(duì)比度統(tǒng)計(jì)的血管識(shí)別算法可以較準(zhǔn)確地標(biāo)記出圖像中的血管區(qū)域,避免了非血管區(qū)域像素對(duì)評(píng)價(jià)FICE效果的影響,提高了之后對(duì)血管區(qū)域統(tǒng)計(jì)對(duì)比的準(zhǔn)確度,為FICE常用的10組波長對(duì)圖像血管對(duì)比度的增強(qiáng)效果的客觀評(píng)價(jià)奠定了堅(jiān)實(shí)的基礎(chǔ).
2.2 對(duì)FICE增強(qiáng)圖像的評(píng)價(jià)結(jié)果
圖1 基于亮度對(duì)比度統(tǒng)計(jì)的血管識(shí)別算法模型Fig.1 Model of algorithm based on statistics of vessel brightness and contrast
在實(shí)驗(yàn)中,對(duì)5幅典型內(nèi)鏡圖像進(jìn)行該算法的評(píng)價(jià),如圖3所示.首先用FICE技術(shù)的常用10組波長分別處理這5幅圖像,得到5組待考察圖像.每組均包含11幅圖像(一幅原圖以及10幅FICE處理圖),然后按組分別對(duì)每幅圖進(jìn)行基于亮度對(duì)比度統(tǒng)計(jì)的血管識(shí)別,最后分別統(tǒng)計(jì)每幅圖的血管區(qū)域各像素的亮度對(duì)比度累加值.通過比較同組中每幅圖的對(duì)比度累加值來確定最優(yōu)的FICE波長組合.
對(duì)圖3中的5幅內(nèi)鏡圖以及FICE的10組常用波長對(duì)這5幅內(nèi)鏡圖的處理圖分別進(jìn)行對(duì)比度累加值的排序,統(tǒng)計(jì)累加值的結(jié)果如表1所示,按照統(tǒng)計(jì)結(jié)果的降序排列如表2所示.表中,F(xiàn)1/F0~F10/F0分別表示FICE的常用10組波長組合累加值除以F0累加值的歸一化結(jié)果,F(xiàn)0表示原圖的對(duì)比度累加值.其中表2每行表示一幅圖像與FICE對(duì)其處理后的10幅圖的累加值的排序情況,從左到右按照累加值從大到小的順序依次進(jìn)行降序排列,即排序越靠左邊的FICE波段處理后圖像血管對(duì)比度越高.
由表2可以看出:在增強(qiáng)微細(xì)血管與周圍組織對(duì)比度方面,F(xiàn)ICE常用10組波長中波段組合F2的增強(qiáng)效果最佳;效果最優(yōu)的前3個(gè)波長組合依次是F2、F6、F1;FICE的常用10組波長處理后圖像的血管對(duì)比度均優(yōu)于內(nèi)鏡原圖像.如圖4所示為FICE 的10組常用波長對(duì)同一幅內(nèi)鏡圖像處理后的效果圖.可以看出,F(xiàn)2、F6、F1三個(gè)波段組合處理后圖像的血管與周圍組織對(duì)比度較高,與理論結(jié)果一致.
圖3 參與評(píng)價(jià)的5幅內(nèi)鏡原圖Fig.3 Five evaluated endoscopic images
圖4 參與評(píng)價(jià)的內(nèi)鏡原圖及FICE處理后的10組效果圖Fig.4 Evaluated endoscopic image and processed10 FICE images
表1 5幅內(nèi)鏡原圖及10組FICE圖的累加值表Tab.1 Accumulated values of 5 endoscopic images and its10 FICE images
對(duì)于現(xiàn)有的內(nèi)窺鏡系統(tǒng),在普通情況下內(nèi)窺鏡系統(tǒng)的處理及顯示幀率為26幀/s,應(yīng)用FICE算法后,處理及顯示幀率為23幀/s.可見,算法的實(shí)時(shí)性較好.
表2 5幅內(nèi)鏡原圖及10組FICE圖的統(tǒng)計(jì)累加值降序排序表Tab.2 Descending orders of accumulated values of 5 endoscopic images and its10 FICE images
本文首次提出一種對(duì)FICE常用的10組波長增強(qiáng)微細(xì)血管對(duì)比度效果的客觀評(píng)價(jià)方法.統(tǒng)計(jì)數(shù)據(jù)證明,F(xiàn)ICE技術(shù)常用10組波長中的波段組合2是增強(qiáng)血管對(duì)比度的最佳波段組合,與病理學(xué)診斷結(jié)論基本一致,不僅避免了目前存在的主觀評(píng)價(jià)方案的主觀性及經(jīng)驗(yàn)性,而且為臨床醫(yī)生在FICE波長組合選擇方面提供了更加有力的理論依據(jù),從而可以更加精確地診斷消化道黏膜的組織改變、異型增生及早期癌變.FICE技術(shù)除了可以增強(qiáng)細(xì)微血管對(duì)比度之外,還可以用于發(fā)現(xiàn)扁平病變及腺管小凹分型[13],常用的10組波長在這些方面的作用效果有待進(jìn)一步的研究與評(píng)價(jià).隨著FICE技術(shù)的應(yīng)用日趨廣泛,不同研究領(lǐng)域的醫(yī)療專業(yè)人員針對(duì)不同的病灶表現(xiàn)已經(jīng)開始發(fā)掘更多、更有效的波段組合.
(
):
[1]MIYAKE Y,KOUZU T,TAKEUCHI S,et al.Development of new electronic endoscopes using the spectral images of an internal organ[J].Color Imaging Conference,2005,13(3):261-263.
[2]NAKAGUCHI T,TSUMURA N,MIYAKE Y.Dynamic band imaging:image enhancement for endoscopic diagnosis[J].Journal of Imaging Science and Technology,2008,52(5):1-7.
[3]SAMBONGI M,IGARASHI M,OBI T,et al.Analysis of spectral reflectance using normalization method from endoscopic spectroscopy system[J].Optical Review,2002,9(6):238-243.
[4]錢麗佳,李玉明.放大內(nèi)鏡下人工智能電子染色及窄帶成像技術(shù)在消化道早癌診斷中的應(yīng)用[J].中國微循環(huán),2009,13(6):621-623.
QIAN Li-jia,LI Yu-ming.Zoom in endoscopic artificial intelligence electronic dyeing and narrow-band imaging in the diagnosis of digestive tract cancer early[J].Journal of Chinese Microcirculation,2009,13(6):621-623.
[5]黃留業(yè),劉運(yùn)祥,吳承榮,等.FICE技術(shù)在大腸病變腺管開口分型及毛細(xì)血管形態(tài)觀察中的價(jià)值[J].世界華人消化雜志,2008,16(26):2952-2958.
HUANG Liu-ye,LIU Yun-xiang,WU Cheng-rong,et al.Role of Fuji intelligent chromo endoscopy in observation of pit pattern and blood capillary form of colonic lesions[J].World Chinese Journal of Digestology,2008,16(26):2952-2958.
[6]OSAWA H,YAMAMOTO H.Present and future status of flexible spectral imaging color enhancement and blue laser imaging technology[J].Digestive Endoscopy,2014,26(Suppl.1):105-115.
[7]MIYAKI R,YOSHIDA S,TANAKA S,et al.Quantitative identification of mucosal gastric cancer undermagnifying endoscopy with flexible spectral imaging color enhancement[J].Journal of Gastroenterology and Hepatology,2013,28(5):841-847.
[8]KIKUSTE I,STIMA D,LIEPNIECE-KARELE I,et al.The accuracy of flexible spectral imaging colour enhancement for the diagnosis of gastric intestinal metaplasia:do we still need histology to select individuals at risk for adenocarcinoma?[J].European Journal of Gastroenterology and Hepatology,2014,26(7):704-709.
[9]CORIAT R,CHRYSSOSTALIS A,ZEITOUN J D,et al.Computed virtual chromoendoscopy system(FICE):a new tool for upper endoscopy?[J].Gastroenterologie Clinique et Biologique,2008,32(4):363-369.
[10]POHL J,MAY A,RABENSTEIN T,et al.Computed virtual chromoendoscopy:a new tool for enhancing tissue surface structures[J].Endoscopy,2007,39(1):80-83.
[11]何輝,沈磊,羅和生,等.FICE技術(shù)10組波長對(duì)大腸息肉的診斷價(jià)值[J].世界華人消化雜志,2011,19(16):1735-1738.
HE Hui,SHEN Lei,LUO He-sheng,et al.Value of Fuji intelligent chromo endoscopy under different channel settings in the diagnosis of colorectal polyps[J].World Chinese Journal of Digestology,2011,19(16):1735-1738.
[12]OTSU N.A threshold selection method from gray level histogram[J].IEEE Transactions on Systems,Man,Cybernetics,1979,9(1):62-66.
[13]沈奕,鐘捷,范榮.FICE技術(shù)應(yīng)用于胃腸道病變的診斷[J].國際消化病雜志,2009,29(5):305-307.
SHEN Yi,ZHONG Jie,F(xiàn)AN Rong.Fuji intelligent chromo endoscopy is applied to the diagnosis of gastrointestinal tract[J].International Journal of Digestive Diseases,2009,29(5):305-307.
Objective evaluation method for enhanced effects of FICE images
CHEN Jing1,XU Min-fen1,WANG Li-qiang1,YUAN Bo1,DUAN Hui-long2,TANG Jia1
(1.State Key Laboratory of Modern Optical Instrumentation,Zhejiang University,Hangzhou 310027,China;2.Biomedical Engineering Institute,Zhejiang University,Hangzhou 310027,China)
An objective evaluation method based on the statistics of brightness contrast was proposed according to the different enhanced effects of vessel contrast by the ten groups of wavelength of FICE.The blood vessel was marked out using Otsu method to count the brightness contrast of the pixels.Then the brightness contrast of the pixels in the area of blood vessels was accumulated.The greater accumulated value means the higher contrast of blood vessels of images.Results showed that the combination2,6,1 were the three optimal wavelength combinations of FICE on the aspects of enhancing contrast of blood vessels.The method accorded with pathology diagnosis proven by statistical results,which provided an objective reference for clinical doctors to select FICE wavelength combination.
FICE;objective evaluation method;brightness contrast;Otsu method
R 318
A
1008-973X(2015)10-2013-05
2014-08-21.浙江大學(xué)學(xué)報(bào)(工學(xué)版)網(wǎng)址:www.journals.zju.edu.cn/eng
國家科技支撐計(jì)劃資助項(xiàng)目(2011BAI12B06,2012BAI4B06);中央高?;究蒲袠I(yè)務(wù)費(fèi)專項(xiàng)資金資助項(xiàng)目(2012FZA5023).
陳婧(1987—),女,碩士,從事數(shù)字圖像處理的研究.ORCID:0000-0002-5560-7550.E-mail:chenjing426@zju.edu.cn
王立強(qiáng),男,副教授.ORCID:0000-0002-9940-4480.E-mail:wangliqiang@zju.edu.cn