做醫(yī)學圖像處理方向的項目算是比較典型的實戰(zhàn)課題了。肺癌檢測這類題目在課程設計和工程實踐里都很常見很多人一上來就想著上深度學習實際上對于CT影像或胸片的初篩經(jīng)典的圖像處理手段配合一個直觀的GUI界面反而更可控、更容易落地。這套帶完整Matlab源碼的肺癌檢測GUI項目資源編號14834走的正是“圖像預處理 → 病灶區(qū)域分割 → 特征量化 → 結(jié)果判定”的完整鏈路讀圖、處理、指標計算、結(jié)果展示在一個界面上全部完成。不管是課程設計需要交差還是想系統(tǒng)梳理醫(yī)學圖像處理知識又或者打算在傳統(tǒng)方法基礎上擴展成深度學習方案這套代碼和思路都能給你一個靠譜的起點。1. 項目整體思路與設計拆解1.1 計算機輔助診斷的核心價值肺癌篩查現(xiàn)在高度依賴影像學檢查醫(yī)生需要在幾百張斷層圖像里找出微小的結(jié)節(jié)和可疑病灶工作量大不說肉眼判斷還存在疲勞導致的漏檢風險。計算機輔助診斷系統(tǒng)要做的事情不是替醫(yī)生下結(jié)論而是把“可疑區(qū)域”先框出來、量化出來幫醫(yī)生把精力集中到真正需要仔細看的位置。這個定位想清楚之后很多技術(shù)選型問題就迎刃而解了。這套系統(tǒng)本質(zhì)上是一個典型的圖像處理流水線讀入肺部影像先做增強和去噪再通過分割算法把可能的病灶從背景里分離出來隨后計算一系列形態(tài)學特征最后根據(jù)特征閾值判定可疑程度整個過程通過GUI呈現(xiàn)給用戶。它解決的核心問題有兩個一是將原本需要人工逐張觀察的過程自動化二是用統(tǒng)一的量化標準減少主觀判斷差異。非常適合用來理解醫(yī)學圖像處理的基本方法論。1.2 為什么選擇Matlab而不是OpenCV在圖像處理領域Matlab和PythonOpenCV是最主流的兩個陣營。這個項目選擇Matlab我覺得有幾個很實際的考量。Matlab對矩陣運算的天然支持讓圖像處理代碼變得極其簡潔一張圖就是一個矩陣灰度變換、濾波、形態(tài)學操作基本都是一行函數(shù)調(diào)用的事不需要像OpenCV那樣處理各種數(shù)據(jù)結(jié)構(gòu)。其次Matlab自帶的工具箱覆蓋了圖像處理、信號處理、統(tǒng)計學習等多個領域像graythresh、bwlabel、regionprops這些函數(shù)在別的語言里要么沒有對應的現(xiàn)成實現(xiàn)要么得自己花大力氣去寫。GUI方面更是Matlab的傳統(tǒng)優(yōu)勢GUIDE或者App Designer拖拽控件就能搭出界面配合回調(diào)函數(shù)整個交互邏輯幾天就能成型。對于教學演示和算法驗證的場景Matlab這種“把精力放在算法本身而不是工程細節(jié)”的特性非常友好。當然如果未來要部署到實際臨床系統(tǒng)那肯定要遷移到C或者Python生態(tài)那又是另一套工程問題了。至少在做原型驗證這個階段Matlab是我實測下來效率最高的選擇。1.3 系統(tǒng)模塊劃分整個系統(tǒng)的功能模塊可以劃分為五塊圖像輸入模塊、預處理模塊、分割模塊、特征計算與判定模塊、GUI交互層。這五個模塊之間數(shù)據(jù)流非常清晰前一模塊的輸出就是后一模塊的輸入每個環(huán)節(jié)都可以獨立測試。設計上刻意保持了模塊間的低耦合預處理模塊不關心圖像是從文件讀入的還是從攝像頭采集的分割模塊也不關心前面用了什么增強算法。這樣的好處是后續(xù)想替換某個環(huán)節(jié)的算法非常方便比如把固定閾值分割換成區(qū)域生長只需要改一個函數(shù)的輸入輸出其他部分基本不動。代碼維護起來也輕松出問題能快速定位到是哪個環(huán)節(jié)。2. 核心圖像處理技術(shù)解析2.1 預處理環(huán)節(jié)不讓噪聲干擾判斷醫(yī)學影像和自然照片不一樣受成像設備、輻射劑量、患者呼吸運動等多重因素影響圖像里往往混著噪聲對比度也可能偏低。預處理的目的就是把有用信息凸顯出來把干擾信息壓下去這一步的效果直接決定后續(xù)分割的成敗。預處理管線通常包含三步。第一步是灰度化如果是彩色的醫(yī)學圖像需要轉(zhuǎn)成灰度圖來降低計算量第二步是去噪中值濾波對脈沖噪聲和椒鹽噪聲效果很好而且能保留邊緣信息高斯濾波則對高斯噪聲更有效實際操作中我一般首選3×3或5×5的中值濾波第三步是增強直方圖均衡化是最常用的手段它能把動態(tài)范圍偏窄的圖像灰度拉開讓病灶區(qū)域和正常組織的對比更明顯。有一個容易踩的坑是關于增強力度的。直方圖均衡化在某些光照不均的影像上會過度放大背景噪聲反而干擾分割。我自己實測下來的做法是先看灰度直方圖分布如果本身就比較均衡就不做全局均衡化改用局部對比度增強或者干脆跳過。這里要強調(diào)一句預處理不是越多越好每多做一步都有可能引入新的誤差。2.2 圖像分割把可疑病灶從背景中剝離分割是整個系統(tǒng)的技術(shù)核心。常用的分割方法有閾值分割、邊緣檢測、區(qū)域生長、分水嶺算法等等。在肺部影像里病灶區(qū)域和周圍組織的灰度通常存在差異所以閾值分割是最實用、最優(yōu)先嘗試的方案。閾值的自動選取上Otsu大津法是公認的穩(wěn)定選擇。它的原理很直觀遍歷所有可能的灰度閾值找到那個讓前景和背景類內(nèi)方差最小、類間方差最大的值。在Matlab里就是一句話thresh graythresh(img)然后img_bw imbinarize(img, thresh)。分割之后還有一個關鍵操作是形態(tài)學處理。因為閾值分割產(chǎn)生的二值圖像往往有毛刺、空洞、細小噪點這時候就需要用到腐蝕、膨脹、開運算、閉運算。開運算能去掉小的噪點閉運算能填補空洞。結(jié)構(gòu)元素一般選3×3或者5×5的圓形結(jié)構(gòu)太大會把細小的病灶也一起抹掉這是需要根據(jù)實際圖像分辨率調(diào)整的參數(shù)。我遇到過一次很有意思的情況一張胸片上病灶和骨骼的灰度非常接近單純用Otsu分割骨骼區(qū)域全部被當成了病灶。后來在分割之前先加了形態(tài)學頂帽變換把寬尺度背景成分去掉病灶區(qū)域才真正凸顯出來。這說明預處理和分割不是兩個孤立的階段需要聯(lián)合起來調(diào)試。2.3 特征提取與判定規(guī)則分割完成的二值圖像只是拿到了“哪些像素是可疑區(qū)域”下一步要做的是量化。Matlab的regionprops函數(shù)極其好用一條命令就能算出連通區(qū)域的面積、周長、質(zhì)心、外接矩形、離心率、長軸長度等等一堆幾何特征。針對肺癌病灶比較有區(qū)分度的特征有幾個。面積特征用于排除過小和過大的區(qū)域比如面積小于某個閾值的很可能是噪聲面積大到離譜的往往是正常器官圓形度是衡量區(qū)域接近圓形的程度早期腫瘤結(jié)節(jié)通常呈類圓形計算公式是4π×面積÷周長2這個值越接近1說明越像圓形長寬比或者離心率可以描述區(qū)域的形狀拉長程度用于排除血管等長條形結(jié)構(gòu)。判定階段這個項目沒有用復雜的分類器而是走規(guī)則判定路線對每個特征設一個合理區(qū)間逐條檢查滿足條件則標記為可疑區(qū)域否則排除。這種做法的好處是邏輯透明每一處判定都有明確的病理依據(jù)出結(jié)果容易向別人解釋。當然如果樣本量足夠換成KNN、SVM或者決策樹效果會更魯棒后面擴展部分我再細說。3. 實操過程與核心功能實現(xiàn)3.1 GUI界面結(jié)構(gòu)與交互設計這套系統(tǒng)的GUI設計以操作為主線界面布局遵循“左操作、右展示”的原則。左側(cè)是功能按鈕區(qū)和參數(shù)設置區(qū)右側(cè)是圖像展示區(qū)用兩個坐標軸并排顯示左邊的axes負責顯示原圖和處理過程中的中間結(jié)果右邊的axes負責顯示最終的分割結(jié)果和標記框。關鍵控件包括讀入圖像按鈕、預處理按鈕、分割按鈕、特征計算按鈕、結(jié)果文本框、參數(shù)輸入框。這里有一個很細節(jié)的設計每個步驟按鈕獨立存在而不是一個大按鈕一把梭。這樣用戶在調(diào)試的時候可以清楚地看到每個環(huán)節(jié)的輸出哪個步驟出了問題一眼就能定位演示的時候也方便逐步講解?；卣{(diào)函數(shù)里用handles結(jié)構(gòu)體存儲所有共享數(shù)據(jù)圖像數(shù)據(jù)在按鈕間通過guidata傳遞這是Matlab GUI開發(fā)最標準的做法。3.2 核心代碼邏輯解讀以分割環(huán)節(jié)為例核心邏輯可以拆成這么幾段。先看整體流程% 生成肺癌檢測分割模塊主流程偽代碼 function seg_btn_callback(hObject, eventdata, handles) % 1. 從句柄中取出預處理后的圖像 img_gray handles.img_gray; % 2. Otsu自動閾值分割 thresh graythresh(img_gray); img_bw imbinarize(img_gray, thresh); % 3. 形態(tài)學開閉運算去噪補洞 se strel(disk, 3); img_open imopen(img_bw, se); img_close imclose(img_open, se); % 4. 移除與邊界相連的區(qū)域排除體外偽影 img_rm imclearborder(img_close); % 5. 連通域分析篩選候選病灶 % 這里通過最小面積閾值排除噪聲點 img_filtered bwareaopen(img_rm, 50); handles.img_bw img_filtered; guidata(hObject, handles);第二步的imclearborder是個很多人不知道的小函數(shù)它把和圖像邊界連通的區(qū)域全部去掉。在處理胸部影像的時候這個操作特別實用因為體外的背景區(qū)域、掃描床的邊緣常常也是亮區(qū)域分割出來會和病灶混在一起這一行代碼能省掉大量后處理麻煩。特征提取環(huán)節(jié)的代碼同樣簡潔區(qū)域?qū)傩砸淮稳〕鰜砣缓蟀匆?guī)則篩選% 特征提取部分計算所有連通區(qū)域?qū)傩?stats regionprops(img_labeled, Area, Perimeter, ... MajorAxisLength, MinorAxisLength, ... BoundingBox, Centroid, Eccentricity); % 循環(huán)篩選可疑區(qū)域條件是面積、圓形度、長寬比符合預設區(qū)間regionprops返回的是一個結(jié)構(gòu)體數(shù)組數(shù)組長度就是連通區(qū)域的個數(shù)。篩選的時候用字段訪問的方式逐個判斷符合條件就在GUI上把BoundingBox畫出來同時把特征數(shù)值填入結(jié)果表格。3.3 關鍵參數(shù)選擇與實際調(diào)優(yōu)參數(shù)調(diào)優(yōu)是讓整個系統(tǒng)“能用”到“好用”的關鍵。下面這幾個參數(shù)我在調(diào)試過程中花的時間最多。面積閾值是最先要調(diào)的。它跟圖像分辨率強相關同樣一個病灶在512×512的CT圖里和1024×1024的圖里像素面積差了4倍。我通常是先把所有連通區(qū)域的面積分布打印出來看直方圖的斷點再結(jié)合已知的病灶案例反推合理的閾值區(qū)間。bwareaopen里的最小面積默認給到50~100個像素實測對大多數(shù)中等分辨率胸片效果不錯。形態(tài)學結(jié)構(gòu)元素的大小需要拿捏。開運算的結(jié)構(gòu)元素太小去不掉噪點太大則會破壞病灶邊界導致過分割。折中的辦法是先做一遍3×3的腐蝕去噪再做一遍5×5的膨脹把邊界補回來效果比直接用大尺寸結(jié)構(gòu)元素做開運算更細膩。這條經(jīng)驗在預處理和分割交界處特別適用。判定規(guī)則里的圓形度閾值正常結(jié)節(jié)一般在0.7以上如果算出來低于0.5大概率是血管截面或者噪聲團塊。長寬比我一般限制在3以內(nèi)超過這個比例的條狀區(qū)域基本可以排除。這些數(shù)值不是拍腦袋定的最好拿幾十張標注過的樣本統(tǒng)計一下良性區(qū)域和惡性區(qū)域的分布范圍再設定。4. 常見問題與排查技巧實錄4.1 圖像讀入和格式兼容問題最常見的問題是用uigetfile讀入圖像之后顯示出來的圖顏色不對或者直接報錯。原因基本都是彩色圖像沒有轉(zhuǎn)灰度或者圖像數(shù)據(jù)是uint16類型直接當uint8處理了。Matlab里imread讀進來的CT圖有可能是int16的直接用imshow會顯示成一片黑或者一片白因為默認顯示范圍不對。解決方式很統(tǒng)一讀完圖先判斷維度是三維的就是彩色圖需要rgb2gray是有符號整型的就做一次數(shù)據(jù)歸一到0~255范圍。再加一步歸一化預處理保證后面所有算法拿到的圖像數(shù)據(jù)格式是一致且合理的。另外提醒一句if isrgb(img)這種判斷在不同版本Matlab里行為略有差異老代碼搬遷的時候要留意。4.2 分割結(jié)果出現(xiàn)大片白色或全黑分割后二值圖出現(xiàn)“一片白”或“全黑”說明閾值選取失效了。多數(shù)情況下問題不在Otsu算法本身而是前面的預處理環(huán)節(jié)沒做到位。比如原圖有很強的漸變背景Otsu會把所有偏低灰度的像素全部分成背景只留下最亮的區(qū)域看起來就是大塊白色小部分黑色。遇到這種情況我的排查順序是第一看中間結(jié)果把預處理后的灰度圖顯示出來檢查對比度是否足夠第二看灰度直方圖是否呈明顯雙峰如果單峰分布說明前景后景灰度差異太小需要更強的增強手段第三考慮換成分割方法區(qū)域生長或者基于邊緣的分割對灰度重疊的情況往往更有效。逐層排查比直接改閾值參數(shù)靠譜得多。4.3 誤檢和漏檢怎么平衡這套系統(tǒng)判定結(jié)果里誤檢和漏檢始終是此消彼長的關系。閾值定得寬松可疑區(qū)域標記得很多基本沒有漏檢但正常組織結(jié)構(gòu)也會被標出來閾值定得嚴格界面干凈了真正的小病灶又可能被漏掉。我在實際調(diào)試中采取的策略是“寧寬勿嚴”。因為系統(tǒng)的定位是輔助篩查把可疑的都標出來讓醫(yī)生去復核比漏掉重要的病灶更可接受。所以在判定規(guī)則設計上面積和圓形度的閾值都往寬松方向設置只是把判定為可疑的區(qū)域分為“高可疑”和“低可疑”兩個等級在界面上用不同顏色區(qū)分展示更人性化不搞一刀切。這個思路在做檢測類系統(tǒng)時挺值得推廣。4.4 程序運行卡頓與性能優(yōu)化圖像尺寸大了以后整個GUI操作會明顯卡頓尤其是在調(diào)regionprops和畫標記框的時候。項目里用到的優(yōu)化方法有兩個。一是用imresize把待處理的圖像縮放到統(tǒng)一尺寸比如最長邊512像素處理完再把標記框坐標映射回原圖尺寸這樣計算量大減但顯示精度不受影響。二是盡量少在循環(huán)里做繪圖操作把區(qū)域篩選全部計算完之后一次性用rectangle或者insertShape把所有標記畫出來避免反復刷新坐標軸。還有一個小技巧預處理和分割的結(jié)果圖像不必每次都保存到磁盤直接以矩陣形式放在handles結(jié)構(gòu)體里內(nèi)存占用遠小于反復讀寫文件。實測下來這個改動能讓整個流程的運行時間減少一半還多。5. 幾個讓我印象深刻的擴展方向5.1 從規(guī)則判定升級到機器學習判定如果手里有一批帶標注的肺部影像數(shù)據(jù)最自然的升級就是把第2.3節(jié)里的特征向量喂給分類器替代手寫的判定規(guī)則。用fitcsvm做一個SVM二分類器或者用fitcknn做KNN分類代碼改造量非常小特征計算部分完全不變。我自己在模擬數(shù)據(jù)上試過一次把面積、圓形度、長寬比、均值灰度、紋理對比度這五個特征灌進去SVM的效果比經(jīng)驗閾值規(guī)則穩(wěn)定不少尤其是對形狀不規(guī)整的病灶辨認更準確。這里要提醒一句特征不在多貴在有區(qū)分度。盲目堆幾十個特征反而容易過擬合尤其在樣本量不大的情況下。先畫特征散點圖看哪些特征能把正負樣本分開再選5~8個進分類器效果最穩(wěn)。5.2 結(jié)合深度學習做端到端檢測傳統(tǒng)圖像處理做到一定程度會碰天花板比如毛玻璃樣病灶和正常組織灰度非常接近手工特征很難有效區(qū)分。這種情況下就可以考慮引入深度學習方案用預訓練的卷積神經(jīng)網(wǎng)絡做遷移學習或者用U-Net這類分割網(wǎng)絡做像素級分割。不過我始終覺得深度學習和傳統(tǒng)方法不是替代關系而是互補關系。傳統(tǒng)方法的分割結(jié)果可以用來做深度學習的輔助標注深度學習的輸出置信度又可以輔助傳統(tǒng)方法做篩選。在這個項目的基礎上接入深度學習既能把兩種思路串聯(lián)起來做對比也是從課程設計走向?qū)嶋H應用的一條自然路徑。5.3 GUI交互層面的增強建議現(xiàn)在這個界面是單次處理的邏輯如果要拿來做批量篩查可以加一個批量處理模式把整個文件夾的圖像循環(huán)處理結(jié)果統(tǒng)一匯總到一張表格里。還可以加入ROI手動修正功能允許用戶對分割結(jié)果不滿意時手動圈選補充或擦除誤檢區(qū)域。這種交互細節(jié)看起來很不起眼但從“能跑”到“好用”往往就是差這些功夫。整套代碼我放在本地工程目錄里目錄結(jié)構(gòu)是標準的Matlab工程布局主文件、函數(shù)文件、GUI布局文件分開存放方便直接運行和二次開發(fā)。如果你正在做類似課題不妨先把整條處理鏈路走通再逐步替換和優(yōu)化其中的模塊在真實調(diào)試中踩過幾個坑之后你對醫(yī)學圖像處理的理解會扎實很多。