研究團隊與三軍總醫院的知名達文西手術團隊(王毓琪醫師)合作,利用深度學習中語意分割技術共同開發臨床的手術導航與病灶偵測系統,因偵測病灶,器官由於標註以及蒐集資料困難,現在主流研究目標皆為偵測手術器械,但偵測的目標框皆是長方形(bounding box),不能完整地描繪出器官或是腫瘤的邊緣,因此使用語意分割技術可以對圖像中每個像素進行分割,達到精確地像素級(pixel-wise)分割,團隊近期加入了在手術器械以及惡性腫瘤(子宮肌瘤,卵巢腫瘤)辨識及分割,希望可以往手術導航或是教學方向更進一步。
手術影像原圖與對應的器官組織
利用簡單的線條與封閉圈來分類血管與器官