對醫(yī)務(wù)人員來說,將手術(shù)后的病人縫合在一起是一項至關(guān)重要而又單調(diào)的任務(wù),通常要求他們重復(fù)相同的簡單動作數(shù)百遍。最近在英特爾與加州大學(xué)伯克利分校之間的共同努力下,不久之后,外科醫(yī)生可以將這項繁瑣的工作分擔(dān)給機(jī)器人,不過只限用于實現(xiàn)自動縫合。
圖片來源于網(wǎng)絡(luò)
由Ajay Tanwani博士領(lǐng)導(dǎo)的加州大學(xué)伯克利分校(UC Berkeley)團(tuán)隊開發(fā)了一種半監(jiān)督的AI深度學(xué)習(xí)系統(tǒng),稱為Motion2Vec。該系統(tǒng)旨在觀看由實際醫(yī)生進(jìn)行的公開手術(shù)視頻,在縫合時分解醫(yī)生的動作(插針、拔針和移交),然后以很高的精度進(jìn)行模擬。
Tanwani告訴Engadget:“與傳統(tǒng)界面以靜態(tài)方式學(xué)習(xí)或從[模仿]軌跡學(xué)習(xí)相比,從視覺觀察中學(xué)習(xí)具有很大的吸引力,因為現(xiàn)有視頻中提供了大量信息內(nèi)容,” 對于機(jī)器人教學(xué),一張圖片顯然勝過千言萬語。
Ken Goldberg博士是加州大學(xué)伯克利分校的實驗室負(fù)責(zé)人,也是Tanwani的團(tuán)隊這項研究的顧問。他補充說:“ YouTube每分鐘獲得500個小時的新資料。這是一個令人難以置信的數(shù)據(jù)庫。任何人都可以觀看這些視頻中的任意一個并理解它,但是機(jī)器人目前無法做到-他們只是將其視為像素流。因此,這項工作的目標(biāo)是嘗試弄清這些像素。那就是看視頻,對其進(jìn)行分析,然后能夠?qū)⒁曨l分割成有意義的序列。”
為此,該團(tuán)隊利用暹羅網(wǎng)絡(luò)來訓(xùn)練AI。Tanwani解釋說,建立暹羅網(wǎng)絡(luò)是為了從無監(jiān)督或弱監(jiān)督的數(shù)據(jù)中學(xué)習(xí)距離函數(shù)。他說:“這里的想法是,您想產(chǎn)生大量重組視頻中的數(shù)據(jù),并將其壓縮為低維流形。暹羅網(wǎng)絡(luò)用于學(xué)習(xí)該流形內(nèi)的距離函數(shù)。”
基本上,這些網(wǎng)絡(luò)可以對兩個輸入之間的相似程度進(jìn)行排序,這就是為什么它們經(jīng)常用于圖像識別任務(wù),例如將某人的監(jiān)控鏡頭與駕駛執(zhí)照照片匹配。但是,在這種情況下,研究小組使用網(wǎng)絡(luò)將機(jī)械手動作的視頻輸入與人類醫(yī)生執(zhí)行相同動作的現(xiàn)有視頻進(jìn)行匹配。目的是將機(jī)器人的性能提高到接近人類的水平。
由于該系統(tǒng)依賴于半監(jiān)督學(xué)習(xí)結(jié)構(gòu),因此該團(tuán)隊僅需要JIGSAWS數(shù)據(jù)庫中的78個視頻即可訓(xùn)練其AI以85.5%的分割準(zhǔn)確的和平均0.94厘米的目標(biāo)定位精度來執(zhí)行任務(wù)。
這些技術(shù)要進(jìn)入實際手術(shù)室尚需時日,但Tanwani相信,一旦實現(xiàn),外科手術(shù)AI將像當(dāng)今的半自動汽車上駕駛員輔助系統(tǒng)一樣發(fā)揮作用。他們不會取代人類外科醫(yī)生,而是通過接管低水平,重復(fù)性的任務(wù)來提高他們的表現(xiàn)。Motion2Vec系統(tǒng)不僅用于縫合。如果有適當(dāng)?shù)挠?xùn)練數(shù)據(jù),AI最終可以承擔(dān)許多職責(zé),例如清創(chuàng)術(shù)(從傷口中挑出死肉和碎屑),但不要指望它執(zhí)行你的下一個闌尾切除術(shù)。
Goldberg說:“我們還沒有做到這一步,但是我們正在朝外科醫(yī)生的能力邁進(jìn),外科醫(yī)生將觀察系統(tǒng),指出他們想要一排縫合線的位置,傳達(dá)出他們想要六個手縫合線的能力。然后,機(jī)器人將基本上開始這樣做,外科醫(yī)生將能夠稍微放松一下,以便他們可以得到更多休息時間,并能夠?qū)W⒂谑中g(shù)中更復(fù)雜或更細(xì)微的部分。”
Tanwani補充說:“我們相信,這將有助于外科醫(yī)生有效地將時間集中在執(zhí)行更復(fù)雜的任務(wù)上,并使用技術(shù)來協(xié)助他們處理日常工作。”
2025-04-24 15:08
2025-04-21 12:14
2025-04-21 12:11
2025-04-18 08:54
2025-04-18 08:53
2025-04-17 08:16
2025-04-17 08:13
2025-04-16 10:55
2025-04-16 08:50
2025-04-14 14:57