據麥姆斯咨詢報道, AR(增強現實)和VR(虛擬現實)技術不僅在影響醫療設備本身,而且還在影響它們的發展。從Oculus Rift到Pokemon Go,未來AR和VR技術將迅速成為主流。與扎根在消費領域的許多技術一樣,AR和VR技術也正在進入醫療技術領域。
MD+DI有幸采訪了位于美國明尼阿波利斯的設計公司Worrel的高級研發顧問、AR和VR專家Brandon Bogdalek先生,了解為什么AR和VR技術正在流行以及它們對醫療設備開發人員來說意味著什么。以下是訪談內容。
MD+DI:當談到沉浸式技術的時候,經常會提到VR、AR、MR(混合現實)。您能否解釋一下它們的區別?
Bogdalek:讓我們先從VR開始。在Worrell,我們正在利用360度全景視頻做測試。通過一款360度全景攝像頭,捕捉周圍360度的畫面并將它們拼接起來。然后,將畫面載入一個虛擬現實(VR)頭戴式顯示器,佩戴者便可以四處觀看,好像他的頭部就是攝像頭。這是一種可以創建VR體驗的方式;另外一種方式是計算機生成的體驗,這種方式是讓計算機科學家和開發人員利用計算機程序創建虛擬環境,實際上是在計算機上創建虛擬環境。這便是傳統創建VR體驗的兩種不同方式。
AR是將虛擬內容疊加到現實世界中,但疊加的內容并不與現實世界有實際連接,也并非現實世界的一部分。Pokemon Go這個游戲在手機上很流行,這就是AR形式的一種。AR的另一種形式則是浮在屏幕上的文字。比如,想象一下人們正在看一場足球比賽時,有統計數據從賽場畫面中彈出。這些統計數據并沒固定到賽場本身,實際上是虛擬內容的疊加,或一些真實的但未固定到現實世界的內容。
MR從另外一方面來說,能夠跟蹤空間。例如,我們在Worrell使用MR技術的設備是微軟的HoloLens,它實際上有能力跟蹤人們所在的房間,并將全息圖與跟蹤的位置相對應。舉個手術裝置的使用案例,醫生使用混合現實頭戴式顯示器(這里以HoloLens為例)。如果一個病人的腫瘤位于肝部的位置,醫生在HoloLens中輸入這個病人的CT或MRI數據,HoloLens便能夠相當精確地檢測出腫瘤在身體中比較接近的位置,并且能夠在病人身體上疊加顯示這些信息。
MD+DI:為什么現在AR和VR技術這么火爆?
Bogdalek:AR和VR技術在過去的10年內得到了很大的提高,無論是游戲業、娛樂業還是醫療保健業,開始看到將AR和VR作為主要平臺的潛在商業價值。我認為這是技術的結合,行業開始認識到AR和VR的價值,而且人們越來越著迷于這項技術,并希望真正深入地挖掘。
MD+DI:自上世紀30年代以來,從View-Master(上個世紀30年代開始流行的三維魔景玩具)開始,關于AR/VR的熱潮開始流行起來,一直持續到20世紀80年代和90年代,但之前看起來似乎總是曇花一現,這次會不一樣嗎?
Bogdalek:我認為AR和VR會被廣泛接受;而且我認為主要的原因在于消費應用。這些技術已經存在了相當長的一段時間,但它遠沒有被消費者采納。我們現在比以前任何時候都更接近這項技術的大眾應用,我想每個人都已經開始想體驗這些技術。因此,我認為AR和VR是超越時尚的舞臺。
MD+DI:為什么醫療設備開發者需要重視AR和VR技術?
Bogdalek:在Worrell,我們在研究AR和VR技術能夠如何改善我們的設計過程。我們想讓我們的設計師覺得自己像鋼鐵俠(Tony Stark)一樣。設計師通過使用頭戴式顯示器,使他們有一個全新的媒介來探索設計過程,而不是花時間在三維CAD或計算機設計程序上。設計師們完全可以在一個虛擬的格式中設計,并在現實世界中觀察。設計師之前很難做到的一切,在AR和VR技術幫助下就可以輕松實現。
從醫療技術的角度來看,這是非常強大的,可以如解剖一樣查看一些重要設計。醫療器械制造商可以在三維CAD上設計所有需求,但他們需要能夠看到這些器械植入腿部或股骨或脛骨時的樣子。我認為這里的關鍵詞是透視。設計師和工程師很多時候都會具有所謂的CAD視覺。但當在電腦上看了這么長時間的設計之后,設計師們就會局限在一個特定的事情上,失去了所有的尺度感和器械周圍可能發生的情況。AR和VR確實可以通過把設計從電腦帶到現實世界,給人們帶來完全不同的視角,從而可以將設計與分解相結合。
MD+DI:AR和VR醫療領域的終端用戶是哪些呢?
Bogdalek:我認為現在到處都在探索這個問題。我們正在非常認真地研究把AR和VR技術做為使用說明來應用。制藥公司設置了許多不同的協議,以確保患者使用其醫療器械或注射器時是安全的。人們得到了一大堆紙質說明書,我們通常看到的是請看指令、請看注射器、請看指令、請看注射器,一再反復。所以使用AR作為這個過程的提前說明顯示可能是非常有益的,甚至有可能降低風險。
對手術計劃來說,AR和VR就如同給外科醫生加上X射線視覺。如果醫生能把CT或MRI數據輸入到MR頭戴式設備中,并在病人的身體上疊加特定部位的解剖結構,醫生就能很真實地看到病人的器官和骨骼。
又或者使用像頭戴顯示器這樣的設備,當與病人進行互動時,可以監測病人的血壓,這確實是很有用。我把它看作是跟著電腦軟件(比如EPIC)一起的設備,在那里醫生可以看到醫療信息。醫生不需要用電腦或平板電腦來做這件事,它就在醫生的頭上,就在醫生的視野里,所以可以解放雙手去做更多以病人為中心的事情。
(審核編輯: 智匯張瑜)
分享