VR 如果應用到醫療方面,能想到的會有哪些?

腦洞打開,純屬虛構哈!試想 VR 應用到醫療,假如在檢查身體方面可以全方位的檢查出身體各個部位是否存在問題,並且可以通過 VR 看到,那我們是不是可以對自己的身體健康程度有一個很好的掌握呢。


說一個我知道的,已經應用的實例吧,來自 NTT 東日本關東醫院。

NTT 東日本關東醫院已經開始利用 VR 設備輔助進行達芬奇機器人手術。

達芬奇機器人是世界上最為先進的微創外科手術系統之一,它的實質是一套完整的外科手術系統,包括腹腔鏡系統,由外科醫生控制系統、床旁機械臂系統、三維視頻成像系統三部分,通過這一套系統,可以實現非常精密的微創手術,手術時需要數位醫師共同合作。

達芬奇手術室一般是上圖那樣的。關於達芬奇,知乎上也有相關的討論:操作達芬奇機器人手術是怎樣的體驗? - 調查類問題 - 知乎

具體到 NTT 東日本關東醫院,除了達芬奇手術系統之外,關東醫院還通過專業的醫療圖像處理軟體 OsiriX, 以及依賴 PC 平台上的開源工具和庫,開發出了一套 VR 3D 解剖系統,並且運行在一台搭載 Intel Xeon 處理器和 NVIDIA Quadro 專業顯卡的 ThinkPad P70 移動工作站上,實現了高精度、低延時且穩定的 VR 效果。

這套系統能通過多個感測器,捕獲 CT 圖像,並且渲染出 3D 模型,最終通過 HTC VIVE 頭戴式 VR 設備讓醫生得到直觀的,身臨其境的體驗。

下圖就是醫師使用這一套 VR 系統來了解病灶位置,熟悉手術過程。這套 VR 系統的好處也是顯而易見的:醫生們可以在無比真實的 VR 體驗中預演手術,對於提高手術成功率無疑有相當大的幫助。

目前,這一套 VR 系統主要還是起到輔助的作用(沒有直接參与到手術實施上)

不過目前關東醫院還在和設備製造商與軟體開發商合作,他們的目標是:

未來能將這一套 VR 系統和達芬奇手術機器人的成像系統結合,將患者體內手術機器人的內窺鏡實時圖像和 VR 3D 解剖圖重疊,甚至戴著 VR 來操作機器人手臂進行手術。

當然,這就不屬於 VR 而是 AR(增強現實)的範疇了。

同樣的,現在 VR 系統還可以用於醫療教育,或者讓普通大眾加深對基本本身的認識。

VR 是一個經歷了風口泡沫的技術,不過它的價值還還是不容否定的(只要還有實實在在做研發的企業和人存在,想撈一筆就跑的那種還是算了)


謝邀請!

VR加醫療,想像力還蠻大,但要落地和規劃性落地的,目前還不是很多,但要講未來這一塊的樣子,我覺得可以放開來聊。

1、針對醫學院的學生做醫療培訓;

2、VR病情分析輔助工具;

3、VR醫療直播,遠程治病;

4、VR心理干預醫療;

5、VR模擬手術。

....

目前總結起來,估計就是這五點了,當然還有別的,因為隨著人工智慧的發展,很多想像會慢慢展開,但從目前來看,這幾個是比較靠譜甚至是可行的。

先來說說醫療培訓,解剖實體,分析人體器官,當然每個醫院或者醫療學校都可能有,但從便捷來看,肯定是VR的最好。尤其是解剖的實驗,對於生手來說,很需要一個重複可用的小白鼠。而現實中的小白鼠,解剖一次就不能重複解剖了。但VR版的小白鼠,是可以不斷的重複鍛煉的。

而關於並且分析這塊,跟體檢結合其實。未來很可能出現VR體檢儀,當一個人被VR體檢儀掃描之後,就會出現一個通透的人體,然後出了問題哪裡會被素描出來,非常方便醫生分析病情,這樣更加迅速有效的診斷並作出處理。

另外一種,就是醫療直播了。醫療直播有很多感謝,最為體現的是兩種,一種是給學生直播,讓還沒有真正做過手術的人,通過直播了解真正做直播的流程;第二是有些手術,需要專家顧問的,但有時候突發的情況,專家趕不來,可以通過VR直播的形式,讓專家在線就能指導。

VR心理干預,被認為目前在醫療行業最為直接的應用方式,通過VR製造的假象,給病人提供一個他需要的虛擬環境,來輔助他達到心理平衡,無論是垂直的心理學方面,還是很多其他病症,其實都可以用到這種方式,來輔助病人康復。

最後說說模擬技術,面對難度特別大的手術,即使是多年的醫生,也會面臨各種突發的情況。如果通過VR來搞出一個虛擬的病人來,先通過虛擬環境配合著做一次手術,後面再真實的做,這樣可能成功的幾率會得到提高。

當然,肯定還有很多別的,且等大家一起來補充


這兩天,有個新聞在VR圈刷屏了。說美國有個患者,做手術連麻藥都沒上,戴了個VR設備,就感覺不到疼了。真這麼神奇?VR醫療已經發展到這種地步了?

其實,VR和醫療結合的概念火爆了很久。VR可以用於手術、康復訓練、心理治療和醫療教育等領域。也許以前,「VR+醫療」只是個炒作概念,但最近幾個VR和醫療結合的實操案例,實在是鼓舞人心。

VR緩解疼痛

今年年初,美國的一位脂肪瘤患者開刀時,因為平時血壓過高,醫生只為她注射了少量鎮靜劑。醫生為她戴上了VR設備,在手術過程中患者一直在玩一個埃及探險的遊戲。

手術過程中,監測儀器顯示患者的一切生命體征參數,都非常平穩。在整個手術過程中,患者的血壓不僅沒有提升,反而下降了。手術完成後,患者表示她幾乎沒有感到疼痛。

早在前幾年,斯坦福大學的研究就表明,VR的沉浸感確實可以稱作是有效的心理止痛工具,能夠讓神經系統平靜下來並抑制疼痛感。

VR直播手術

去年6月,上海的兩家頂尖三甲醫院中山和瑞金啟用VR技術,直播全景+3D腹腔鏡VR手術。

上海中山醫院開展了藉助 VR 直播技術進行普外科手術教學。此次 VR 直播的胃大部切除術。上海瑞金醫院藉助 VR 技術對一名 82 歲的女性患者實施 3D 腹腔鏡右半結腸癌根治術進行了全程直播。

中山醫院副院長秦新裕在觀看直播之後談到,通過攜帶型 VR 設備及無處不在 4G 網路,未來外科的培訓交流,可以跨越時間和地域的束縛,形式也會變得更生動。

VR醫療其他應用

人體解剖↓

VR人體解剖,突破了傳統解剖課的困境,教學不再受制於人體標本不足。國內,四川大學已開設了VR解剖課。

治療退伍老兵的創傷後遺症↓

這一應用的關鍵主要在於場景內容的設計以及沉浸感的強弱。

康復訓練↓

在虛擬現實情景中增強四肢的動作之後,患者使用四肢更加頻繁,這有益於患者信心的提升,提高恢復運動的效率。

治療幻肢痛↓

截肢患者有一種常見醫療問題——幻肢痛。現在只需要戴上VR眼鏡和感測器進入虛擬世界,便能夠感覺到自己肢體的存在,還可以控制虛擬肢體完成特定動作,從而治療幻肢痛。

兒童自閉症治療↓

雖然VR心理治療的市場前景在國外很受重視,但在國內,還有很長的路要走。

醫療可能是VR最大應用領域

醫療領域極有可能是未來VR最大的應用領域,因為醫療領域有很強的變現能力。

首先,VR+醫療是醫療教育資源配置需要。醫療教育資源稀缺,vr可以模擬解剖和手術,提供高價值的同時緩解機會稀缺的困難。

其次,越來越多的中產開始注重身體健康,人們不僅關注醫療的結果,也開始注重醫療過程和品質。人們開始願意為健康管理投資買單。

雖然在所謂的「VR元年」過去之後,人們對VR的前景開始持觀望態度,更有不少人唱衰VR。但暴風集團CEO馮鑫在極客公園對最近流行的VR「泡沫說」發表看法時表示,一件事情被吹得太大了,肯定會產生泡沫,這很正常。我們能確定的是,VR這個方向是沒有錯的。

很多人說現在的VR設備做得不夠好,這只是VR最初級的形態,以後還有很長的路要走,可供探索的領域還有很多,醫療只是其中之一。以後一定會有更高階的形態,而我們要做的,就是努力創造和實現,是為社會提供一些價值,留下一些東西。

之後,我們將持續關注VR和各個領域結合的最新進展,為大家帶來資訊和觀點。

微信公眾號:baofengkeji300431

歡迎關註:)


2016年初,高盛發布VR報告,高盛對VR與醫療結合的潛力、挑戰進行了詳細的解讀。2015高盛虛擬現實報告.pdf_愛知客

市場空間:

51億美元(2025年基於標準預期模式)

340萬用戶

· 可幫助治療恐懼症,輔助醫學治療

·可幫助醫生處理一些日常任務,解放雙手

· 數據隱私和軟體開發可能影響其普及

在醫療保健市場,VR/AR可發揮以下三方面作用:

1)作為一款幫助醫生進行醫學治療和執行日常任務的工具;

2)用於物理治療,或治療一些恐懼症(如恐高症);

3)虛擬拜訪醫生。

1. 谷歌(微博)曾與多家醫院合作測試谷歌眼鏡(Google Glass),在這些測試中,醫生利用谷歌眼鏡投射CT掃描和核磁共振結果,掃描條形碼來獲得醫藥信息等。

2. 在治療方面,VR可幫助治療一些恐懼症,如恐高症,主要是通過模擬某種環境以讓患者適應。

3.VR/AR還能提高消費者與移動的互動。當前,已經有醫生提供視頻診斷服務,而VR將強化這一體驗。

潛在用戶群:

全球約800萬醫生和緊急醫療救護員(EMT)。在美國,約150萬醫療專業人員將是VR/AR技術的潛在用戶。其中。74萬為醫生,50萬為初級保健醫生,24萬為EMT。

核心挑戰:

與醫生談及谷歌眼鏡時,隱私是一個令人擔憂的問題,因為所發送的數據並未機密,這違反了HIPPA(醫療電子交換法案)規定。另外,對於特定領域的醫生,他們對軟體的要求十分精確。

所顛覆市場:160億美元的患者監測設備市場。

抓住營收機遇:

基於標準預期模式,2020年該領域營收將達到12億美元,而2025年將達到51億美元。與消費者市場相比,使用VR/AR設備的醫生數量相對較少。我們認為,更大的市場機會在於特定軟體,而不是所銷售的硬體。而這些特定軟體的規模很難預測,但對於架構師和工程師而言,CAD軟體每年的規模為1000美元至5000美元。以此作為對比,基於1500美元的軟體訂閱成本,我們預計2020年將有80萬醫生和EMT使用VR/AR技術,而2025年將達到340萬。

VR/AR醫療保健市場潛在規模

AR提升患者護理

問題:醫務人員需要快速、實時地訪問各種醫療信息,但由於工作繁忙,他們往往抽不出雙手。

Atheer解決方案:Atheer開發了一款AR HMD設備和一個軟體平台,主要面向無法騰出雙手的醫務人員,幫助他們無需打開計算機就能獲取所需信息。Atheer的AR眼鏡售價4000美元,軟體每人每年600美元。

Atheer AR眼鏡能為醫務人員實時提供所需信息,而又無需佔用雙手,用戶可通過手勢、語音和動作與信息互動。

市場需求:據測試過谷歌眼鏡的醫生稱,VR/AR在急診室和創傷中心大有用武之地,能以視頻形式為醫生提供所需的專業資料。


根據中國紅十字會統計,全國每年非正常死亡人數超八百萬,其中因醫療事故致死的約有四十萬人(包括因藥物致死),是交通事故致死人數的四倍,造成其它傷害的則更多。而這其中,疲勞失神、病情誤判、操作失誤等人為原因造成的案例佔到絕大部分,所有原因中疲勞失神、操作失誤分別排在第一二位。先別覺得這是醫務人員的不負責任,我們來感受醫生平均下來的工作強度,69.2%的醫生每周工作時間超過50小時,59.7%的醫生每半日需要看超過30例患者。在此情況下,想要保證工作8小時內精神每分每秒都高度集中幾乎是不可能的。

以前有人幻想,這時候如果我們擁有集成了谷歌、愛普生、Realmax或者meta等智能眼鏡的智能化醫療信息方案,這些失誤或者遺漏都將從根本上得到改善。2015年12月,來自明尼蘇達州Nicklaus兒童醫院的醫生們利用谷歌Cardboard進行了一例體外循環心臟手術,挽救了一個四個月大的小生命。2016年1月20日,Realmax在上海展示了刨婦產手術和臂骨骨折手術示意案例。如今,隨著VR/AR技術的發展,那些幻想或許正在實現。

一、用於減輕痛苦,解決心理健康問題

在醫療保健過程中,如何減輕手術痛苦,如何解決人們的心理健康問題,這些都是大家所關注的問題。而VR/AR給了醫療行業一個新未來,它正在悄無聲息地改變著醫療保健行業。

接受重度燒傷治療是一段痛苦的經歷。傷口清理和繃帶變化都會引發疼痛,即便使用嗎啡等麻醉藥物,仍有86%的病人會感到或多或少的疼痛,並jiang且大量使用還會對身體造成一定傷害。1996年,華盛頓大學人機界面技術實驗室(HITLab)研究人員發現孩子們在玩遊戲時是越來越全神貫注後,想出了為治療燒傷提供VR遊戲,假設沉浸在遊戲中會為病人帶來積極療效,他們會更專註於遊戲,而減輕對疼痛的注意力。

美國羅耀拉大學醫院利用一個名為"SnowWorld"的VR遊戲緩解燒傷病人的傷痛。這個虛擬的冰雪世界有冰冷的河流和瀑布,還有雪人和企鵝。病人可以飛躍冰雪覆蓋的峽谷或者投擲雪球,此時他們的注意力完全集中於冰雪世界,無暇顧及傷痛。25歲的三度燒傷病人Austin Mackay嘗試了這個理療項目,他說:「這比普通的理療要有趣得多。在虛擬現實的世界中,我完全被吸引住了。我幾乎感覺不到治療過程中身體移動所帶來的疼痛,甚至不知道自己是不是真的在理療。我完全陶醉在遊戲中了。」

戴上VR頭盔,患者就會進入到遊戲中,所有測試顯示,病人的疼痛級別會減輕,醫學手段對他們的療效也會更好。據調查,社會行為醫學2011年發布的調查展示了浸入式遊戲作為止痛劑的強大作用。並且現在這項技術已經被美國軍方使用,幫助受傷的士兵接受治療。原理或許和之前一個心理實驗——放水滴血,所揭示的類似。

心理疾病是一個殺人於無形的兇手,目前呈現向低齡化蔓延的趨勢。現在,虛擬現實可能會成為這個問題的解決方案之一。《連線》雜誌此前報道稱,斯坦福研究人員正試驗利用谷歌眼鏡幫助自閉症兒童分辨和識別不同情緒,以此讓他們掌握互動技能。英國紐卡斯特大學(Newcastle University)也在PLOS ONE上發布研究,稱他們正在利用「藍屋」(Blue Room)系統將VR用於治療心理恐懼,幫助患者重返正常生活。這一實驗的對象是九個7到13歲的男孩,他們被放置在360度無死角的全息影像世界「藍屋」中,周圍播放著此前對孩子造成心理創傷的畫面。心理學家在「藍屋」內陪伴他們,引導他們逐步適應環境,最終幫助他們克服恐懼。實驗結果表明,9個孩子中有8個能夠良好地處理恐懼情境,其中4個孩子完全擺脫了心理恐懼。

二、醫療教學培訓

據早在1993年的統計里,全球市場上出現的805個虛擬現實應用系統中就有49個應用於醫學,主要應用在虛擬人體、醫學圖像學、藥物分子研究等方面。大家都知道,在傳統的醫學教育中,如人體標本解剖和各種手術實訓,受標本、場地等限制,實訓費用高昂;同時,醫學生不能通過反覆在病人身上進行操作來提高臨床實踐能力、臨床實踐具有較大風險等。而虛擬現實的直觀和體驗特性卻可以很好地解決以上問題。目前在醫學教育上應用較多的有虛擬人體解剖學、手術訓練教學、虛擬實驗室、虛擬醫院。類別也從內容、軟體到硬體,甚至還有從事交叉研發的,比如,Oculus涉足了內容、硬體和軟體等方面,微軟HoloLens則是軟硬體結合等。

傳統解剖學挂圖和大部分多媒體課件上應用的教學圖片都是二維模式,缺少直觀的、立體的體驗,造成了解剖學習的困難。模型、標本雖具有立體結構,但形式單一、僵硬,不能滿足多角度、多層次的教學和實訓需求。而虛擬人體解剖學,可在顯示人體組織器官解剖結構的同時,顯示其斷面解剖結構,並可以任意旋轉,提供器官或結構在人體空間中的準確定位、三維測量數據和立體圖像。此前,美國加州健康科學西部大學(波莫納)開設了一個虛擬現實學習中心,該中心擁有四種VR技術、zSpace顯示屏、Anatomage虛擬解剖台、Oculus Rift和iPad上的斯坦福大學解剖模型,旨在幫助學生利用VR學習牙科、骨科、獸醫、物理治療和護理等知識。

美國加州健康科學西部大學開設虛擬現實學習中心| 圖片來源:WesternUniversity of Health Sciences

台灣柯惠醫療臨床培訓中心也在利用計算機和專業軟體構造,提供VR醫療培訓。該中心不僅為醫生提供了更逼真的實驗環境,還減少了傳統培訓對動物的傷害。創始人李顯達在接受《第一財經日報》採訪時提到:「從2014年10月到現在,已經有400位急救和麻醉相關的專業醫療人員在這裡進行了培訓,這樣更逼近現實的培訓效果比以往更強。」研究機構RnR Market Research近日發布了一份虛擬現實醫療服務市場研究報告,報告指出:2014到2019年間,全球VR醫療服務市場的複合增長率將達到19.37%。

Mario Viceconti是謝菲爾德大學的教授兼Insigneo研究所硅膠醫療主管,他們正投入一個歐洲項目,開發「虛擬生理人體」(VPH)。超過2億歐元已經投入創造真實可靠的人體模型,這為外科醫生和臨床醫生投入一些最具挑戰性的醫學領域提供了準確的預測。Viceconti的同事們正在開發的模型可以為外科醫生提供決策的實時反饋。挑戰很艱巨。「我們需要把非常準確的模型和誇大的現實合併,所以外科醫生會問「如果我這樣做,會發生什麼?」這是目前無法做到的,但Viceconti想像外科醫生可以使用虛擬模型作為手術期所有決策的參考點。比如說換膝手術。在手術中,外科醫生需要決定從哪進入身體,切割韌帶和組織,也要考慮把假肢器官放在哪。所有這些都會對病人未來的工作能力和功能產生真正的影響。虛擬人體模型可以根據病人的實際生理提供建議。「這能改變生活,」Viceconti說。

三、虛擬實驗室

在這種實驗室里,學生有著充分的實驗自主權,能模擬實現各種實際的甚至不可視、不可摸、不可入、危險性高的實驗以及想像的實驗場景。許多醫學教育中的實驗和臨床相關實驗都可以在虛擬實驗室中進行。

目前國際上有代表性的醫學虛擬實驗室有:霍華德 · 休斯醫學研究所 ( The Howard Hughes Medical Institute, HHMI)開發的心臟病實驗室、神經生理學實驗室等。在加拿大麥吉爾大學的蒙特利爾神經中心,正在使用被認為是世界上最先進的神經外科學工具之一的 Neuro Touch Cranio。利用這套工具,神外科醫生可以在沒有患者的情況下模擬複雜的手術過程。這項技術使醫生能獲得和真實外科手術中握著手術工具一樣的感受。這個設備也包括一個屏幕,在屏幕上顯示腦組織腫瘤的鮮明模擬,同時也模擬了對腫瘤和其周圍組織進行外科學手術的工具和手術的效果。這種模擬器目前正在進行訓練研究,幾年後它才能真正用於神經外科學的職業訓練。

此外,還有虛擬醫院的出現。通過使醫學專家信息數字化,降低訪問醫學信息的門檻,方便可訪問治療點的醫療人員和其他人員(如患者)的訪問。虛擬醫院分為患者網頁、醫護人員網頁、管理人員網頁等,可供進行虛擬練習使用。而我們國內也有了相關的創業項目。

在實操方面應用更為廣泛的AR

醫療應用方面,相比多用做練習、模擬的VR,AR在實操方面的應用更為廣泛。據 AR in China 最近期的統計,如今國內從事AR應用開發的企業有200多家,其中80%傾向和已開發遊戲類應用,剩餘的也多偏向影視、購物等生活類應用。而專註在醫健領域的應用,根據公開信息推測目前不超過10家。而在海外,據 CBInsights、CrunchBase、AngelList 網站的綜合數據查詢,目前有30家左右初創公司正專註在AR醫療應用領域。其中9家初創公司獲得融資,總融資額達5.52億美元,獲投率達到了30%。AR在醫健領域的應用還處於藍海探索期。

而目前比較成熟的AR醫療應用是關於血管照明,通過PC應用軟體幫助醫務人員在手術中能夠查看隱藏的血管。此前,心臟病專家藉助谷歌眼鏡疏通了一位49歲男患者阻塞的右冠狀動脈。冠狀動脈成像(CTA)和三維數據呈現在智能眼鏡的顯示器上,根據這些實時放大圖像,醫生可以方便地將血液導流到動脈。不同於傳統手術,AR的介入就像一個"AR放大鏡",直接放大手術創口,患者的彩超、MRI、CT圖像等將直接映在手術部位,讓醫生能夠看到肉眼難以分辨的細微情況,獲得「透視」功能,大大提高手術操作的效率和舒適度。

不足之處

醫療行業,超高精度、準確是第一要義,而目前同樣受技術的限制,觀看清晰度不夠,細節丟失嚴重。在鈦媒體2016 T-EDGE VR國際峰會上,阿爾法公社創始合伙人許四清就提出了質疑:「VR領域用在醫療裡面不是不行,就是太早了。因為就拿醫療手術的錄像直播教學來說,先高清,你先看清楚護士和醫生他們手上拿了什麼、站在哪裡再說,其他根本不重要。」


VR在醫療方面的應用前景很廣闊,能夠切實應用的話變現能力也強,醫生對這些普遍還是很期待的。

先說最基本的應用場景:教學培訓

早先醫生還要自己去墳地偷屍體研究,屍體解剖也有少說500年歷史了,現在的醫學生應該早就受夠了福爾馬林泡的味道,何況屍體又少又貴,幾個人一組拿來分,想反覆練習更是困難,是時候用點新技術啦。

不管是學生還是資淺的醫生,往往對精細的手術缺乏直觀清晰的理解,用老方法慢慢培養又往往要花費很多時間和精力。對於外科醫生來說,沒有受過放射學的訓練看二維片子也很難對血管分布和腫瘤形態有直觀的理解。藉助VR技術帶來的視覺「沉浸感」和可交互性,醫生就能直觀看到人體的空間結構信息,輕鬆進行解剖的觀察學習,還能直接進行模擬手術,甚至能模擬的場景比自己可能會遇到的都多。

教學培訓作為最基礎且難度也相對相低的應用場景,由於不需要信息的實時採集,有數據提前輸入進來處理好就行了,所以也是目前最多公司廠商做的,據說川大耗時五年在學校開設了VR解剖課,不曉得效果怎麼樣。

其次就是重頭戲:術前規劃、手術模擬

對於涉及肝膽等這些重要臟器的複雜手術,醫生經常要面對錯綜複雜的血管、神經分布,一個微小的疏忽或者碰上無法預料的突髮狀況都會導致災難性後果。這就需要醫生對於人體解剖結構有著很好的了解,知道自己一刀下去後果是什麼,用VR進行術前的規劃和手術模擬就能為手術提供一定的試錯空間,尋求最優方案。

這裡就涉及到一個重要的也是很多廠商都沒解決的一個問題:對病人獨特身體結構的圖像採集和3D建模需要放射科的數據,沒有活的數據,就像手機里那些看各層次人體解剖結構的APP一樣,和在千篇一律的假人身上模板化地練習沒有區別(許多還都是基於外國人的人體數據開發的)。打個比方,許多APP的人體是像遊戲一樣「畫」出來的,而醫生真正需要的是醫療級的3D模型,也就是設備掃描完病人以後生成的數據再「轉化」成3D。另外,如果數據不能很快傳過來(醫院的信息系統你懂的),那手術的效率也會大大降低。

所以從放射科到臨床的數據暢通就顯得非常重要,聯影做的uVR一個很大的亮點就是端到端給打通了,設備數據採集——後台自動渲染——前端圖像顯示 全流程是無縫連接的,這樣一來就不需要局限於特定數據並且提前建模好才拿來用了。

【視頻】:聯影uVR Realspace

更進一步,如果能藉助MR技術的話:術中導航

純粹VR的話可能還不夠,在手術中,醫生如果能利用AR技術的一些優勢,既不用像傳統方法一樣一邊做手術一邊對著電腦屏幕比對著看,也不用和真實場景隔離開,直接戴上設備把圖像投射到患者身上就行了,不用操作電腦,直接利用各種手勢交互方式就能單獨查看分析數據。

10月份微博都在傳一個很火的案例,西班牙一個醫院用微軟HoloLens將手術時間縮短了一半,雖然這也不是一個特別稀奇的事了,但它的確標示了一種未來。

(http://www.miaopai.com/show/oIml~3xY9xr38M4GsLzsXyOVr~fh9Qy96RWI6A__.htm )

另外還有一些有意思的應用場景,比如:心理治療,醫患溝通

患者在醫生面前一向是要面臨專業性鴻溝,聽不懂醫生對病情和手術方案的描繪,在決策上極其局外人,藉助VR技術,醫生也能直觀向患者展示病灶情況和手術方案,也能在很大程度上幫助醫生和患者互相溝通理解。

心理治療也是比較火的一個應用了,通過利用沉浸式體驗來欺騙感官,減少一些精神壓力和痛苦感受等等。

雖然話題是VR在醫療的應用場景,但有兩個根本性的問題不能忽略:圖像的精細度和重建速度。假的要死的渲染圖像就不要提什麼沉浸感了,圖像的精細光滑程度一看實際效果就能感受到有多大差別,聯影的3D渲染在這一塊做的已經算是排名前列了。至於速度,幀率不夠的話就會卡的要死,解析度也低。


我最近在公眾號上介紹並翻譯了一篇關於VR技術結合運動想像在康復領域的應用。現原文粘貼:(大家如果有興趣的話請多關注我的公眾號哦~)

【技術前哨】VR技術是否可以讓左手知道右手想要做的事?

導讀:

來自以色列特拉維夫大學的OssmyMukamel使用VR技術進行了一系列對照實驗,論證了人在用單側手訓練結合運動想像能夠提高另一側手的學習效果。該論文發表在Cell Reports上,為腦卒中患者通過運動想像療法恢復患肢能力提供了一定意義上的理論基礎。

正文:

運動想像療法,相信關注我們創意大賽的各位康復人一定不會覺得陌生,該療法的原理就是通過反覆迭代的運動想像來提供運動功能。從而在無實際運動輸出的情況下根據原有運動記憶來激活大腦的某一區域,進而恢復患肢原有的運動功能。近些年,特別是針對腦卒中患者應用運動想像療法在國內外康復界也是研究的熱門之一。與此同時,VR技術的興起則是將運動想像療法推上了一個新的高度。

運動想像療法虛構圖

虛擬現實(VR)結合運動想像療法,本身不是一個新的概念。小編在搜集資料的時候發現: 其實早在2001年 Jack et al 就已經提出了使用虛擬現實技術可以加快腦卒中病人的康復[1]。而這次,小編則是主要介紹一篇上個月發表在Cell Reports上使用3D虛擬現實來實現運動想像的新論文。

VR結合運動想像療法示意圖(該圖與文中內容無聯繫)

根據我們的常識,只有努力練習才能有好的訓練成果,好比網球運動員只有通過不斷的訓練才能提升每次揮拍的精度。我們也會認為我們的左手和右手是相互獨立的,左手不會知道使用右手的時候想幹什麼。但其實並非如此,來自以色列特拉維夫大學的OssmyMukamel則是用了VR技術顛覆了這個看法,其實我們只需要通過『想像』,右手的揮拍練習也會提高左手的揮拍效果。是不是聽起來有點不可思議?但這就是YY的力量!

因此,該論文的中心論述其實非常簡單,就是為了證明通過單側手進行訓練是否對另外一側手的訓練有所助益。該論文的第二作者-特拉維夫大學教授Mukamel表示:這次實驗是將軟體工程與神經科學相結合來『欺騙』我們的大腦。

通過對實驗進行設置,一共有53名參與者完成了基礎測試評估並帶上VR頭顯和特製手套; 頭顯中的影像是參與者的雙手(如下圖所示)。當參與者只使用右手進行特定動作時,VR影像中的左手也在進行相同的鏡像動作。在第一項測試中,參與者利用右手完成了一系列手指運動,同時頭盔屏幕上會同時顯現出其虛擬的左手運動方式。下圖中的實驗結果柱形圖,其中RH(right hand)代表右手,LH(left hand)代表左手,縱坐標是左手學習效果指數(Left Hand Performance Gain index G)。

第一組實驗的設置和實驗結果柱狀圖

在第二組實驗當中,參與者的左手被綁縛並被機器所牽引,左手被動地做出與右手相一樣的鏡像動作,這時候VR仍然在顯示虛擬左手的動作(如下圖所示)。

第二組實驗的設置和實驗結果柱狀圖

通過分析並對比第一組和第二組的實驗結果,論文提出:當 VR 中投放虛擬左手影像時,實際的左手動作效果增長顯著。這種增長的具體表現方式為:動作完成的更精確且所需時間更短。如上圖所示,第二組實驗所表現出的增幅更明顯。

研究者又利用了功能性磁共振成像(fMRI)去追蹤其中18個實驗參與者,他們想要了解在實驗進行時大腦有哪些部分被激活參與。科學家們在所有的掃描影像中發現了一個特殊區域—大腦的右部頂上葉(Right Superior Parietal Lobule R-SPL)。而這部分大腦區域的活躍等級與左手實驗動作行為表現的等級有相互關係,即:右部頂上葉越活躍,左手學習效果越明顯。

視覺反饋時fMRI信號強烈的腦部區域

最後該論文的結論可以被歸納為以下兩點:

1. 單側手訓練同樣可以對另側未訓練手的學習起到助益。

2. 通過VR進行實時的動作反饋可以對運動學習起到助益。

相信OssmyMukamel的研究對未來腦卒中患者的康復提供了一個新的途徑-既集合VR的運動想像和機器人輔助康復系統為一體的新型康復療法。不過小編還要提醒大家:正常人還是不要通過YY來提高自己的運動能力,還是老老實實的訓練吧!

Reference:

[1] Jack, D., Boian, R., Merians, A.S., Tremaine, M., Burdea, G.C., Adamovich, S.V., Recce, M. and Poizner, H., 2001. Virtual reality-enhanced stroke rehabilitation. IEEE transactions on neural systems and rehabilitation engineering, 9(3), pp.308-318.

[2] Culham, J.C., 2016. The Left Hand Doesn』t Know What the Right Hand Is Doing—or Does It?. Cell reports, 17(11), pp.2809-2810.

[3] Ossmy, O. and Mukamel, R., 2016. Neural Network Underlying Intermanual Skill Transfer in Humans. Cell Reports, 17(11), pp.2891-2900.

原文鏈接:傅利葉 - 讓改變人類潛能的時代即刻到來 | www.fftai.com

有興趣的朋友可以關注康復人創意大賽公眾號~

http://weixin.qq.com/r/zTgmPq7ETPMzrepd923f (二維碼自動識別)


分為幾方面吧。

一、VR手術

二、VR康復

三、VR心理治療

四、VR醫療教育

下面詳細的來說一說。

VR手術。在去年已經有VR手術的案例了。醫生在手術過程中佩戴VR頭顯,對手術進行直播,不在場的人也可以通過VR參與到手術過程中,參與者就像置身於手術室一樣,看到醫生的每一步操作。 以往的微創手術轉播只能讓觀眾看到內窺鏡下的圖像,就連主刀醫生都未必能出現在圖像中更不用提起著重要配合輔助作用的助手、護士以及麻醉師。這讓無法親臨現場的低年資醫生只能看個大概。而VR手術,讓這些困境迎刃而解。

VR康復。VR可以運用在運動康復、認知康復、遠程康復中。針對不同的康復項目現在已經有對應的應用上線了。比如運動康復,Holden開發了一套虛擬康復系統,通過模仿學習虛擬老師的動作,使患者有意識地習得各種肢體運動。系統中的虛擬軟體包括一套基本的三維圖形版本,可以針對患者的具體情況創建不同的治療場景,場景通常表現為一些簡單任務,例如用鎚子釘釘子等。

VR心理治療。我認為這個是VR在醫療方面,從病患角度來說,最實際有效不能替代的用途之一。VR本身就可以提供沉浸式體驗,這對有心理障礙的病患來說,是治療的最佳機會。比如你讓一個有恐高症的人去走玻璃棧道,那未免太殘忍了,他也不會跟著你去。如果真的站到了高處,發生意外或不可預料的突發情況,反而適得其反。VR則可以模擬高空環境,在很安全的環境下,溫和地對患者進行治療。

VR醫療教育。VR在教育領域的應用已經越來越廣泛了。大多是在工科類專業中的應用。這類專業教育成本較高,VR在這些領域的應用很有意義。拿解剖屍體來講,資源很少,價格昂貴,一個屍體大概10多萬人民幣,這給醫療教育帶來了不便。而VR的出現則可以讓很多學生沉浸在解剖過程中,極大地降低了成本。

當然,這些都是理想狀態VR在醫療方面的運用。就像醫學博士後、廣州市正骨醫院創新醫學部副主任所說, 醫療的門檻很高,若要將新科技與醫療結合要考慮很多的問題。要將VR與醫療結合,那首先要先考慮VR的副作用,舉例來說,它是否會帶來暈眩感,是否會對心血管病人產生不好的影響?這些都是需要事先考慮並規避的問題,不是一個新的設備搬過來就可以直接用。「要以醫療為背景和基礎,做醫療+VR,而不是VR+醫療,否則很難成功。發展醫療+VR要遵循醫學發展的自身規律。尊重醫生在醫療利益分配上的主體性。」

VR手術中,醫生佩戴頭顯帶來的不便是否會給手術安全性帶來隱患;VR醫療教育是否可以解決實操問題,帶來的體驗的真實感是否可以完全代替現實體驗等等,都將是我們在未來進一步關注的問題。


目前 VR 技術在各行業都有不同程度的應用,在醫學教育領域,它是醫生學習的新選擇。醫生只需要戴上 VR 眼鏡就可以完全沉浸式地體驗,身臨手術室的感覺,可以讓醫生全面了解手術的各個環節,第一視角學習手術細節。

2016年6月7日,上海市第六人民醫院骨科張長青教授利用 VR 技術通過好醫術 APP 直播了股骨頸仰卧位前外側入路的一例手術。值得關注的是,這是中國第一例骨科 VR 手術直播。這場特殊的手術在醫學教育上起到示範性作用,未來會有更多的 VR 手術視頻供臨床醫生學習,特別是基層醫生。

所以不需要打開腦洞,VR技術已經應用於臨床醫療。VR 虛擬現實可以預見的未來是:所有醫生都可以在任何地方「現場觀摩」同一場手術。VR 作為一種顛覆傳統感官的技術,更超越了3D效果,它必將在臨床教學中起到推波助瀾的作用。


看看聯影的黑科技。


VR+醫療,主要來至於能夠提高醫生的技能,縮短一個實習醫生到一個真正醫生這段路程,當然也能夠節省更多的社會資源,一舉多得的事情。不過現在只能算是初步應用,具體能否改變當前醫療行業,還是需要一定的時間的。


VR突然就火了


醫療行業是個專業度、風險、成本非常高的行業。虛擬現實技術中的三維建模技術與無風險的模擬操作給VR醫療以無限的想像空間。從模擬手術、醫療教育到三維建模、手術直播、遠程手術等,VR技術的發展給整個醫療行業開拓了一條全新的軌道。

VR技術給醫療業帶來了什麼?

(1)VR技術下完善人體以及人體各部位建模,建立整個醫療行業最齊全最真實的人體模型資料庫,可以更直觀學習和使用這些VR模型,輔助醫療過程。

比如通過三維建模技術1:1完善的人體模型及內臟結構,可以更便捷的了解到人體內部的骨骼、神經系統、內臟、肌肉、皮膚表層等結構,讓手術觀測及模擬變得更簡單、細緻。

可以幫助各個疾病進行更好的醫療情況展示,為VR醫療提供更多的價值參考素材。

(2)通過VR模擬手術操作,制定優化方案,降低醫療操作風險和成本。

傳統的手術實踐成本和風險成本非常高,要求醫生有精湛的臨床手術經驗。但對與許多缺少實操經驗的醫生,往往需要多年的臨床輔助學習才能獲取前輩們成功的經驗。

通過VR技術可以更直觀的模擬及調整手術方案,給手術方案提供試錯的空間,以便更好的優化實操方案並降低手術的創傷程度,提高手術的成功幾率。

(3)通過VR場景進行醫療器械教學和手術臨床學習,與時俱進。

傳統的醫療器械教學和手術臨床學習局限於場地、時間以及醫療器械的更新程度,無法做到最大程度地讓學生真正學習和接觸到最新的醫療設備器械以及新知識,通過把相應內容製作成VR內容,在VR場景中進行學習,可以節省時間、資金、師資成本等。

(4)VR在心理醫療、醫用導航等方面的切入應用,給醫療科技帶來更多展望。

VR最大的特點是環境再現,而環境對人最大的作用就是心理作用。因此,目前VR技術最多的應用領域就是心理治療領域。目前,很多的心理治療師和精神專家常用的方式都是,通過在治療過程中去引導患者回憶或者想像場景來達到治療的目的。這種手段的缺點是患者的想像和回憶難於把控,所以效果很難評估。VR的好處在於,它能夠讓這種環境場景變得可視化和標準化。因此在心理治療領域,比如說創傷應急障礙症、恐懼症、自閉症、恐高症、幽閉症、公開演講恐懼症、密集恐懼症等都可以通過VR技術的環境再現以達到治療的目的。再比如說,焦慮症、注意力缺陷以及精神分裂症也可以通過VR來虛擬特定的人或是特效來改善相關的一些癥狀。

醫用導航方面,以骨科手術為例,為患者的手臂固定螺絲釘傳統的方式需要更大的創口來確定螺絲釘的位置。而通過VR虛擬影像技術可以精準的確定螺釘放置的位置,達到最小的創傷效果。模擬手術方案也可以極大的降低手術實操風險,提供手術優化空間。

(5)通過VR內容的沉浸式體驗,推廣醫療器械的使用,進行多樣化營銷。

在虛擬場景中提供多種醫療器械的使用及說明,更便捷和多元化地進行醫療器械的品牌推廣和銷售,從線上線下創造更直觀的產品的體驗效果。

(6)VR給遠程醫療帶來突破性發展。

我國醫療資源受地域因素的影響,優質醫療資源匹配嚴重不均衡。通過VR技術使遠程醫療成為可能。優質醫療資源得以共享,可以使就醫難的問題得以緩解。在國外已有成功的案例以遠程的方式利用機器人完成了手術的操刀。VR+AI在未來還會碰撞出更多的火花。

目前國內外都在尋求合適的方式將VR技術應用於醫療和醫療相關的各個領域,進行更好地結合,從教學培訓、醫療輔助、營銷展示、臨床手術、科研展示等各方面切入醫療和醫療相關領域。


VR幾乎可以應用到各個領域,就以醫療為例,最大的應用應該就是教學領域了吧

以前學醫要過的第一關就是解刨屍體,,實際上這些醫療標本都非常稀缺,用vr進行模擬實驗,模擬教學。。。。


我突然腦補出來了醫生做手術的時候,我作為一個患者戴上VR,全程以醫生第一視角目視手術過程的惡趣味畫面。

(つд?)哦,天吶,簡直不敢再多想一秒鐘ヽ(`д′)ノ


VR+醫療,應該有人想到刀劍神域吧。關在無菌室、忍受全身感染的少女紺野木棉在vr遊戲里大顯身。

當時看的時候覺得很不可思議,沒想到很快就可能變成現實了。


1.學生。讓我想一想,大部分讀醫科大學的學長學姐們是不是對解剖室裡面那股清新脫俗的福爾馬林的味道難以忘懷?我認為以後人體解剖的課程會被,至少在一部分程度上,被VR模擬解剖取代。對於學生來講,不用解剖屍體或者看見屍體,看著VR系統里人體結構圖就可以學到挺多東西的,還聞不到那股味道,想想也還可以。對於學校而言,需要的不再是什麼捐贈的遺體還有應對醫學院校園傳說的準備,而是幾套VR設備而已,相對來講都會好一些哈。

2.醫生的培訓。據我所知,一般來講醫生的晉陞貌似需要熬到足夠的年限,還要各種學術成果。這麼說吧,我爸進醫院工作時20出頭,40多的時候是一個主任醫師。這二十年裡面都幹了什麼?看手術,做手術,寫論文,自己總結思考。可見用傳統方法來培養一個優秀的醫生需要很多的時間和精力。你一個新醫生,進來了懵懵懂懂,看手術聽課兢兢業業,寫論文絞盡腦汁,幾年沒到,對不住了兄弟!除非您異常優秀,進來一個月就發明了什麼新的手術器械(當然,打個比方),想要儘快晉陞,還得忙上幾年。這幾年裡面您就慢慢看著吧,學習經驗,以後自然會有機會的(廢話!)。如果說引入了VR系統,新人們進來就會更少依靠大量長時間臨床教學之類的方式來達到成長的目的,吧啦吧啦。扯遠了,咳咳。找個模型吧,就是刺客信條系列裡面出現的培訓刺客的Animus系統,Abstergo誠意推薦。

3.病人的協助治療。我們就來討論一下局部麻醉的病人吧(反正全身麻醉的也不會有什麼感覺),反正我以前頭磕破了,我爸就把我帶到了醫院,頭皮麻醉後縫了幾針。縫合過程中我在想什麼鬼!為什麼明明打了麻藥還是痛啊!我打的可能是假藥。。。。事後我想八成是自己的幻覺……當然,有人會說,這麼點小傷還這麼講,人家動的可是手術吶!(不然呢?我也沒動過什麼大刀啊!當然要從此入手啦!)所以說我就在想,如果當時給我個VR好好讓我玩半小時COD(開玩笑的),我也許會好很多。

姑且寫到這裡吧,歡迎補充和討論。最後祝大家身體健康。


預防並減少性病(⊙…⊙)


我認為,現在能想到的vr應用,都不夠振奮人心,離真正的切入醫療核心,差的十萬八千里。


利用VR檢查身體,這是個很好的構想

目前一些國家利用VR引入到醫療行業,比如說手術,這給實習醫生帶來了最好的接觸到高難度手術的機會


推薦閱讀:

VR 從業者最基本的條件?
如何評價《視覺SLAM十四講》作者高翔博士在深藍學院開設的《SLAM理論到實踐》課程?
hypereal怎麼樣 ?
如果我想學習有關VR虛擬現實技術,我在大學 選擇哪些專業比較靠譜?我比較想接觸類似Oculus Rift這種VR技術?
幾千塊VR和幾百塊VR有什麼區別?

TAG:科技 | 虛擬現實VR | 醫療行業 |