VR+醫療MRI


目标:

  • 医生透过电 脑仿真技术,基于MRI扫描数据来建立虚拟的乳腺及病症模型。然后,标示出手术的计划和应变设想。经由一群医师会诊后,以更高质量、更低风险的途径来执行全新的手术计划。
  • 例如,我在进行的<VR+乳癌手术>内容开发时,就透过精密的医疗MRI扫描真实乳房线体(含肿瘤),取得MRI产出的DICOM三维模型作为我的<乳腺素材>,再经过3D Slicer等工具准确转换成为Unity 3D能接受的<VR素材>,才能制作出一个几可乱真,但又不失真的VR应用(App),来精确地引导医生的手术进行。

      

认识MRI医疗素材:

  • 素材就是从真实(珍珠)加以萃取出来的要素。要素就是必要的、本质性(Essential) 的元素或材料。
  • 根据牛津字典的解释,"Essential" 这个字的涵义是:不可或缺的。也就是,我们常说的:本质的。
  • 所以VR内容开发即是:从真实(TR)中萃取本质性的素材,以此素材为中心,发挥想象力,创作一个精彩耀眼的非实(VR)来激励人心,启迪心灵,寓教于乐。
  • 例如,我在进行的<VR+乳癌手术>内容开发时,就透过精密的医疗MRI扫描真实乳房线体(含肿瘤),取得MRI产出的DICOM三维模型作为我的<乳腺素材>,再经过3D Slicer等工具准确转换成为Unity 3D能接受的<VR素材>,才能制作出一个几可乱真,但又不失真的VR应用(App),来精确地引导医生的手术进行。

基本制作途径:

  • MRI(DICOM)一>电脑解析并迭加信息一>医师判读并迭加信息一>VR素材(例如U3D可演示渲染)。
  • 例如,可参考:

https://www.youtube.com/watch?v=1grpd8HASMU

https://www.youtube.com/watch?v=DH34mASfbTo

https://www.youtube.com/watch?v=tsgGOlGYf6Q

范例观摩(1):3D Printing from MRI data in 5 steps

  • Software Needed (free):
    Step-1、OsiriX (Mac only), Invesalius, 3D Slicer, Seg3D, or ImageVis3D - To get the MRI data into a mode
    Step-2、Meshlab, Netfabb, or MeshMixer- To fix the Model so that it can print
  • MRI--->VR, 只需要上面的Step-1即可,不需要Step-2(专为3D Printing)。
  • 参考:http://www.instructables.com/id/3D-Printing-from-MRI-data-in-5-steps/

范例观摩(2):Look into your brain with VR - Visualizing MRI with Oculus Rift and Razer Hydra

  • This is awesome! Arguably the best MRI visualisation method using VR I have seen so far and interesting for research.
  • How do you get the MRI imagery organized into slices in unity?
  • "I plan to ask author of Inside Insides if I can use his scans and bundle them with the demo, but I‘ll definitely release the functionality where you can take any GIF or list of images and it‘ll make a 3D texture out of it for visualization using my volume rendering shader."
  • "I didn‘t get it organized into slices, that‘s not how it works. I create a 3D texture from the slices and then I sample it using a volume sampling method in the fragment shader."
  • "It‘s not your classical voxel rendering (where you can see little cubes), it essentially ray-marches through the 3D texture, accumulating color at each point of the volume along the direction from the camera for each fragment."
  • 参考:https://www.reddit.com/r/oculus/comments/3g7cnc/look_into_your_brain_with_vr_visualizing_mri_with/

~ End ~

时间: 2024-09-29 01:39:34

VR+醫療MRI的相关文章

高煥堂的VR產業見解

如果只從VR應用層面看,可能會錯失陪伴它爆發成長的好時機. 不為應用,為什麼呢? 端看各人對產業動脈的洞察力和視角了. 不宜高估VR一年的成長,不宜低估它三年的成長. 50年前貨櫃〈集裝箱〉出現時,用戶需求冷淡,長榮海運的貨輪先興起. 因為貨櫃出現時,所要解決的問題,不是用戶的痛點,所以最先獲利者不是使用者,所以從使用者視角,反而看不準! 7年前的Android也是相似,當時Android要克服的不是用戶,也不是開發者的需求,即是硬體設備(如物聯網終端)多樣化組合的問題.所以Android潮流的

VR&HTC課程

課程目標: 第1天課程學完之後,您會充分理解VR(含AR.MR)技術的本質.原理和產業發展趨勢.包括掌握VR技術風潮下的完整產業生態.投資策略和文創出版的IP授權模式等新機會. 第2天課程學完之後,您會深刻領會VR身歷其境(定位其中)的沉浸感(帶入感)是來自於幕後的3D素材(Material),您先學會360全景拍攝的技巧和後製作流程,並實際演練.此外,您還會熟悉其他的VR素材製作途徑和工具. 第3天課程學完之後,您會完整認識當今全球最先進的HTC Vive產品的結構.安裝和使用.然後深入學習使

Daydream & HTC VR課程

--給您扎實的VR(含AR)內容開發技 --發揮您的素材創作天賦,大幅提升內容品質 --應用於HTC Vive和 Android Daydream VR平台 課程簡介: 虛擬實境( VR)是當今產業大趨勢,無限商機等待我們去開發.近年VR相關技術與發展日漸受到各界重視,並且被逐漸應用在醫療.農業.觀光.娛樂與教育等領域,是未來行動載具不可或缺的發展項目.擴增實境(AR)的也替人類帶來多采多姿的樂趣,君不見Pokemon Go讓眾人為之瘋狂的情境. 台灣HTC Vive也成為當今世界上最卓越的VR

VR廣告設計與商業

<VR廣告設計與商業>培訓營 課程 By 高煥堂/台灣VR產業聯盟 主席  2016.11月 在Buy+購物的浪潮下,<VR廣告製作>也水漲船高,歡迎您一起來學習VR廣告製作技術. 進入無框世界 我們知道,傳統多媒體大多給觀眾圈定了一個"框",例如TV建構了一個有框世界,讓人們從框外觀看框裡的節目.而VR技術則打破了傳統螢幕的"框",引導人們進入螢幕的框內,給予一個完整的世界.在廣告方面,從"有框"到"無框&qu

台灣VR內容產業聯盟_技術推廣課程

歡迎報名參加... 課程目標: ● 第1天課程學完之後,您會充分理解VR(含AR.MR)技術的本質.原理和產業發展趨勢.包括掌握VR技術風潮下的完整產業生態.投資策略和文創出版的IP授權模式等新機會. ● 第2天課程學完之後,您會深刻領會VR身歷其境(定位其中)的沉浸感(帶入感)是來自於幕後的3D素材(Material),您先學會360全景拍攝的技巧和後製作流程,並實際演練.此外,您還會熟悉其他的VR素材製作途徑和工具. ● 第3天課程學完之後,您會完整認識當今全球最先進的HTC Vive產品的

MCU VR班會(08)記錄

A.課前說明 A-1.我(高老師)與 @瑞元 老師討論了下半段8堂課的目標: 1. 目前我們這個<VR推廣(應用)班>將是一個常設的單位2. 每一位成員將各主導一項技能/知識點3. 其他成員將協助某知識點主導人,讓主導人深耕該技能/知識點4. 主導人將逐漸整理出該知識點的深度知識體系,形成教材和教案5. 我和瑞元老師將接洽校外單位或團隊,常態性與本班同學進行交流,以及培訓商業合作6. 透過上述交流及合作,讓本班同學們持續深耕所負責知識點的技能和應用經驗7. 隨著各主導人的深耕和成長,就能強力支

MCU VR 應用班 翻轉式課堂

第1節  6/27.28.29 學習主題: VR的敘事新模式 新模式的互動UI設計初步 領悟<臨場感>與<沉浸式>的涵意 自習課件: 本節的自習教材:http://www.cnblogs.com/loveDT/articles/5618311.html 思考議題:VR影視與傳統影視的敘述故事方式,有何不同? 思辨概念:沉浸感.臨場感與帶入感,三者有何區別? 技術議題:傳統影視.傳統遊戲與VR影視/遊戲,三者的UI設計最大差異在那裡? PS. 各位老師專家們,本課程擬採取 Stanf

世界級VR素材平台的機遇與挑戰

世界級VR素材平台的機遇與挑戰 <<< 世界級VR素材平台的機遇與挑戰 >>> 1. VR素材不侷限於特定用途,例如遊戲素材不僅適用於VR遊戲,廣大的<VR+教育>內容都適用,遊戲素材IP商機無限寬廣,遊戲創作設計師的商業價值及收益迅速增高. 2. 遊戲素材可以獨立出來,脫離U3D引擎,改搭配其他輕量型渲染引擎(如OpenGL)等,一起打包成為Docker世界標準格式,就成為有獨立IP商業價值的素材,並上傳到<VR素材平臺>上,展開與各行各業VR

生物醫學大數據:現狀與展望

大數據 (big data) 是指由於容量太大和過於複雜,無法在一定時間內用常規軟體對其內容進行抓取.管理.存儲.檢索.共享.傳輸和分析的數據集. 大數據具有「4V」特徵:①數據容量 (Volume) 大,常常在 PB(1 PB=250 B)級以上:②數據種類 (Variety) 多,常常具有不同的數據類型(結構化.半結構化和非結構化)和數據來源:③產生和更新速度 (Velocity) 快(如實時數據流),時效性要求高:④科學價值 (Value) 大,儘管利用密度低,卻常常蘊藏著新知識或具有重要