“從里到外看完你的身體,這是前所未有的事情。”這是英國廣播公司BBC對《Your Body Uncovered》的描述。《Your Body Uncovered》是一個基于微軟HoloLens 2的電視節目,目標是允許用戶以3D立體方式完整感知自己的五臟六腑,從而了解自己的醫療狀況和潛在的治療方法。
在節目中,患者和他們的醫療顧問都會穿戴微軟HoloLens 2,并看到相同的3D全息影像。當醫療顧問使用手勢旋轉、擴大、縮小或移動圖像時時,患者都會看到相關的變化。所以,患者可以在醫療顧問詳細易懂的指導下感知自己的臟器。
據介紹,《Your Body Uncovered》的第一季共有六集,每集持續約一個小時,主要關注癌癥、新冠肺炎、中風和膽結石等疾病。
為了提高臟器的真實感,節目制作團隊Remarkable TV聯系了前倫敦帝國理工學院資深研究員、Medical iSight首席科學官菲利普·普拉特(Philip Pratt),邀請對方用HoloLens 2創建人體的3D可視化,從而允許用戶“看透”患者的里里外外,可視化相關的血管、骨骼和內臟。
菲利普指出:“制片人一開始找我們的時候是想用虛擬現實。我們告訴他們‘你們可以用虛擬現實,但你嘗試過這個嗎?’然后我給了他們一臺HoloLens。他們在體驗后馬上就愛上了它。之后沒有再討論要使用哪臺設備,必須是HoloLens。”
執行制片人帕特里克·福隆(Patrick Furlong)非常喜歡HoloLens,他表示:“一開始我們是在研究虛擬現實,但實際行不通,因為很難將人們通過頭顯看到的內容轉化到電視屏幕。我們想向患者展示他們與身體交互。我們需要這種互動。”
福隆繼續說到:“菲利普向我們展示了一個基于HoloLens的骨骼數字復制品,我們都覺得這非常神奇。我們意識到,我們可以使用HoloLens錄制所需的一切,而我們甚至可以看到患者的面部和情緒。”
當然,盡管福隆喜歡HoloLens 2,但他需要BBC的高層同意認可。
所以,福隆與BBC的高層進行了一次會面,并給相關人員戴上了HoloLens,向他展示了在混合現實中的心臟跳動影像。這給從未體驗過的高層留下了深刻的印象。最終,節目獲得了使用微軟HoloLens 2的綠燈。
福隆和團隊隨后聯系了100名醫療顧問,請他們推薦有興趣參加項目的患者。有很多人感興趣,其中包含需要手術但又不清楚實際情況的患者,他們不確定是否要接受手術,所以他們想了解更多。
在拍攝過程中,患者、他們的醫療顧問和節目主持人凱特·加拉韋(Kate Garraway)和古迪·辛格(Guddi Singh)醫生都戴著HoloLens頭顯,并使用混合現實討論了相關的醫療狀況。
對部分患者來說,能夠看著自己身體的復制品,看看實際發生的情況,他們備受震撼。眼淚十分常見,但他們終于明白了自己的身體正在發生什么事情,所以總是很快地感到寬慰。
福隆補充道:“這是一個不可思議的時刻。這項技術可以讓你看清自己的身體,然后醫療顧問會告訴你真相。實際上,當一些人想到混合現實時,他們總是會質疑數字內容是否能在情感層面觸動人們,但混合現實能夠做到。它表明,科技不是冰冷的,HoloLens在非常人性化的層面顯示了科技的力量。”
《Your Body Uncovered》的技術方面由Medical iSight首席科學官菲利普·普拉特監督。他開發了參與者可以通過HoloLens看到的體驗。他同時與Remarkable TV的工作人員一起在片場,確保使用頭顯時一切順利。
醫療顧問們平常非常忙碌,都是從日常工作中抽出時間來拍攝節目。這意味著沒有時間訓練他們使用HoloLens。幸運的是,這款設備使用起來非常簡單。普拉特說道:“我只花了五分鐘向醫療顧問解釋HoloLens的工作原理。”
為了確保多臺頭顯能夠同時識別同一數字復制品,普拉特使用了空間錨點。簡單地說,它們是房間里的虛擬Landmark,HoloLens設備可以識別并商定它們的位置和外觀。這允許普拉特能夠快速輕松地決定將錨點放置在什么位置。他同時可以保存錨點以便日后使用,這樣就不必讓HoloLens設備每天都學習房間的布局。
另外,醫療顧問可以使用簡單的語音命令或手勢來移動和更改數字復制品。
當然,團隊同時必須確保收看電視節目的觀眾能夠看到HoloLens用戶所能看到的相同畫面。當他們移動或改變房間里的數字復制品時,同樣的移動和改變都需要發生在電視端。
這非常具有挑戰性,因為制片人希望攝影棚的攝像機能夠移動。
針對這個問題,普拉特提出了一個獨特的解決方案:為攝像機安裝了一臺HoloLens 2,這樣就能在移動時看到相同的空間。
《Your Body Uncovered》取得了巨大的成功,而福隆認為部分原因是HoloLens讓人們以前所未見的方式感知人體。
他說道:“沒有HoloLens 2,我們就無法制作這個節目。沒有其他技術可以做到這一點。這是一種身臨其境的體驗。人們正在解構自己的身體,并從內部觀察自己的器官。他們正在以前所未有的方式了解自己身體內部發生的事情。”
普拉特表示認同,他說道:“如果你的脊椎有問題,醫療顧問通常會給他們脊椎的通用模型,或者在一張紙畫出脊椎。但現在你可以看到非常詳細的立體3D脊椎。我認為這樣的電視節目前所未見。”