遠距會診新篇　投影手臂在眼前　醫病雙方零距離

蔡易霖
2022-02-28

人工智慧,智慧醫療
產業動態
智慧醫療
914
分享

　　軟硬體的進步日新月異，帶動了遠距醫療的發展，在日本長崎縣，線上醫療系統借助智慧眼鏡等科技的科技協助，實現了對離島居民的關節風濕症的遠端會診，不僅為醫病雙方減少移動成本，患者也能得到比起過往更加優質的醫療體驗。

　　日本微軟、長崎大學醫院、五島中央醫院、長崎縣及五島市合作簽約，推動長崎大學關節風濕遠距醫療系統「NURAS」（ニューラス、Nagasaki University Rheumatoid Arthritis remote medical System）。NURAS的目標，便是讓離島或偏遠地區這樣人口稀少的地區，能藉由MR（Mixed Reality）等技術實現風濕專科醫生的高品質遠距會診。

　　過去遠距醫療的模式是透過視訊、網路會議等形式來完成，但對於風濕病的會診而言，關節病變部位僅能以平面影像呈現，導致診斷上仍有疑慮，而NURAS則導入了Azure Kinect DK這樣先進的AI感測器，將它置於遠端的患者前掃描，醫師端則戴上智慧眼鏡Microsoft HoloLens 2進行遠端會診。

當地病患將需要觀察的部位置於三台Azure Kinect DK之間，即時全像投影傳送至遠端戴上HoloLens 2的風濕科專門醫師眼前／圖片來源：擷取自日本微軟官方網站。

圖1:當地病患將需要觀察的部位置於三台Azure Kinect DK之間，即時全像投影傳送至遠端戴上HoloLens 2的風濕科專門醫師眼前

（圖片來源：擷取自日本微軟官方網站）

醫師可以觀察到病患部位的即時全像投影／圖片來源：擷取自日本微軟官方網站。

圖2：醫師可以觀察到病患部位的即時全像投影

（圖片來源：擷取自日本微軟官方網站）

去年3月下旬，系統還會結合AI應用，在診察時捕捉病患表情變化並且進行評價，與醫生對話時也會進行文字記錄。／圖片來源：擷取自日本微軟官方網站。

圖3：去年3月下旬，系統結合AI應用，在診察時捕捉病患表情變化並且進行評價，與醫生對話時也會進行文字記錄

（圖片來源：擷取自日本微軟官方網站）

　　戴上HoloLens 2的醫師能看到病患關節的即時的全像投影，比起過去的平面影像更加精細，Azure Kinect除了影像感測也能做到聲音的即時紀錄，而上述的影像或錄音則透過Azure進行安全管理。這項系統除了能使偏遠地區的風濕病患受惠外，需要即時觀察的病患，例如精神病、物理治療等，也可看到新型態遠端會診的發展潛力跟應用可能。