三十萬小時手術視頻、一百二十萬個術中時刻、近十億幀手術畫面,Theator打造AI手術平臺( 二 )


由Theator開發的Minutes平臺能夠捕獲手術視頻中的數據 , 利用AI和計算機視覺 , 自動分析每次手術過程 , 幫助外科醫生了解患者預后變化的原因 , 同時簡化手術室的程序 , 降低成本 。 該平臺還提供其他數據 , 包括完成手術每個步驟所需的時間 。 根據Theator的說法 , 到目前為止 , 該平臺已經獲得了6項專利 。
十幾個醫療中心正在為theator的手術視頻數據集做出貢獻 , 目前已經成為全球最大的智能手術登記處 。 該數據集目前包含超過三十萬個小時的手術視頻 , 涵蓋超過一百二十萬個術中時刻 , 分析近十億幀畫面 , 生成可視化操作報告超過七千份 。
■非接觸式視頻捕獲和分析
手術開始的那一刻 , 平臺就自動開始記錄和分析 , 幫助外科手術更順利地進行 。
平臺的視頻技術可以實時記錄完整的手術過程 , 并提供給醫療團隊全方位的患者患病部位圖景 。 在手術過程中 , 平臺能夠實現實時性地更新和通知 , 及時告知臨床醫生術中發生的關鍵事件 , 例如當檢測到術中有顯著出血時 , 及時反饋并使其能夠優化手術結果 。
三十萬小時手術視頻、一百二十萬個術中時刻、近十億幀手術畫面,Theator打造AI手術平臺
文章圖片
出血提醒示意來源:theator官網
平臺還能夠實現隨時隨地無接觸式的查看手術過程 , 在手術進行中高級臨床醫生可以實時觀看 , 在術后醫生也能實現檢查術中出現的問題 。 通過對不同手術視頻的學習 , 以及患者患病組織視頻圖像分析 , 醫療團隊能夠提高其工作效率 , 并減少不必要的手術 。
三十萬小時手術視頻、一百二十萬個術中時刻、近十億幀手術畫面,Theator打造AI手術平臺
文章圖片
多平臺示意圖來源:theator官網
■個性化點播視頻庫
每個用戶的視頻庫都是根據個人手術需求以及其使用中標記的精選、共享和保存的按鈕進行個性化策劃的 。 在這之中 , 最為突出的功能就是按需求查看手術的關鍵時刻 。
通過將人工智能驅動的分析應用到視頻中 , Theator的平臺將結果數據分解為步驟、事件、決策和里程碑 , 方便外科醫生進行術后復查 。 例如在膽囊切除手術中 , 自動化標記出粘連溶解、膽囊管導漏、關鍵安全視野三個重要的步驟 , 供給臨床醫生直接查看需要的節點 。
另外 , 在關鍵節點處提供智能注釋和過濾 , 使用戶能夠直接快速并準確查看重點片段 。
三十萬小時手術視頻、一百二十萬個術中時刻、近十億幀手術畫面,Theator打造AI手術平臺
文章圖片
關鍵詞索引來源:theator官網
■提供相關的、可操作的意見
該平臺還將通過自動EHR將手術視頻與術后結果數據相關聯 , 提出可供參考的意見 , 幫助改善后續護理過程 , 同時減少相關并發癥的產生 。
一旦一個手術的視頻被上傳平臺進行智能化處理 , 外科醫生可以立即集中查看智能平臺選擇的關鍵時刻突出的數據包 , 從而做出重要的決定 。 每個手術過程都會被添加到Theator的訓練數據集 , 擴展其模型的理解 。
在該平臺的數據庫中 , 保存著數千種相似的醫療案例 。 平臺能夠通過機器學習和提供精確的醫療圖像來幫助醫療團隊分析患者情況 , 將手術與相似案例進行對比 , 減少手術失敗的可能 。
三十萬小時手術視頻、一百二十萬個術中時刻、近十億幀手術畫面,Theator打造AI手術平臺
文章圖片
相似案例數據對比來源:theator官網
“缺乏與經驗豐富的外科醫生的面對面接觸加速了對Theator解決方案的需求 , 這拓寬了外科醫生的專業知識 , 即使是遠程或異步的 。 ”聯合創世人兼首席執行官TamirWolf說 , “外科醫生也曾經在會議上學習新技術和新方法 , 但這些由于COVID-19的流行幾乎都被移除了 。 Theator全面的手術視頻數據集 , 能夠上傳自己的手術程序、查看相似病例以及接收和提供反饋 , 使其成為越來越重要的工具 , 更多的持續開發正在遠程進行時 。 ”