近日,微軟亞洲研究院與上海市精神衛生中心展開聯合研究,借助微軟 Azure OpenAI 服務中的多模態大模型以及AI agent技術,開發了個性化認知訓練框架“憶我”(ReMe),該工具以微軟 Azure OpenAI 服務為基礎模型,具備即時交互響應功能,支持文字、圖像、語音等多種模態的輸入輸出,以對話機器人的形式為用戶提供全新的認知訓練體驗。
“憶我”應用界面
據介紹,當前臨床上的認知訓練主要依靠照護者或治療師自行開展,或使用軟件驅動的數字療法開展。前者依賴大量人力,成本高昂,給照護者帶來了沉重的負擔;后者則往往類似于標準化考試,缺乏靈活性,患者僅能解答預設的謎題,與提高認知所需的記憶訓練相去甚遠。此外,現有的數字療法在軟件應用的便捷性、互動性和直觀性方面也存在一定不足,影響了患者的依從性(病人按照醫生規定進行治療的行為)。就認知障礙患者而言,持之以恒的訓練對于緩解癥狀至關重要。
上海市精神衛生中心老年科副主任醫師岳玲指出:“認知障礙影響的記憶類型多樣,包括工作記憶、情景記憶和語義記憶等,但現有訓練任務的設計較為單一,限制了訓練內容的廣度,很多老人也曾反映游戲內容‘枯燥’、‘沒意思’。在多模態大模型出現之前,軟件驅動的認知訓練主要集中于工作記憶訓練,而對于與患者日常生活密切相關的情景記憶和語義記憶訓練則鮮有涉及。特別是對于阿爾茨海默病患者,最早受損的往往是與自我相關的記憶。多模態大模型的智能化和個性化特點,為認知訓練提供了新的可能性,使其更貼近日常生活。”
功能方面,“憶我”首先通過手機或可穿戴設備上傳個人記憶內容,以更貼近生活的方式進行個體化的情景記憶或世界知識的開放性記憶訓練。該工具還提供了一個訓練框架,讓醫生和研究者可以快速創建個性化的訓練游戲。除此之外,該工具還包括交互式的評估,以便追蹤患者的認知水平,并根據需要調整訓練任務。
微軟亞洲研究院與上海市精神衛生中心還在不斷向該訓練框架擴展更多訓練功能和任務,除了開放性的和個體化的訓練任務外,通過語音對話的自然交互體驗,兼容并實現已被驗證有效的成熟認知訓練任務。例如鍛煉思維靈活性的顏色識別、鍛煉工作記憶的數學運算等。同時,微軟亞洲研究院也在嘗試基于傳感器技術,通過可穿戴設備以機會感知(opportunistic sensing)的方式記錄日常生活中的重要節點和事件,促進更便捷的個性化個人記憶訓練。
接下來,上海市精神衛生中心計劃以此框架為基礎,設計認知訓練的新方法,開展一系列臨床實驗,驗證這種個性化認知訓練框架的有效性,以獲得更多的臨床證據。微軟亞洲研究院也表示,隨著證據的逐步積累,將持續對個性化認知訓練框架“憶我”進行改進和迭代,期望該工具能夠逐漸擴展應用范圍,最終能夠在社區和家庭環境中幫助提升認知障礙患者的健康水平,減輕看護人員和家屬的負擔。
注:文章來源于網絡,如有侵權,請聯系刪除