根据上海市精神卫生中心与微软亚洲研究院联合研究,利用多模态大模型开发了“忆我”(ReMe)个性化认知训练框架。该框架基于Azure OpenAI服务,并在易用性、界面友好性、功能专业性和入门难易度等多个维度进行设计。
“忆我”框架支持文字、图像、语音等多种模态的输入输出,以对话机器人的形式为用户提供全新的认知训练体验。使用流程包括手机或可穿戴设备上传个人记忆内容,进行个体化的情景记忆或世界知识的开放性记忆训练。
此外,研究人员还提供了一个训练框架,让该领域的医生等研究者可以利用内置的认知游戏模板快速创建个性化的训练游戏。同时,该工具还包括交互式的评估,以便追踪患者的认知水平,并根据需要调整训练任务。
微软亚洲研究院与上海市精神卫生中心还在不断向该训练框架扩展更多训练功能和任务。除了开放性的和个体化的训练任务外,“忆我”框架也兼容并实现已被验证有效的成熟认知训练任务,如锻炼思维灵活性的颜色识别、锻炼工作记忆的数学运算等。
同时,微软亚洲研究院还在尝试基于传感器技术,在可穿戴设备上记录日常生活中的重要节点和事件,以促进更便捷的个性化个人记忆训练。
评论