加拿大卡尔加里大学用HoloLens 2帮助自闭症学生提高运动技能和沟通能力

HoloLens QQ群493967447

查看引用/信息源请点击:ucalgary

由加拿大卡尔加里大学根据微软HoloLens 2开发的HoloBoard系统正在帮助自闭症学生提高运动技能和沟通能力

映维网Nweon 2023年09月07日)对于大多数自闭症患者而言,与他人交流几乎是一个无法克服的挑战。所以,加拿大卡尔加里大学根据微软HoloLens 2开发了一个旨在帮助自闭症学生提高运动技能和沟通能力的HoloBoard系统。

其中,团队希望允许用户通过与全息键盘和虚拟教学内容来练习相关的运动技能和沟通能力,通过文本拼写方式和键盘转语音工具来实现人际交流。

作为说明,团队主要是围绕自闭症疗法提示训练法(RPM)的概念来设计系统。RPM涉及持续,快节奏的提问,催促和参与,并结合使用低技术字母板进行拼写交流。

一直在帮助自闭症学生的RPM疗法实践者麦迪逊·英博尔(Madison Imber)解释说,HoloBoard不仅可以帮助用户交流,同时可以帮助改善运动。

像英博尔这样的RPM疗法实践者一直在根据学生独特的感官和运动特征来定制相关的教育课程,而这一疗法为卡尔加里大学团队的研究提供了支持。

英博尔指出:“许多不会说话的自闭症患者同时存在失用症。简单地说,这是大脑和运动运动之间的脱节。如果没有足够的支持,失用症会致使许多不会说话的人员很难在他们的环境中进行有意义的活动。HoloBoard系统能够通过全息交互来提供这样的支持。我已经看到许多参与者在导航3D环境和与虚拟对象交互方面的能力取得了进步。”

在开发HoloBoard原型的整个过程中,研究人员和被试之间的合作一直很明显。自2022年夏天以来,英博尔及其客户一直与卡尔加里大学团队。

HoloBoard项目的研究人员罗兰斯·阿拉伍德(Lorans Alabood)表示:“在计算机科学和软件工程中,我们会用‘以用户为中心的设计’来描述这类研究。我们更多地关注用户真正想要的是什么。我设计HoloBoard的方法同样基于这一概念,但我更进一步,并采取了‘以共情为中心的设计’。这是一种要求你与使用系统的人员感同身受的方法,我们需要深入了解非言语用户的个人体验。”

被试在原型的开发过程中发挥了重要作用,而他们的运动技能和信心也因此得到了改善。

英博尔说道:“HoloLens可以实现这样的进步和参与度真的非常惊人。我看到学生们在尝试新鲜事物方面的能动性和信心方面取得了很大的进步。”

埃里克·赫尔佐格(Eric Herzog)和杰夫·奥德里奇(Geoff Ondrich)是两位试用原型机的用户。他们通过键盘输入的方式表示,这项研究已经改变了他们的生活。奥德里奇评论道:“我现在的生活很有意义。“

与此同时,赫尔佐格使用键盘转语音工具说,“我现在可以展示真实的自我了。谢谢你相信我的声音。”

埃里克·赫尔佐格和杰夫·奥德里奇已经发现Holoboard系统在他们的社交和教育追求中十分有用,但这项技术的未来存在诸多的优势和机遇。

项目负责人迪瓦卡尔·克里希那穆提(Diwakar Krishnamurthy)指出:“这个项目非常重要,因为如果他们的支持系统无法改善,这一特定亚群体的社会经济结果将非常黯淡。所以,如果我们能通过科技为他们开辟新的机会,影响将非常积极,不仅对这群人而言,同时包括他们的家人和照顾者。”

团队希望教室能够进一步采用全息技术,从而更好地容纳和包容自闭症学生。

罗兰斯·阿拉伍德解释道: “目前,我们教室的设计方式和150年前一模一样。所以,我们或许应该从机构和社区的角度考虑更具包容性的设置,帮助学生以全息方式加入教室,以适应他们独特的感觉-运动特征。”

 

HoloLens QQ交流群493967447

更多阅读推荐......

专栏