PTC研究证实:结合语音的AR游戏改善自闭症效果明显

青亭网( ID:qingtinwang )--链接科技前沿,服务商业创新

​还记得有一次在飞机上,我看到空姐正在尽最大的努力尝试和一位小孩沟通,虽然空姐面带微笑积极和小男孩对话,但似乎她努力还不够,小男孩总是爱理不理。在这之后,我才算意识到“自闭症”这个群体的存在。

据美国CDC的数据,美国每88名儿童中有1名患有某种形式的自闭症,与十年前相比,增加了78%;据统计,国内的自闭症患者超过1400万,14岁以下患者超过200万,每68名儿童就有1个,我国也成为自闭症数量最大的国家。由此可见,自闭症已经成为世界重大公共卫生问题。

同时,我也看到过很多科技和医疗技术结合的应用,而在我关注的AR/VR此前也有类似的案例,其中最知名的就是《精灵宝可梦Go》。

神奇的《精灵宝可梦Go》

有一位自闭症孩子的母亲表示,自己的孩子Ian Thayer不喜欢外出运动,也无法正常和陌生人交流。而在2016年时接触了《精灵宝可梦Go》这款AR游戏后,主动出门的时候更多,也在尝试主动和社区内其它孩子互动,心情也逐渐变得开朗。

sub-buzz-1627-1469006551-7

Lenore Koppelman

另一位孩子Lenore Koppelman同样有自闭症和读写障碍,他同样在《Pokemon Go》中找到自己的乐趣,并于游戏内其他小伙伴展开社交互动,甚至有时在和一群完全不认识的小伙伴玩耍。

根据医学资料显示,自闭症主要体现在社交障碍、交往障碍,兴趣狭隘等方面,而我们要做的就是通过尽可能的保持沟通、鼓励他们,培养他们独立能力。

实际上,AR游戏《精灵宝可梦Go》自身的确具备几个特点,首先它具备一定的游戏内交互场景,包括捕捉小精灵,因为LBS特性也有助于孩子们多运动,而游戏内的社交平台,同样有助于培养孩子们线下社交意识。

merlin_157780347_20215954-a643-4ad4-9163-6224d3b296e6-superJumbo

斯坦福自闭症AR互动解决方案

不仅如此,科技、科研部门也在尝试通过AR进行更多尝试。斯坦福大学研究团队通过谷歌眼镜开发了一套面部识别系统,可以显示对面人的情绪,而这时自闭症儿童需要将自己的答案与软件的答案对比,帮助他们学习理解周围人的情绪和行为变化。

Pokemon GO Park, Yokohama, Japan - 09 Aug 2017

《精灵宝可梦Go》

澳大利亚自闭症专家克雷格·史密斯Craig Smith曾表示:由于自闭症儿童很难自发发起社交活动,自闭症儿童对App或者游戏中的视觉刺激会产生特别的反应,进而可以帮助他们发展社交技能,AR游戏(指:精灵宝可梦Go)则有助于孩子们有信心打破这个社交界限。

PTC和波士顿儿童医院的AR探索

无论是AR还是VR,其核心是给孩子们提供更有趣的互动和学习场景,提升他们的社交能力。波士顿儿童医院主任Howard Shane表示:自闭症孩子们通常对屏幕媒介的形式表现出浓厚的兴趣,互联网对他们来说是一个巨大的吸引力,他们喜欢动画、CG甚至经过剪辑的特效视频。

同时他们理解口语方面也比较困难,因为他们大部分情况下是通过观看来进行学习互动的,相比与听觉互动,视觉互动是自闭症学习口语能力和理解能力的有效方法,而AR技术则提供了一个非常有趣的。

Capture-d’écran-2020-06-10-à-10.32.32

PTC自闭症AR互动解决方案

据了解,PTC(工业解决方案商)的一个兼职小组早在2018年就开始为自闭症患者尝试性的创建了一系列AR解决方案,其中之一就是将传统的物理玩具放到AR中来。例如这组农场主题的AR应用,里面元素包括谷仓、小男孩、鸡、鸡蛋、马等。

Capture-d’écran-2020-06-10-à-10.27.13

PTC自闭症AR互动解决方案

在互动性方面,你可以通过iPad进行AR形式的体验,其中如果将视角放到“谷仓”时会展示出一些与之相关的动词、名词、介词,而这时孩子们可以使用他们造一个句子或说一句短语,然后通过AR动画的形式展示出来。

据悉,一名六岁的小女孩Jessica表现很突出,在没有AR应用时她参与活动的时间非常短,而且仅能标记男孩、牛、猪等名词,但无法通过单词进行造句。甚至,她在游戏参与性方面仅完成一个步骤,没有玩耍和互动的过程。

Capture-d’écran-2020-06-10-à-10.33.37

PTC自闭症AR互动解决方案

而在尝试了AR应用之后,她参与游戏的时间明显更长,她一次就可以把名词标出来,在选择图标后通过声音反复播放单词声音后,他就可以说出2、3个短语,也可以说出整句话,例如“猪在谷仓里”,能够重复且大声的读出这个语句,这在之前是无法完成的。

波士顿儿童医院的语言病理学家Christina Yu表示:这项研究意义重大,我们在通过2到3个单词的语音治疗领域已进行一年多时间,在这期间AR应用为Jessica提供了保持兴趣和参加互动的活力。我们知道,孩子们的自发兴趣也意味着他们会有更快速的信息处理能力。

不过在该项测试中,Jessica的玩耍互动表现还不够自然,不过在AR游戏的帮助下,Jessica已经有了进行更多玩耍互动的可行性。同时,如果医生给出“你能把男孩放到马的旁边吗”这样的指令时,Jessica暂时无法完成,但是Jessica在AR应用中可以完成所有单独项的指令,例如制动一个单词或对象。

PTC战略联盟高级副总裁Don Busiek谈到:PTC一直在与波士顿儿童医院进行临床试验,我们已收获大量反馈数据并进行更新,我们也将建立一个全职团队来负责该项目后续开发。

Wonderscope AR故事应用 AR应用 (4)

《Wonderscope》

另外,很多此前可能没有考虑到这一方面的应用可能同样在治疗自闭症方面有着很好的作用,例如我们此前报道的通过双手选取单词组合生成新的单词,甚至还有一个通过你说话进行互动的AR应用《Wonderscope》。

截至目前,AR技术在大众消费和游戏领域并没有得到大范围普及,而在各个垂直领域还是有很高的应用价值,这一点和VR发展路径相似。另一方面,随着疫情影响,线上教育类应用的需求也越发明显,因此除了AR+医疗应用外,面向更多儿童的AR+教育应用也同样值得探索。

参考:medicalexpo

更多精彩内容,关注青亭网微信号(ID:qingtinwang),或者来微博@青亭网与我们互动!转载请注明版权和原文链接!
青亭网

微信扫码关注青亭网

青亭网

青亭 | 前沿科技交流群01

责任编辑:hi188
分享到QQ 分享到微信
切换注册

登录

忘记密码 ?

您也可以使用第三方帐号快捷登录

Q Q 登 录
微 博 登 录
切换登录

注册