fbpx
Research

Computer science team uses AR to treat Parkinson’s

他们的软件和增强现实耳机使临床医生能够分析患者的运动并指导物理治疗.

一名研究人员拿着笔记本电脑,戴着增强现实眼镜,这是帕金森氏症研究的一部分.
计算机科学系的研究人员正在使用增强现实技术来改善帕金森病的治疗. (Computer science department)

There is no known cure for Parkinson’s disease, but studies show that consistent, 临床医生指导的物理治疗可以改善患者的预后范围和生活质量.

但是如果病人的物理治疗保险已经用完怎么办呢? Or to rural patients without access to facilities? 或者是那些在家里挣扎着站立或行走,没有临床医生指导的人?

太阳城娱乐的一个计算机科学研究团队正在用一种尖端的解决方案来解决这些问题:增强现实.

Since September 2022, Henry Fuchs, Danielle Szafir和其他人与太阳城娱乐的医学研究人员合作开展了多方面的帕金森项目. 他们的pd - insight软件结合了图形和数据可视化,使治疗帕金森病的临床医生能够观察和分析患者在真实家庭场景中的运动.

增强现实耳机和运动传感器跟踪患者的运动和与周围环境的互动,以提供数据.

“我们只能通过你每天都穿着的技术来捕捉这些数据,” said Fuchs, 费德里科·吉尔计算机科学杰出教授. “那么10年后你每天会穿什么呢?? We think it’ll be your glasses, which will have some cameras that could look out, look down and look in, 这样他们就能捕捉到你的面部表情和身体等等.”

The metaverse is the “next big leap” in tech, says Fuchs, 谁相信AR眼镜最终会像手机取代笔记本电脑一样取代手机.

AR glasses differ from virtual reality headsets, like the ones used in gaming, because the wearer can still see the world around them, augmented with graphics. 增强现实耳机让帕金森患者的日常生活受到最小的干扰, while also collecting data for clinicians to study.

However, it’s not enough just to collect data points.

“What do you do when you have all that data?计算机科学助理教授Szafir说. “How do you make it intuitive? 你如何帮助人们利用他们自己的专业知识,这样你就不必成为专业的数据科学家来理解所有流入的信息?”

博士研究助理杰德·坎德尔(Jade Kandel)在充实pd - insight软件及其基于桌面的总览仪表板方面发挥了主导作用, 哪一种能给病人一整天的行为贴上标签,并强调“僵住”或运动缺陷,临床医生可以在几分钟内而不是几小时内解决这些问题.

The team also worked on an immersive replay component, 它允许临床医生通过自己的AR耳机回放患者的活动. 回放允许临床医生查看患者的3D身体骨架,甚至可以看到患者环境的数字再现, such as furniture the patient may use for support.

帕金森氏症项目团队开发这些工具并与医学研究人员合作得越多, 他们就越能看到它的潜力,不仅可以为帕金森氏症患者服务,还可以为各种各样的疾病提供支持, 比如中风患者或手术后康复的人.

“I love thinking about that. Yes, 这对帕金森氏症来说是很好的,但它也可以应用于许多不同的康复条件,” Kandel said.

这些是帕金森项目的主要研究人员:

  • Gedas Bertasius, assistant professor of computer science.
  • Nina Browner,布莱森神经学运动障碍特约教授.
  • Henry Fuchs, Federico Gil计算机科学杰出教授.
  • 迈克尔·勒维克,物理治疗部副教授.
  • Danielle Szafir, assistant professor of computer science.
  • Daniel Szafir, associate professor of computer science.