慧心云鉴-基于多模态数据融合的抑郁症评估系统

openlab_96bf3613 更新于 20天前

一、前言
英特尔作为IT领域的领军企业,为开发者们提供了全面的支持,包括芯片、开发套件、培训课程和开发环境等。为了更好地与开发者互动,英特尔发起了“走近开发者”活动,其中包括哪吒开发套件的免费试用机会、AI创新计划以及有奖征文活动。

二、背景
根据世界卫生组织调查,抑郁症是世界各地首要致残原因,是导致全球疾病负担的重大因素。虽然抑郁症的成因、病理、治疗手段等问题仍需要更深入的研究,但考虑到抑郁症带给患者个人、家庭和社会的危害,抑郁症的有效诊断与治疗问题亟需解决。世界卫生组织驻中国办事处在发表简报中指出:在我国10名抑郁患者中仅有不到2人选择治疗,而且抑郁症的严重程度与生活环境和收入状态呈正相关。该简报还指出我国大学生抑郁症发病率高达23.8%。据中国财新网报道,在我国每年由抑郁症导致的缺勤、医药费和丧葬费约造成78亿美元的损失。在如此高的代价下,对青少年抑郁症的发现和治疗迫在眉睫。

根据2019年北大团队在《柳叶刀》子刊发表的研究,全球估计预计有3.5亿人患抑郁症。在2020年,抑郁症晋升为世界第二大疾病,仅次于癌症。然而,由于受移动性、筛选成本与个人意愿等因素的限制,有近八成抑郁症患者是没有被“发现”的。

抑郁症患者的面部表情常有忧伤、难过、笑容减少、容易哭泣等特点,同时面部表情数据的采集又具有易获取、非接触、成本低等优点,我们团队研究抑郁症患者和正常人在面部表情变化上的差异,寻找客观的、能够帮助医生进行抑郁诊断的特征,将端云技术架构引入抑郁症检测当中,建立一个基于昇腾AI的多模态数据融合的抑郁症识别系统。

三、开发板介绍
开发板资料:
哪吒开发套件的核心是一张信用卡尺寸(85 x 56mm)的哪吒开发板,它搭载了英特尔® N97(Alder Lake-N)处理器。这款处理器以其卓越的性能和低能耗而著称,赋予了开发板强大的计算能力。哪吒开发板支持四核SoC,最高主频可达3.60GHz,并且热设计功耗(TDP)仅为12W,这保证了在维持高性能的同时,也能保持低能耗。

搭载的Intel® UHD Graphics Gen12 GPU拥有多达24个执行单元,基于Xe架构,是新一代产品。这款GPU不仅在图形处理方面表现出色,也是高效的AI引擎,特别适合AI推理任务。它支持包括INT8在内的主要数据类型,并通过HDMI 1.4b接口,能够支持30Hz的4K UHD(3840×2160)分辨率显示,为高分辨率显示提供了可能。

哪吒开发板保持了信用卡的尺寸,支持最大8GB的LPDDR5系统内存和最大64GB的eMMC存储,为运行各种应用程序提供了充足的内存和存储空间。此外,开发板内置了TPM 2.0,增强了安全性,40针的GPIO连接器提供了丰富的外设连接选项,可以配置为PWM、UART、I2C、I2S、SPI和ADC等多种功能,为开发者提供了构建解决方案的灵活性。

哪吒开发板支持Windows和Linux操作系统,采用无风扇散热设计,使其在多种应用场景下都能提供高效的解决方案。这款开发板适用于教育、物联网**、数字标牌和机器人等领域,其多功能性和灵活性,为开发者提供了一个强大的平台,以实现他们的创意和项目。


哪吒开发板介绍

开箱照片:



哪吒开发板


哪吒开发板开箱图

四、项目构思
本项目是一个创新的基于哪吒开发板开发的青少年抑郁症多模态智能分析系统,它通过深度学习算法和多模态数据融合技术,旨在提供一个高效、准确的抑郁症评估工具。该项目的核心在于利用人工智能的强大计算能力,结合面部表情、语音、脑电波和心电信号等多种生理数据,构建一个全面的抑郁症评估模型。这一模型不仅能够提高诊断的准确性,降低误诊率,还能够为医生提供更多的诊断维度,从而更全面地理解患者的病情。

项目的技术实现依托于哪吒开发板,通过在边缘侧设备上完成数据处理和结果识别,有效地保护了患者的隐私,同时减轻了云端存储的压力。这种端云技术架构的引入,不仅提高了数据处理的效率,也确保了患者数据的安全。此外,项目还开发了基于Qt的医生端和基于Android的患者端App,这些应用程序不仅能够实现数据共享,还能够提供远程会诊、心理咨询等业务场景的解决方案,极大地提高了医疗服务的便捷性和可及性。

本项目在技术集成与兼容性方面也做出了重要突破。市场上的心理健康服务和工具往往存在技术兼容性问题,导致信息无法顺畅流通和共享。本项目通过改善技术集成,解决了这一问题,提供了流畅的数据流通和共享,从而提高了服务的连贯性和患者体验。同时,项目还强化了隐私保护,确保在抑郁症评估和治疗过程中患者的个人健康信息得到严格保护。

五、项目展示照片


面部检测展示

脑电检测展示

0个评论