本发明涉及医疗健康,尤其涉及一种用户健康状态感知方法、装置、车辆、电子设备及存储介质。
背景技术:
1、近年来,由于驾驶员突发疾病来不及预警和干预导致的交通事故接连发生,这使得越来越多的消费者开始关注车上乘员特别是驾驶者的健康状况。
2、现有的健康检测技术均是通过驾驶员监测系统(driver monitoring system,dms)的摄像头采集驾驶员面部信息,结合深度学习识别得到驾驶员身体健康信息。
3、然而,对于用户出现咳嗽、鼻音、喉咙沙哑等症状时,无法及时识别到驾驶员身体健康状态。
技术实现思路
1、本发明提供一种用户健康状态感知方法、装置、车辆、电子设备及存储介质,用以解决存在的缺陷。
2、本发明提供一种用户健康状态感知方法,包括:
3、获取用户的声音信息;
4、将所述声音信息进行特征提取,得到声学特征,并基于所述声学特征,对所述声音信息进行分类识别,确定所述声音信息的分类结果;
5、基于所述分类结果,对所述用户的健康状态进行感知,得到健康状态感知结果。
6、根据本发明提供的一种用户健康状态感知方法,所述方法还包括:
7、获取所述用户的人脸视频;
8、基于所述人脸视频,应用深度学习算法,确定所述用户的生理健康监测指标。
9、根据本发明提供的一种用户健康状态感知方法,所述生理健康监测指标包括心率和呼吸频率;
10、所述基于所述人脸视频,应用深度学习算法,确定所述用户的生理健康监测指标,包括:
11、将所述人脸视频输入至心率检测模型,得到所述心率检测模型输出的所述心率;
12、基于所述心率,确定所述呼吸频率;
13、其中,所述心率检测模型基于卷积神经网络和循环神经网络构建,所述心率检测模型包括运动分支和外观分支,所述运动分支中的卷积层之前连接有时间偏移模块。
14、根据本发明提供的一种用户健康状态感知方法,所述生理健康监测指标还包括血压;
15、所述基于所述人脸视频,应用深度学习算法,确定所述用户的生理健康监测指标,包括:
16、将所述人脸视频以及所述心率输入至血压检测模型,得到所述血压检测模型输出的所述血压;
17、其中,所述血压检测模型基于卷积层以及双向长短期记忆网络构建,用于表征血压、2倍心率以及初始血压之间的关联关系,所述初始血压基于机器学习拟合得到的初始血压、脉搏波传导距离与血管容积之间的线性关系确定。
18、根据本发明提供的一种用户健康状态感知方法,所述基于所述分类结果,对所述用户的健康状态进行感知,得到健康状态感知结果,之后包括:
19、基于所述健康状态感知结果,以及所述用户的生理健康监测指标,对所述用户进行健康状态分析,为用户提供健康维护建议。
20、根据本发明提供的一种用户健康状态感知方法,应用于车辆驾驶场景;所述基于所述分类结果,对所述用户的健康状态进行感知,得到健康状态感知结果,之后还包括:
21、基于所述健康状态感知结果,以及所述用户的生理健康监测指标,对所述用户进行健康状态分析,在所述用户的健康异常时,发出健康警报,并触发车控服务。
22、本发明还提供一种用户健康状态感知装置,包括:
23、声音获取模块,用于获取用户的声音信息;
24、声音分类模块,用于将所述声音信息进行特征提取,得到声学特征,并基于所述声学特征,对所述声音信息进行分类识别,确定所述声音信息的分类结果;
25、状态感知模块,用于基于所述分类结果,对所述用户的健康状态进行感知,得到健康状态感知结果。
26、本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述任一种所述的用户健康状态感知方法。
27、本发明还提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述的用户健康状态感知方法。
28、本发明还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述的用户健康状态感知方法。
29、本发明提供的用户健康状态感知方法、装置、车辆、电子设备及存储介质,该方法首先获取用户的声音信息;然后将声音信息进行特征提取,得到声学特征,并基于声学特征,对声音信息进行分类识别,确定声音信息的分类结果;最后基于分类结果,对用户的健康状态进行感知,得到健康状态感知结果。该方法通过语音交互,可以主动侦测用户的健康状态,对于用户出现咳嗽、鼻音、喉咙沙哑等症状时,可以及时识别到用户的身体健康状态,提高驾驶安全性,便于后续对用户进行及时救治。
1.一种用户健康状态感知方法,其特征在于,包括:
2.根据权利要求1所述的用户健康状态感知方法,其特征在于,所述方法还包括:
3.根据权利要求2所述的用户健康状态感知方法,其特征在于,所述生理健康监测指标包括心率和呼吸频率;
4.根据权利要求3所述的用户健康状态感知方法,其特征在于,所述生理健康监测指标还包括血压;
5.根据权利要求1-4中任一项所述的用户健康状态感知方法,其特征在于,所述基于所述分类结果,对所述用户的健康状态进行感知,得到健康状态感知结果,之后包括:
6.根据权利要求1-4中任一项所述的用户健康状态感知方法,其特征在于,应用于车辆驾驶场景;所述基于所述分类结果,对所述用户的健康状态进行感知,得到健康状态感知结果,之后还包括:
7.一种用户健康状态感知装置,其特征在于,包括:
8.一种车辆,其特征在于,包括:声音采集设备以及中控模块,所述声音采集设备与所述中控模块连接;
9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-6中任一项所述的用户健康状态感知方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-6中任一项所述的用户健康状态感知方法。