一种从深度图像中获取手部三维参数化模型的方法

    公开(公告)号:CN113205605A

    公开(公告)日:2021-08-03

    申请号:CN202110595988.0

    申请日:2021-05-29

    Applicant: 浙江大学

    Abstract: 本发明公开了一种从深度图像中获取手部三维参数化模型的方法,步骤如下:获取深度图像序列和深度相机内参;利用手部的深度图像序列和对应的深度相机参数,重建粗略的手部的三维点云;人工去除粗略的手部三维点云中的非手部点云与噪声点云,得到精细的手部三维点云;通过对精细的手部三维点云三阶段的迭代优化,获取用户个性化的手部三维参数化模型。本方法通过深度图像序列即可获得用户个性化的手部三维参数化模型。由于用户个性化的手部三维参数化模型相比传统无模型或通用手部模型提供了更多基于用户的先验信息,因此本发明可以在进行手势姿态估计时具有更高的精度和适配性,在人机交互,康复医疗等具体场景下具有应用前景。

    一种从深度图像中获取手部三维参数化模型的方法

    公开(公告)号:CN113205605B

    公开(公告)日:2022-04-19

    申请号:CN202110595988.0

    申请日:2021-05-29

    Applicant: 浙江大学

    Abstract: 本发明公开了一种从深度图像中获取手部三维参数化模型的方法,步骤如下:获取深度图像序列和深度相机内参;利用手部的深度图像序列和对应的深度相机参数,重建粗略的手部的三维点云;人工去除粗略的手部三维点云中的非手部点云与噪声点云,得到精细的手部三维点云;通过对精细的手部三维点云三阶段的迭代优化,获取用户个性化的手部三维参数化模型。本方法通过深度图像序列即可获得用户个性化的手部三维参数化模型。由于用户个性化的手部三维参数化模型相比传统无模型或通用手部模型提供了更多基于用户的先验信息,因此本发明可以在进行手势姿态估计时具有更高的精度和适配性,在人机交互,康复医疗等具体场景下具有应用前景。

    一种融合肌电和微惯性测量单元多模态信号的手势识别方法

    公开(公告)号:CN113205074A

    公开(公告)日:2021-08-03

    申请号:CN202110595989.5

    申请日:2021-05-29

    Applicant: 浙江大学

    Abstract: 本发明公开了一种融合肌电和微惯性测量单元多模态信号的手势识别方法,步骤如下:使用肌电电极和微惯性测量单元采集肌电数据和运动数据,并对两者进行同步处理后,进行训练集和测试集的划分;使用滑动窗口将每个信号段分割为多个固定长度的子信号段,并对每个子信号段的肌电数据与运动数据分别提取时域和频域特征;使用卷积神经网络分别提取肌电特征和运动特征的浅层和深层特征,并分别进行融合后输入分类网络,最后在决策层融合,输出每一手势类别的概率,识别模型进行训练后测试得到手势识别率。本发明融合肌电和微惯性测量单元多模态信号的手势识别方法能够充分利用肌电和运动数据各自的优势,故能更准确地识别同一被试的多种不同手势。

    一种基于多视角同步拍摄的三维人体建模与动作获取方法

    公开(公告)号:CN116416379A

    公开(公告)日:2023-07-11

    申请号:CN202310253721.2

    申请日:2023-03-16

    Applicant: 浙江大学

    Abstract: 本发明公开了一种基于多视角同步拍摄的三维人体建模与动作获取方法。获取多视角同步拍摄人物的跟踪视频,并从每帧中提取二维人体关键点和二维手部关键点;接着,利用二维人体关键点优化人体参数化模型的手臂参数。之后,基于二维手部关键点优化手部模型的参数;根据手腕位置,矫正手臂位置,得到人体参数化模型的手臂参数。通过整理手部模型点云和人体参数化模型点云,建立点与三角面片的索引,得到融合模型,将人体参数化模型的参数与手部模型的参数导入融合模型,得到人体重建的结果。本发明能利用多视角图像进行包含手部的人体建模与动作获取,并且不需要精密的多相机配置和动捕服装。

Patent Agency Ranking