-
公开(公告)号:CN116912731A
公开(公告)日:2023-10-20
申请号:CN202310741583.2
申请日:2023-06-20
申请人: 广东科学技术职业学院
摘要: 本申请提出一种钢琴演奏评分方法、电子设备和存储介质,通过分别拍摄演奏者弹奏钢琴时的手部动作视频和面部表情视频,再对视频进行逐帧分解得到第一手部图像和第一表情图像,通过手势识别网络对第一手部图像进行位姿识别得到手势特征序列,计算手势特征序列和预设特征序列之间的手势相似度,通过表情识别网络从第一表情图像中提取第一表情特征,对第一表情特征进行分解,得到多个第二表情特征,计算每个第二表情特征的内关联权重和外关联权重,根据内关联权重和外关联权重将第二表情特征重构,得到第三表情特征,根据第三表情特征确定第一表情图像的表情标签,根据手势相似和表情标签对演奏者演奏水平进行评分,实现对演奏者演奏水平的综合评价。
-
公开(公告)号:CN116912730A
公开(公告)日:2023-10-20
申请号:CN202310741531.5
申请日:2023-06-20
申请人: 广东科学技术职业学院
摘要: 本申请提出一种钢琴手势评分方法和装置、电子设备、存储介质,方法包括:获取演奏者弹奏钢琴时至少两个不同视角的多个第一演奏视频;对所有第一演奏视频进行逐帧分解处理,得到多个第一手部图像;对第一手部图像进行透视变换处理,得到标准手部图像;根据标准手部图像构建第一手部三维模型;根据第一手部三维模型确定手势特征序列;计算手势特征序列和预设特征序列的最小相对距离,得到手势特征相似度信息;根据手势特征相似度信息确定演奏者的演奏评分。本申请通过构建演奏者的手部三维模型,从手部三维模型提取手势特征序列,计算手势特征序列与预设特征序列之间的相似度,从而对钢琴演奏者手部动作标准程度进行评分。
-
公开(公告)号:CN116912935A
公开(公告)日:2023-10-20
申请号:CN202310741615.9
申请日:2023-06-20
申请人: 广东科学技术职业学院
IPC分类号: G06V40/20 , G06Q10/0639 , G06N3/0464 , G06N3/0442 , G06N3/08
摘要: 本发明公开动作识别方法、系统及存储介质,其中,方法包括基于预设的深度学习算法对演奏者的手指进行动作检测,生成多个与手指对应的手部检测框;根据手部检测框对手指的类型进行类别检测,得到演奏者的手指位置信息,其中,手指位置信息用于表征演奏者演奏过程中的手指的运动情况;对预设的钢琴琴键进行琴键位置采集,得到参考琴键;基于预设的姿态识别算法对演奏者的手指进行关节识别,得到手指关节集合;计算手指关节集合中每个元素与参考琴键的距离以确定与手指位置信息对应的钢琴音符;根据手指位置信息以及钢琴音符确定目标手指动作。根据本申请的技术方案,能够对演奏者的手指动作进行准确判断,提高钢琴演奏的准确性。
-
公开(公告)号:CN116912732A
公开(公告)日:2023-10-20
申请号:CN202310741586.6
申请日:2023-06-20
申请人: 广东科学技术职业学院
IPC分类号: G06V20/40 , G06T5/00 , G06V10/74 , G06T5/50 , G06N3/0464 , G06N3/0442 , G06N3/08
摘要: 本申请涉及算法识别领域,特别涉及一种动作的评估方法及可读存储介质。其中,动作的评估方法包括获取用于表征用户钢琴弹奏手势的视频流数据;将视频流数据输入至算法处理器进行预处理,得到评估结果;将评估结果上传至云端评价系统,以使得云端评价系统对评估结果进行评价分析得到反馈报告。本申请通过将评估结果上传至云端评价系统,以使得云端评价系统对评估结果进行评价与分析,得到反馈报告。用户通过获取反馈报告能够及时得知自己的钢琴弹奏手势以及弹奏节奏存在的问题,用户通过反馈报告能够及时作出对应的调整,从而提高用户弹奏钢琴手势的准确性,提高用户的弹奏水平。
-
-
-