公开(公告)号：CN118918239A

公开(公告)日：2024-11-08

申请号：CN202310505262.2

申请日：2023-05-06

申请人： 北京字跳网络技术有限公司

发明人： 郑晓铮 ,  闻超 ,  薛舟

IPC分类号： G06T17/00 ,  G06V10/80 ,  G06V40/10 ,  G06T3/06

摘要： 本申请实施例公开了手部三维重建方法、装置和电子设备。该方法的一具体实施方式包括：获取在至少两个视角下采集的手部图像；基于预设的手部三维重建网络，确定各个手部图像对应的初始手部三维重建结果，其中，手部三维重建结果包括手部三维模型和手部关键点；对至少两个视角下采集的手部图像对应的初始手部三维重建结果进行融合，得到融合后的手部三维重建结果。该实施方式使用多视角的一致性，使得融合后的手部三维重建结果更加准确。

公开(公告)号：CN117456596A

公开(公告)日：2024-01-26

申请号：CN202210835582.X

申请日：2022-07-15

申请人： 北京字跳网络技术有限公司

发明人： 闻超 ,  薛舟

IPC分类号： G06V40/20 ,  G06V10/30 ,  G06V10/774 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08

摘要： 本公开提供了一种手势估计网络处理方法、装置、设备及存储介质，所述方法包括：获取多种手势对应的手势仿真图像，其中，手势仿真图像包括手势关键点；对手势仿真图像添加场景元素，生成手势半真实图像，其中，场景元素用于模拟表征手势仿真图像对应的真实环境；基于手势半真实图像以及手势半真实图像中的手势关键点，训练手势估计网络进行手势估计处理。可以得到与手势真实图像接近的手势半真实图像，并且，手势半真实图像具有位置精准的手势关键点，因此无需人工标定图像中的手势关键点，降低了手势网络的训练难度，也能提高手势估计网络对手势真实图像的处理效果。

公开(公告)号：CN118570362A

公开(公告)日：2024-08-30

申请号：CN202310211618.1

申请日：2023-02-28

申请人： 北京字跳网络技术有限公司

发明人： 任鹏飞 ,  闻超 ,  薛舟

IPC分类号： G06T17/00 ,  G06N3/0464 ,  G06N3/08

摘要： 本公开实施例公开了一种三维对象重建方法、装置和电子设备，该方法包括：获取目标图像；对目标图像进行特征提取，得到多个不同尺度的视觉特征图；基于目标视觉特征图，生成至少两个目标对象的初始三维姿态信息；目标视觉特征图为多个不同尺度的视觉特征图中的一个尺度的视觉特征图；基于多个不同尺度的视觉特征图对至少两个目标对象的初始三维姿态信息进行修正，生成至少两个目标对象的目标三维姿态信息。该方式能够提高后续目标对象三维重建的精度，同时，从多个尺度下的视觉特征对三维姿态信息进行修正，能够更加合理地预测出至少两个目标对象的空间关系。