数字人表情及其模型生成方法、装置和VR设备的外挂系统

    公开(公告)号:CN115841533A

    公开(公告)日:2023-03-24

    申请号:CN202211153329.2

    申请日:2022-09-21

    摘要: 本公开提供数字人表情及其模型生成方法、装置和VR设备的外挂系统。数字人表情生成方法包括捕捉表演者的表情视频;选择表情视频中的多个帧或全部帧,使用主动外观模型进行拟合来为选择的每一帧获得多个面部特征点;基于为每一帧获得的多个面部特征点和预先确定的从人脸表情拟合到数字人的3D模型的映射关系,计算用于驱动数字人的3D模型的表情的多个控制器的数值;其中得到主动外观模型包括以下步骤:基于训练集中所标注的多个面部特征点训练形状模型、纹理模型,并且通过扰动实验获得回归矩阵,该回归矩阵表示通过扰动实验获得的参数变化与纹理残差之间的关系。本公开的实施例实现将人脸表情实时迁移到数字人的3D模型,精准追踪面部表情。

    用于三维面部重建的人脸表情迁移方法、装置和系统

    公开(公告)号:CN115330848A

    公开(公告)日:2022-11-11

    申请号:CN202210331887.7

    申请日:2022-03-31

    IPC分类号: G06T7/55 G06T13/40

    摘要: 本公开提供了用于三维面部重建的人脸表情迁移方法、装置和系统,其包括接收从至少两个角度同时拍摄所获得的人脸表情动画,每个角度包含M帧人脸表情动画;使用SFM算法根据所获得的人脸表情动画产生M帧人脸表情3D模型;使用包裹算法将M帧人脸表情3D模型计算为相同拓扑的模型;使用RBF算法基于目标人脸初始状态下的目标人脸3D模型与人脸表情初始状态下的人脸表情3D模型计算出RBF算法中的权重值,其中目标人脸初始状态与人脸表情初始状态下的表情相同;使用RBF算法基于M帧人脸表情3D模型和权重值计算目标人脸3D模型。本公开的实施例可以实现表情细节到目标人脸的迁移,并且可以利用成本较低且佩戴方便的采集装置。

    一种室外环保监控设备
    3.
    实用新型

    公开(公告)号:CN219694223U

    公开(公告)日:2023-09-15

    申请号:CN202320281005.0

    申请日:2023-02-22

    发明人: 徐鹏

    IPC分类号: G01D21/02 B01D53/26 H05K7/20

    摘要: 一种室外环保监控设备,涉及环境保护监控技术领域,包括监控设备本体、监控设备壳体、干燥层和散热组件,其中,监控设备本体采用现有的环境监控设备对户外空气、水质等场所的环境指数进行检测,监控设备壳体用于对监控设备本体起到防护作用,干燥层用于当环保监控设备放置在潮湿环境中进行测试时,对吸附进入监控设备本体中的水雾气进行吸附,从而保证监控设备壳体处于干燥状态,散热组件用于当环保监控设备在高温状态下进行测试时,确保监控设备本体的灵敏度不受温度影响;综述来说,本实用新型通过设置干燥层、监控设备壳体和散热组件,确保监控设备能适应不同的环境,防止内部零件不灵敏,保证检测数据的准确性。

    用于人脸表情捕捉的虚拟现实设备的外挂装置

    公开(公告)号:CN217506582U

    公开(公告)日:2022-09-27

    申请号:CN202220904001.9

    申请日:2022-04-19

    IPC分类号: G06V40/16 G06V40/19

    摘要: 根据本实用新型的公开,提供了用于人脸表情捕捉的虚拟现实设备的外挂装置,其包括被设置在外挂装置的内部的安装架上的第一组摄像机,其位置被设置为在外挂装置安装到虚拟现实设备之后,面对使用者的眼部,该第一组摄像机包括至少两台具有红外功能的摄像机;被设置在外挂装置的下部的安装架上的第二组摄像机,其位置被设置为在外挂装置安装到虚拟现实设备之后,面对使用者的嘴部;第一红外LED补光灯,被设置在第一组摄像机的附近;主控板,其从第一组和第二组摄像机接收人脸表情数据,并且向第一组和第二组摄像机发送同步拍摄的信号;连接结构,其与虚拟现实设备的连接结构相配合,使得外挂装置固定到虚拟现实设备上。

    基于视频的人脸表情采集装置及三维人脸重建系统

    公开(公告)号:CN217787791U

    公开(公告)日:2022-11-11

    申请号:CN202221812161.7

    申请日:2022-07-14

    IPC分类号: G06V40/16 G06T13/40 G06T15/04

    摘要: 根据本实用新型的公开,提供了一种基于视频的人脸表情采集装置和三维人脸重建系统。该采集装置包括安装支架,其以360度环绕搭建,其内部空间至少容纳一个人;多个LED灯组,其安装在安装支架的内侧,并且环绕内部空间分布,多个LED灯组加装偏光片;摄像机阵列,其安装在支架上并且包括能够拍摄到人脸的至少两台摄像机,其中摄像机阵列中的每台摄像机加装偏光片;以及定位装置,其上具有图案并且能够佩戴在被拍摄的人的头部。本公开的实施例可以得到不包括光照信息的帧信息,可以精确对齐三维数据,由此避免了手动建模并且可以得到更精细的表情信息和三维材质贴图。

    可捕捉人脸表情的虚拟现实眼镜

    公开(公告)号:CN217767045U

    公开(公告)日:2022-11-08

    申请号:CN202220902173.2

    申请日:2022-04-19

    IPC分类号: G02B27/01 G06V40/16 G06F3/01

    摘要: 根据本实用新型的公开,提供了一种可捕捉人脸表情的虚拟现实眼镜,其包括第一组摄像机,被设置在虚拟现实眼镜的下部且面对使用者的嘴部,包括至少两台摄像机;显示器;第二组摄像机,被设置在显示器周边并且面对使用者的眼部,其包括至少两台具有红外功能的摄像机;第一红外LED补光灯,被设置在所述第二组摄像机的附近;主控板,其从所述第一组和第二组摄像机接收人脸表情数据,并且向所述第一组和第二组摄像机发送同步拍摄的信号。本公开的实施例的虚拟现实眼镜实现了产品的一体化和轻量化,并且可以实现更精细的表情捕捉,获得更好的用户体验。

    头戴式面部捕捉装置及使用该装置的三维面部重建系统

    公开(公告)号:CN217655549U

    公开(公告)日:2022-10-25

    申请号:CN202220730406.5

    申请日:2022-03-31

    IPC分类号: G06V40/16 G06T17/00

    摘要: 根据本实用新型的公开,提供了一种头戴式面部捕捉装置以及使用该装置的三维面部重建系统。该头戴式面部捕捉装置包括头戴框架组,头戴框架组包括佩戴于头部上方的上框架,分别连接在上框架的两个末端的两个连接件,连接到连接件中的至少一个并延伸到面部前方的前框架;该头戴式面部捕捉装置还包括设置在前框架上的至少两个摄像机和照明部件,其中在上框架面对至少两个摄像机的表面上具有预设图案,其位于每台摄像机的拍摄范围内。本公开的头戴式面部捕捉装置通过头戴框架组中的一个或多个部件可稳定地固定于头部,便于获得清晰精细的面部表情图像,并且预设图案为至少两个摄像机所拍摄的图案提供对齐的依据,提高了效率并且节省了成本。

    一种排污监控设备的安装结构

    公开(公告)号:CN220228376U

    公开(公告)日:2023-12-22

    申请号:CN202320242295.8

    申请日:2023-02-17

    发明人: 徐鹏

    IPC分类号: F16M11/04 F16M13/02

    摘要: 一种排污监控设备的安装结构,涉及污水处理技术领域,包括监控设备本体、固定组件、引水组件、排污组件和监测组件,监控设备本体使用时放置在水中,用于存放检测污水中指标有关仪器设备,固定组件用于将监控设备本体固定于某一处,防止监控设备本体随着水流飘走,无法实现定点实时检测的功能,引水组件用于将工业排出的污水引流进入排污监控设备中进行检测,排污组件用于将检测完成的污水排入污水处理池内;综述来说,本实用新型通过设置固定组件将排污监控设备固定安装在排放的水管上,实现了对污水质量的实时检测,同时该结构有效防止排污监控设备随着水流移动,结构简单,易于实现。

    PBR材质扫描装置及包括其的三维贴图生成系统

    公开(公告)号:CN217935729U

    公开(公告)日:2022-11-29

    申请号:CN202221809661.5

    申请日:2022-07-14

    摘要: 根据本实用新型的公开,提供了一种PBR材质扫描装置和包括其的三维贴图生成系统。该PBR材质扫描装置包括柱形容器,其横截面为多边形或者圆形,柱形容器的侧面内表面沿周线均匀分布多组LED灯组,并且该柱形容器具有用于放置被拍摄物体的底表面,该底表面上设置有定位图表;和放置在柱形容器上部的遮光盖,其上具有设置摄像机的拍摄孔,所述遮光盖的内表面设置有LED灯组。本公开的PBR材质扫描装置实现了对各类材质的三维数据的采集,还原材质的真实细节和质感,以生成逼真的三维材质贴图。

    AR设备的外挂装置
    10.
    实用新型

    公开(公告)号:CN217821105U

    公开(公告)日:2022-11-15

    申请号:CN202221988271.9

    申请日:2022-07-29

    IPC分类号: G02B27/01 H04N5/247 H04N5/33

    摘要: 根据本实用新型的公开,提供了一种AR设备的外挂装置。该外挂装置包括主体框架,其具有镜框和连接部,其中该镜框围绕的空间对应于AR设备的镜片区域,该连接部位于镜框上部并且具有可拆卸地连接到AR设备的连接机构;安装在镜框的上部框架的第一摄像机阵列和安装在镜框的下部框架的第二摄像机阵列,第一摄像机阵列和第二摄像机阵列朝向佩戴AR设备的人并且分别具有至少一台摄像机;和主控板,其安装于主体框架上,从第一摄像机阵列和第二摄像机阵列接收拍摄的数据。本公开的外挂装置为现有的AR设备增加了人脸表情捕捉的功能,增强了AR设备的操控体验。