一种动态骨骼识别方法、系统、存储介质及电子设备

    公开(公告)号:CN118411764A

    公开(公告)日:2024-07-30

    申请号:CN202410876073.0

    申请日:2024-07-02

    发明人: 王晓敏 张琨

    摘要: 本发明提供一种动态骨骼识别方法、系统、存储介质及电子设备,方法包括:通过预设传感设备获取多模态数据并根据多模态数据类型分别进行预处理得到多模态预处理数据;根据多模态预处理数据通过预设策略确定融合数据并根据融合数据通过预设深度学习模型确定关键骨骼点数据;根据关键骨骼点数据通过预设算法确定修正数据并根据修正数据和多模态预处理数据通过预设策略确定修正融合数据,再根据修正融合数据通过预设深度学习模型确定修正关键骨骼点数据;根据修正关键骨骼点数据通过预设神经网络确定动作特征数据并根据修正关键骨骼点数据和动作特征数据确定用户骨骼模型。本发明解决了现有技术中缺少一种准确性和鲁棒性高的动态骨骼识别方法的问题。

    一种基于Unity平台的机械臂仿真方法及系统

    公开(公告)号:CN117290980B

    公开(公告)日:2024-02-02

    申请号:CN202311588582.5

    申请日:2023-11-27

    发明人: 王晓敏 张琨

    摘要: 本发明提供了一种基于Unity平台的机械臂仿真方法及系统,该方法通过建立包含虚拟机械臂模型和虚拟障碍物模型的虚拟场景,确定虚拟机械臂模型的初始位置,并建立相应的基坐标系和各关节的关节坐标系,再根据末端位姿数据,并将末端位姿数据转换为目标变换矩阵,同时,确定相邻的两个关节坐标系之间的变换关系,得到对应的齐次变换矩阵,在已知目标变换矩阵和齐次变换矩阵的基础上,计算出各关节的转动角度,然后排除各关节的转动角度中与虚拟障碍物模型干涉的转动角度,最后在剩下的各关节的转动角度中确定移动耗能最小的各关节的转动角度,并输出,由于选择出最佳转动角度,可以在一定程度上降低机械手臂在实际环境中能耗及损(56)对比文件Yousif Al Mashhadany.Implement ofIntelligent Controller for 6DOF RobotBased on a Virtual Reality Model《.202315th International Conference onDevelopments in eSystems Engineering(DeSE)》.2023,全文.林瑾.机械手臂抓取轨迹精度测试仿真分析.中国测试.2013,(03),全文.孙军;张家亮;马玲.Dobot机械臂建模仿真与轨迹规划算法研究.机械与电子.2016,(06),全文.

    一种基于Unity平台的机械臂仿真方法及系统

    公开(公告)号:CN117290980A

    公开(公告)日:2023-12-26

    申请号:CN202311588582.5

    申请日:2023-11-27

    发明人: 王晓敏 张琨

    摘要: 本发明提供了一种基于Unity平台的机械臂仿真方法及系统,该方法通过建立包含虚拟机械臂模型和虚拟障碍物模型的虚拟场景,确定虚拟机械臂模型的初始位置,并建立相应的基坐标系和各关节的关节坐标系,再根据末端位姿数据,并将末端位姿数据转换为目标变换矩阵,同时,确定相邻的两个关节坐标系之间的变换关系,得到对应的齐次变换矩阵,在已知目标变换矩阵和齐次变换矩阵的基础上,计算出各关节的转动角度,然后排除各关节的转动角度中与虚拟障碍物模型干涉的转动角度,最后在剩下的各关节的转动角度中确定移动耗能最小的各关节的转动角度,并输出,由于选择出最佳转动角度,可以在一定程度上降低机械手臂在实际环境中能耗及损耗。

    一种基于UGUI的树形折叠结构页签创建方法和系统

    公开(公告)号:CN117270854A

    公开(公告)日:2023-12-22

    申请号:CN202311532228.0

    申请日:2023-11-17

    发明人: 王晓敏 张琨

    IPC分类号: G06F8/38 A63F13/60 G06F8/34

    摘要: 本发明提供一种基于UGUI的树形折叠结构页签创建方法和系统,涉及计算机软件技术领域,所述方法包括:基于UGUI创建根画布,并创建根节点;在根节点下添加表示父页签和子页签的节点按钮;导入子页签组控制脚本和总页签控制脚本;为根节点添加所述总页签控制脚本控制所述节点按钮,并为父页签节点按钮添加按钮交互逻辑;对所述子页签分组,并基于子页签组控制脚本将分组后的各个子页签组分别与对应的所述父页签进行关联,最后根据需求添加交互事件。本申请通过编写脚本进行树形折叠结构页签的创建,简化了树形折叠结构页签的创建过程,降低了工作量,提高了开发效率和准确率。

    一种虚拟现实环境下的示教方法、系统、存储介质及设备

    公开(公告)号:CN116682304B

    公开(公告)日:2023-11-07

    申请号:CN202310968030.0

    申请日:2023-08-03

    发明人: 王晓敏 张琨

    IPC分类号: G09B9/00 G06F3/01 G06V40/18

    摘要: 本发明提供了一种虚拟现实环境下的示教方法、系统、存储介质及设备,该方法通过构建一虚拟教学场景,后获取时间信息和虚拟示教者登录信息,判断是否对虚拟教学场景进行激活;若是,则激活对应的头戴式VR设备和操作设备,同时加载虚拟操作装置,并获取来自虚拟示教者产生的操作指令;根据操作指令,触发对应的示教模式,并激活对应的目标操作设备,实时采集目标操作设备的操作信息,同时获取目标操作设备对应的虚拟用户与虚拟操作装置的交互信息,通过头戴式VR设备进行展示,以完成示教,由于该方法不受传统示教方法对场地的限制,因此能够有效提高教学效果。

    一种虚拟现实环境下的示教方法、系统、存储介质及设备

    公开(公告)号:CN116682304A

    公开(公告)日:2023-09-01

    申请号:CN202310968030.0

    申请日:2023-08-03

    发明人: 王晓敏 张琨

    IPC分类号: G09B9/00 G06F3/01 G06V40/18

    摘要: 本发明提供了一种虚拟现实环境下的示教方法、系统、存储介质及设备,该方法通过构建一虚拟教学场景,后获取时间信息和虚拟示教者登录信息,判断是否对虚拟教学场景进行激活;若是,则激活对应的头戴式VR设备和操作设备,同时加载虚拟操作装置,并获取来自虚拟示教者产生的操作指令;根据操作指令,触发对应的示教模式,并激活对应的目标操作设备,实时采集目标操作设备的操作信息,同时获取目标操作设备对应的虚拟用户与虚拟操作装置的交互信息,通过头戴式VR设备进行展示,以完成示教,由于该方法不受传统示教方法对场地的限制,因此能够有效提高教学效果。

    虚拟角色移动方法、装置、计算机设备及介质

    公开(公告)号:CN116501175A

    公开(公告)日:2023-07-28

    申请号:CN202310745931.3

    申请日:2023-06-25

    发明人: 王晓敏 张琨

    IPC分类号: G06F3/01

    摘要: 本发明实施例提供了一种虚拟角色移动方法、装置、计算机设备及介质,涉及虚拟现实技术领域,该方法包括:获取虚拟现实设备的手柄坐标和相机坐标;根据手柄坐标和相机坐标,计算用户手臂摆动角度;当手臂摆动角度达到第一预设角度时开始计时,手臂摆动角度达到第二预设角度时计时结束,并记录所用时间为实际摆臂时间;根据预设摆臂时间、移动速度初始值和实际摆臂时间,计算当前手臂摆动对应的虚拟角色模型的移动速度;根据移动速度和移动方向控制虚拟角色模型移动,移动方向为头部相机的视角的正前方。由于该方案的虚拟角色控制方法简单易操作,降低了虚拟角色移动的控制复杂度,提升了用户体验感。

    兼容多端的UI碰撞和排序检测方法、装置、设备及介质

    公开(公告)号:CN118466958A

    公开(公告)日:2024-08-09

    申请号:CN202410939319.4

    申请日:2024-07-15

    发明人: 王晓敏 张琨

    摘要: 本发明实施例提供了一种兼容多端的UI碰撞和排序检测方法、装置、设备及介质,涉及虚拟现实技术领域,该方法包括基于Unity编辑器获取用于跨平台交互式应用程序的工具包;创建根画布以及顶层父级UI;对顶层父级UI添加ImgPieDragManager脚本;对每个待排序元素添加预设正确顺序的父节点后添加至顶层父级UI中,再添加用于碰撞检测的脚本,基于该脚本进行拖拽以及碰撞检测;基于ImgPieDragManager脚本,进行随机打乱,再将待排序元素的ID与父节点的预设正确顺序进行比较,进行排序检测。该方案实现了一次编写多端可用,提升开发者效率,简化制作复杂性,节省开发成本。

    一种网页3D场景二维显示方法及系统

    公开(公告)号:CN117093793B

    公开(公告)日:2024-05-28

    申请号:CN202311077499.1

    申请日:2023-08-25

    发明人: 王晓敏 张琨

    摘要: 本发明提供了一种网页3D场景二维显示方法及系统,该方法包括:实时接收用户输入的IP地址,并将IP地址发送至服务器,以获取服务器实时下发的与IP地址对应的网页资源信息;实时判断网页资源信息中是否包含三维场景模型;若实时判断到网页资源信息中包含三维场景模型,则提取出三维场景模型中包含的HTML文档,并对HTML文档进行解析处理,以生成对应的DOM树;检测出三维场景模型对应的模型类型,并根据模型类型以及DOM树生成对应的渲染树;通过渲染树对三维场景模型进行二维渲染,以生成对应的二维画面,并将二维画面在网页中进行实时显示。本发明能够有效的提升渲染效率,同时提升用户的使用体验。

    一种虚拟卷尺测量仿真方法及系统

    公开(公告)号:CN117274525B

    公开(公告)日:2024-03-29

    申请号:CN202311551617.8

    申请日:2023-11-21

    发明人: 王晓敏 张琨

    摘要: 本发明提供了一种虚拟卷尺测量仿真方法及系统,该方法包括:当检测到目标测量区域时,提取出目标测量区域中包含的两个待测量点,并通过射线碰撞检测算法分别检测出两个待测量点对应的两个3D世界坐标;基于预设算法计算出两个3D世界坐标之间的长度以及指向方向,并根据长度以及指向方向在虚拟场景中创建出对应的初始卷尺模型;在预设图片数据库中匹配出与初始卷尺模型适配的刻度贴图,并将刻度贴图对应映射至初始卷尺模型上,以生成对应的目标卷尺模型。本发明能够根据实际情况创建出对应的虚拟卷尺模型,对应提升了用户的使用体验。