公开(公告)号：CN119336157A

公开(公告)日：2025-01-21

申请号：CN202411272324.0

申请日：2024-09-11

Applicant: 北京大学

Inventor： 鲁昊鹏 ,  单文康 ,  张玉槐 ,  宋利 ,  张新峰 ,  马思伟 ,  高文

IPC: G06F3/01 ,  G06F3/04815 ,  G06F3/14

Abstract: 本申请公开了一种交互式三维显示系统和方法，该系统包括：服务器、显示模块以及交互装置；服务器分别与显示模块以及交互装置通信连接；交互装置，用于根据用户的手势，发送交互请求至服务器；服务器，接收交互装置发送的交互请求，基于交互请求与预设多屏拼接模型，调整显示模块上显示的内容；预设多屏拼接模型用于计算用户为获得最佳视觉效果所需的目标观察距离。本申请提供了一种预设多屏拼接模型，该模型用于计算用户为获得最佳视觉效果所需的目标观察距离，因此当显示屏更换或参数调整后，通过该模型可以重新计算最佳视觉效果所需的目标观察距离作为内容调整的基础参数，使得用户不会由于角度变化引起视觉错位，提升了观看的连贯性和舒适度。

公开(公告)号：CN119225530A

公开(公告)日：2024-12-31

申请号：CN202411208770.5

申请日：2024-08-30

Applicant: 北京大学

Inventor： 高文 ,  鲁昊鹏 ,  刘烜奕 ,  颜若珂 ,  宋利 ,  张新峰 ,  王苫社 ,  马思伟

IPC: G06F3/01 ,  G06F3/04815 ,  G06T17/00 ,  G06T15/00 ,  G06T19/20

Abstract: 本申请公开了一种人机交互方法、装置、介质及电子设备，方法包括：响应于用户针对目标对象的选择指令，展示目标对象的数字3D模型；在数字3D模型的展示时长到达预设时长的情况下，获取目标对象的介绍文本；根据介绍文本，通过多模态大模型对数字3D模型进行推理，得到与介绍文本相关的分割区域，多模态大模型用于将介绍文本与多个视角的2D图像进行对齐并分割，多个视角的2D图像是将数字3D模型的不同预定义视点进行渲染得到的；播放介绍文本对应的音频，并显示分割区域。因此，采用本申请实施例，用户在面对文化遗产的数字化展示时，可以将抽象的文本解释与具体的文化细节有效联系起来，从而提升了用户的体验和学习效果。

公开(公告)号：CN119334347A

公开(公告)日：2025-01-21

申请号：CN202411272322.1

申请日：2024-09-11

Applicant: 北京大学

Inventor： 马思伟 ,  鲁昊鹏 ,  任荟文 ,  李睿琦 ,  宋利 ,  张新峰 ,  王苫社 ,  高文

IPC: G01C21/20 ,  G06F30/20 ,  G06F30/13 ,  G06F111/18

Abstract: 本申请公开了一种虚拟现实的导览信息生成方法、装置、介质及电子设备，方法包括：获取虚拟现实场景的场景数据；根据场景数据，识别虚拟现实场景中导航所需关注的关键3D对象；基于用户在虚拟现实场景中的预设视觉感知特征，获取移动过程中无碰撞的可访问点作为可访问点集；基于可访问点集以及关键3D对象，生成用户获取最佳视觉效果的最终视点集，作为表示视点的元素；根据可访问点集，生成表示导航路径的元素；可视化表示导航路径的元素和表示视点的元素，得到虚拟现实场景的导览信息。因此，采用本申请实施例，利用场景中的3D对象和视觉感知特征，可生成符合用户自然视觉和场景特征的导航路径，显著提升用户体验，增强用户对虚拟环境的记忆效果。