公开(公告)号：CN116774697A

公开(公告)日：2023-09-19

申请号：CN202310588360.7

申请日：2023-05-23

Applicant: 复旦大学

Inventor： 丁文超 ,  甘中学 ,  张宏达 ,  管宇翔 ,  朱国牛

IPC: G05D1/02

Abstract: 本发明公开一种自动编程规划的机器人系统，涉及智能化控制技术领域。本发明提供的自动编程规划的机器人系统，通过在处理器中植入有大语言模型，可以基于获取的指令信息生成控制代码；然后将控制代码下发给机器人，以完成作业。并且，通过采用大语言模型，能够基于不同指令信息实时生成不同的控制代码，以实现机器人动作的自主规划，提高工作效率，进而满足智能工厂、智能运输系统等的智能化需求。

公开(公告)号：CN120057021A

公开(公告)日：2025-05-30

申请号：CN202510357394.4

申请日：2025-03-25

Applicant: 复旦大学

Inventor： 贾劼 ,  丁文超 ,  甘中学

IPC: B60W50/00 ,  B60W60/00 ,  B60W30/095

Abstract: 本发明涉及自动驾驶技术领域，具体为基于智能体交互主动感知遮挡的自动驾驶决策方法及装置，方法步骤包括：将当前遮挡环境及车辆状态向量化表示为图结构并进行特征编码；将编码后的特征输入到考虑遮挡的自动驾驶决策强化学习的解码器中生成参数化的高斯动作概率；将动作概率映射到语义运动原语的控制空间，选择概率最大的语义运动原语执行，每个语义运动原语表示一个具有主动探索语义意图的短期轨迹；执行选定的语义运动原语期间，通过安全交互机制基于自车和其他车辆的预测轨迹进行潜在碰撞检测，并输出最终的车辆行驶轨迹。与现有技术相比，本发明能够适应动态和静态遮挡下的各种驾驶场景，显著提高学习效率的同时提供更好的安全保障。

公开(公告)号：CN116866708A

公开(公告)日：2023-10-10

申请号：CN202310911833.2

申请日：2023-07-25

Applicant: 复旦大学

Inventor： 朱国牛 ,  包泽宇 ,  谈金林 ,  王邵丰 ,  丁文超 ,  管宇翔 ,  甘中学 ,  白卫邦

IPC: H04N23/61 ,  H04N23/611 ,  H04N23/695 ,  H04N23/63 ,  H04N23/50 ,  H04N23/57 ,  B25J19/02 ,  B25J11/00 ,  G10L15/22 ,  G10L15/26

Abstract: 本发明公开一种移动式摄影机器人，涉及移动摄影技术领域，该机器人包括：相机，用于对图像和视频流进行获取；图像检测模块，用于对所述相机获取的图像进行目标识别，获得目标识别结果，所述目标识别结果包括至少一个目标框；图像追踪模块，用于确定所述目标识别结果中各目标框的追踪信息，所述追踪信息包括目标框的ID和中心坐标；用户界面，用于显示各所述目标框的所述追踪信息，从各所述目标框中选择追踪目标，还用于确定目标参考到达位置；大语言模型，用于根据所述追踪目标的追踪信息生成决策指令；机械臂，用于搭载所述相机，并根据所述决策指令进行运动；移动平台用于搭载机械臂，并根据决策指令进行运动。本发明提高了移动摄影的灵活性。

公开(公告)号：CN116690610A

公开(公告)日：2023-09-05

申请号：CN202310912204.1

申请日：2023-07-25

Applicant: 复旦大学

Inventor： 朱国牛 ,  包泽宇 ,  谈金林 ,  王邵丰 ,  丁文超 ,  管宇翔 ,  甘中学 ,  白卫邦

IPC: B25J11/00 ,  B25J9/08 ,  B25J9/16 ,  B25J18/00 ,  B25J19/02

Abstract: 本发明公开一种人机交互机器人，涉及人机交互技术领域，该机器人包括：图像检测模块对输入的图像进行用户位置信息识别和用户表情识别；所述用户位置信息包括中心坐标、景深、在画面中所占面积和用户位置与相机之间的距离；声音识别模块对输入的用户声音进行用户情绪识别；用户界面显示用户位置信息、用户表情和用户情绪；大语言模型根据用户位置信息、用户表情和用户情绪输出反馈信息；反馈信息包括文字信息和语音信息；机械臂根据反馈信息从设定动作库中提取与反馈信息匹配的反馈动作并输出；设定动作库用于存储多个反馈动作，且各反馈动作绑定多个信息关键字。本发明可实现文字、语音和动作多模态的信息交互，提高了信息交互的多样性。