本发明公开了AI辅助3D建模和实时检测的无线内镜系统，涉及医疗器械技术领域，包括坐标配准和图像处理单元、磁感应定位单元、显示模块、无线内镜以及供电模块，所述坐标配准和图像处理单元使用VTK，基于患者术前CT三维影像，重建患者手术位置三维影像，构建CT影像坐标系，使用参照物基于位置关系变换矩阵对影像坐标系、磁场坐标系进行配准统一，该模块也对腔镜画面内器官和病灶对象使用yolo‑v8进行实时检测，辅助医生实时定位操作位置和识别器官类型，所述磁感应定位单元由磁场发生器、微传感器和控制器组成。本发明可以精准构建术中区域三维影像模型，实时展示医生术中操作三维位置，提高医生术中操作准确性和安全性。