-
公开(公告)号:CN111462128B
公开(公告)日:2023-12-12
申请号:CN202010466697.7
申请日:2020-05-28
Applicant: 南京大学
Abstract: 本发明公开了一种基于多模态光谱图像的像素级图像分割系统,多个可见光相机和热成像传感器构成相机阵列,可见光相机搭建为多模态相机阵列组,构成多模态的信息源;图形采集卡连接多模态的信息源与采集工作站,将采集的图像数据存储在采集工作站中;服务器对采集工作站中的图形数据进行配准、后处理。本发明还公开了一种基于多模态光谱图像的像素级图像分割方法,通过将单模态的图像分割算法扩展成多模态输入,并在网络中间层将多模态特征图融合,提高了Mask‑RCNN图像分割算法的精度。同时构建一套多模态光谱图像采集系统,可用于构建多模态数据集,应用于目标检测、图像分割、语义分割等相关机器视觉任务,具有现实的应用前景。
-
公开(公告)号:CN112185523B
公开(公告)日:2023-09-08
申请号:CN202011060027.1
申请日:2020-09-30
Applicant: 南京大学
IPC: G06V10/764 , G06T7/11 , G06T7/00 , G06N3/0464 , G06V10/80 , G16H30/20
Abstract: 本发明公开了基于多尺度卷积神经网络的糖尿病视网膜病变分类方法,先将原始眼底图像进行归一化预处理,再以目标像素为中心,对预处理后的图像进行多尺度分割,得到不同尺度下的一系列形状、大小相同的图像序列。针对每个尺度,分别利用卷积神经网络模型对图像序列进行特征提取,得到不同尺度的特征并进行融合,针对融合后的特征来进行最后的分类,得到图像序列(即目标像素)的病变检测结果。将原始眼底图像上所有像素点的检测结果进行整合输出,即得到带有病变定位和分类的糖尿病视网膜病变检测结果图。本发明多尺度提取特征并融合,实现同时检测MAs和HEs两种病变的自适应尺度糖尿病视网膜病变,提高了糖尿病视网膜病变检测算法的性能。
-
公开(公告)号:CN116259009A
公开(公告)日:2023-06-13
申请号:CN202310224286.0
申请日:2023-03-09
Applicant: 南京大学
IPC: G06V20/52 , G06V10/26 , G06V10/80 , G06V10/764 , G06V10/82 , G06N3/0464 , G06T7/00 , G01D21/02 , G08G1/048
Abstract: 本发明公开了一种非接触式的多模态路面结冰检测系统,该系统可实时监测路面是否结冰。本发明包括获取多模态数据的数据采集模块、对多模态数据进行语义分割的识别模块、对多模态数据进行后向融合的分类模块。本发明较已有方法,达到了更高的检测准确率且成本低廉。本发明充分利用多模态数据带来的互补信息,对不同光照条件更具鲁棒性。系统装置不接触路面,对交通几乎不造成影响,且对安装位置及角度约束低,使得安装便携。本发明对路面状态的检测具有实时性,大大增加了其应用性。
-
公开(公告)号:CN113139996A
公开(公告)日:2021-07-20
申请号:CN202110490222.6
申请日:2021-05-06
Applicant: 南京大学
Abstract: 本发明涉及一种基于三维点云几何特征学习的点云配准方法,首先使用自重建网络学习三个域转换模块:点云块到几何形状域的形状编码器、几何形状域到点云块的解码器以及点云块到采样域的采样编码器,并通过孪生交换结构保证几何特征的旋转不变性和采样一致性;然后使用形状编码器得到点云的几何特征描述并形成匹配对,初步筛选后利用RANSAC优化得到位姿估计;最后使用三个域转换网络构建点到曲面模型的精准匹配,进一步微调位姿实现点云配准,继而增量式定位激光雷达并获取点云地图。本发明的算法输入为激光雷达连续多帧点云,输出结果为各个时刻激光雷达的位姿和点云地图。本发明的算法结果可运用于自动驾驶、三维重建和虚拟现实等应用课题。
-
公开(公告)号:CN113076571A
公开(公告)日:2021-07-06
申请号:CN202110411454.8
申请日:2021-04-16
Applicant: 南京大学
IPC: G06F30/10 , G06F30/20 , G06F113/12
Abstract: 本发明公开了一种三维衣物实时仿真编辑方法及系统。该方法包括:读取并分析衣物二维版型文件,获取衣物二维版型轮廓线段信息;基于衣物二维版型轮廓线段信息,利用层次结构模型在逻辑和数据结构上对衣物进行建模,得到衣物模型;基于固定背景三角网格以及轮廓线生成仿真三角网格;基于仿真三角网格,将衣物模型在人体模型上进行物理仿真;基于物理仿真结果在三维空间中对衣物进行编辑,得到编辑向量;基于编辑向量对衣物模型进行更新。用户能够在三维空间中实时对衣物进行编辑操作,同时获得准确的二维面片版型。基于固定背景三角网格进行衣物网格更新的方法,不仅能保证仿真速度的实时性,还能够保证衣物物理仿真参数在编辑过程中不会发生改变。
-
公开(公告)号:CN113065506A
公开(公告)日:2021-07-02
申请号:CN202110411237.9
申请日:2021-04-16
Applicant: 南京大学
Abstract: 本发明公开了一种人体姿态识别方法,所述识别方法包括如下步骤:获取当前帧的不同视角下的多张人体图像;根据多张所述人体图像,采用卷积神经网络算法建立三维人体模型;分别将每张所述人体图像上的相邻像素进行聚类,获得多个像素块;建立每个所述像素块的二维像素块模型;根据每个所述像素块的二维像素块模型对所述三维人体模型进行优化,获得优化后的三维人体模型;根据优化后的三维人体模型确定当前帧的人体姿态。本发明首先采用卷积神经网络算法,简单快速的建立一个三维人体模型,然后利用图像中人体姿态对所述三维人体模型进行优化,利用优化后的三维人体模型进行姿态识别,实现了在保证人体姿态估计精度的同时,提高人体姿态估计的速度。
-
公开(公告)号:CN106952304A
公开(公告)日:2017-07-14
申请号:CN201710172103.X
申请日:2017-03-22
Applicant: 南京大学
IPC: G06T7/55
Abstract: 本发明公开一种利用视频序列帧间相关性的深度图像计算方法,包括:步骤1、对左右视点相机拍摄的图片进行校正;步骤2、对于第一帧的左右图片的点p,在最大视差搜索范围计算匹配代价,进行视差优化、视差细化,得到初始视差值d1;第一帧的视差梯度为g1;步骤3、对于下一帧的p点的计算,当p点不是异常点或边缘点,以上一帧p点的视差值为基准设定视差搜索范围,否则以最大视差搜索范围计算匹配代价,进行视差优化、视差细化,并得到当前帧的视差值及视差梯度,实现实时的立体匹配。本发明利用视频序列中上一帧的视差,大幅缩小了当前帧算法的计算量,能够在保证原有算法匹配精度的条件下,减小耗时,提高在实际应用场景中的效率。
-
公开(公告)号:CN105354591A
公开(公告)日:2016-02-24
申请号:CN201510688156.8
申请日:2015-10-20
Applicant: 南京大学
IPC: G06K9/62
CPC classification number: G06K9/6226 , G06K9/6277
Abstract: 本发明是一种针对三维室外场景语义分割的系统,属于计算机视觉领域。本发明解决的问题是:针对三维室外场景中遮蔽多、点云密度不均、物体结构复杂等问题,提出一种利用高阶与类别相关的先验知识的分割分类三维点云场景的系统。本发明系统的主要算法的核心部分在于提出了一种利用与类别相关的高阶语义分割框架,并分析了三维室外场景中类别相关的先验信息,提出了相应的高阶函数模型。本发明在传统的高阶单一先验知识的语义分割框架的基础上,进一步提出了一种利用类别相关先验知识的语义分割方法,能够更加精确的分割分类三维室外场景。
-
公开(公告)号:CN102705763B
公开(公告)日:2014-11-26
申请号:CN201210215413.2
申请日:2012-06-27
Applicant: 南京大学(苏州)高新技术研究院
IPC: F21S8/00 , F21V8/00 , G02F1/13357 , G09G3/34 , G09G3/36 , F21Y101/02
Abstract: 本发明属于液晶显示器背光技术研究领域,涉及一种侧光式LED动态背光显示装置。该装置的背光模组包括导光板模块,安装于所述导光板模块下面的底面反射片,以及安装于所述导光板模块上面的扩散片、棱镜片,其特征在于:所述导光板模块由多个导光板块拼接组成,每个导光板块分别与独立的亮度可调节的LED光源耦合,实现所述的侧光式LED动态背光模组的区域亮度调节。所述导光板块侧面镀有把该导光板耦合的LED光源发出的光线限制在导光板区域内的反射面。本发明装置包括背光亮度控制器、图像显示信号补偿控制器、侧光式LED动态背光模组和LCD显示面板,具有背光亮度均匀,亮度高,图像显示对比度高,以及节约功耗的优点。
-
公开(公告)号:CN103142216B
公开(公告)日:2014-11-12
申请号:CN201310113624.X
申请日:2013-04-03
Applicant: 南京大学
IPC: A61B5/00
Abstract: 本发明公开了一种基于光声成像技术的多层介质声速计算的方法,包括以下步骤:根据传感器脉冲响应函数,对传感器接收到的原始数据进行逆滤波处理得到逆滤波数据;设定组织中不同介质的初始声速及声速迭代范围;以逆滤波数据及所设定组织各层声速为基础,进行光声图像重建;从每次重建得到的光声图像中计算并提取图像中声源的分布,依据声源分布信息确定迭代是否完成,若完成则输出声速。本发明提供了一种简单无创的用于测量生物组织中声速的方法,计算简单,复杂度小,效果突出。
-
-
-
-
-
-
-
-
-