本发明提供一种相似度确定装置、方法及程序，其能够根据图像中所包括的观察结果的尺寸适当地确定图像之间的相似度。观察结果分类部(22)将第1医用图像的各个像素分类为至少一个观察结果。特征量计算部(23)针对每个观察结果计算第1特征量。权重系数设定部(24)对各个观察结果设定加权程度根据各个观察结果的尺寸而不同的权重系数。相似度导出部(25)根据权重系数进行在第1医用图像中计算出的每个观察结果的所述第1特征量与在第2医用图像中预先计算出的每个观察结果的第2特征量的加权运算，从而导出第1医用图像与第2医用图像的相似度。