本发明公开一种基于机器视觉的软件界面元素关联关系识别方法及系统，涉及用户界面技术领域，该方法包括：对目标软件界面的图像进行特征提取，得到界面GUI组件信息，所述界面GUI组件信息包括界面GUI组件的位置和界面GUI组件的类别；对目标软件界面的图像进行边缘轮廓提取得到多个轮廓，并确定各轮廓之间的包含关系；基于所述目标软件界面的图像、所述界面GUI组件信息和各轮廓之间的包含关系，采用循环投影划分的方法确定界面元素间的关联关系；所述界面元素包括界面GUI组件。本发明为软件界面视觉理解任务提供技术支撑。