本发明涉及一种三维点云重构方法和装置、服务器及可读存储介质。该方法包括：利用两张图像的特征点之间的匹配关系获取本质矩阵，通过分解本质矩阵得到两张图像之间的相对旋转矩阵和相对位移方向向量；基于相对旋转矩阵计算全局旋转矩阵；基于相对位移方向向量计算全局位移方向向量；以及基于两张图像的特征点之间的匹配关系、全局旋转矩阵和全局位移方向向量，获取目标场景的三维点云。本发明通过分解获取到的本质矩阵，能够同时得到两张图像之间的相对旋转矩阵和相对位移方向向量，因此，简化了计算过程，节省了计算时间。