本发明公开了基于点集表示的矢量图识别方法、装置、终端及存储介质，方法包括：获取原始矢量图，并对原始矢量图进行预处理，得到原始矢量图所对应的二维点集；基于预设的骨干网络，对二维点集进行特征提取，得到多尺度点集特征；将初始查询向量输入符号识别网络中，所述初始查询向量与多尺度点集特征在符号识别网络中进行交互，以得到目标查询向量；基于目标查询向量，确定原始矢量图中的图元对应的符号类别以及符号掩码，并基于符号类别与符号掩码，确定图元识别结果。相对于现有技术，本发明无需对图元进行栅格化处理，减少了计算量，且本发明对矢量图的识别方法较为简单、泛化性强，可应用于诸多领域。