本发明提供一种基于时空信息融合的判别性目标跟踪方法及装置，其中方法包括：获取历史图像集合和测试图像；对历史图像集合中的各个历史图像和测试图像进行处理，分别得到训练图像特征集合，和测试图像特征；对训练图像特征进行处理，得到时空判别性图像特征；对测试图像特征进行处理后，添加第二位置编码，得到目标测试图像特征；将时空判别性图像特征和目标测试图像特征进行特征融合，得到自适应时空图像特征；将测试图像特征和自适应时空图像特征进行特征融合，得到混合图像特征；对混合图像特征进行处理，得到目标边框和目标对象的前景背景概率；基于目标边框和前景背景概率，确定跟踪的目标对象。采用本方法能够提高目标跟踪准确性。