本发明提出了一种语音信号分离方法，首先建立观测信号的线性瞬时混合模型，针对随着源信号数目增多的情况下分离精度下降明显的问题，提出改进的最小化l1范数算法。算法首先对观测信号和混合矩阵进行预处理，而后根据向量的长度和方向来找到最接近观测信号的向量，在此基础上，又将混合矩阵的形式进行改变，利用变化后的混合矩阵估计某时刻的源信号，进而估计出所有时刻的源信号。本发明所提方法解决了随着源信号数目增多的情况下分离精度下降明显的问题，同时有效地分离出源信号。