본 발명은 음성 분리 기술에 관한 것으로, 더욱 상세하게는 음성 분리 네트워크의 반복된 블록을 전반부와 후반부로 나누어 전반부에서 도출된 중간 분리 신호로부터 혼합 음성 신호에 포함된 화자 정보들을 추출하는 화자 기반 음성 분리 장치 및 방법에 대한 것이다. 본 발명의 일 실시 예에 따르면, 음성 분리 네트워크의 전반부가 추출한 중간 분리 신호를 음성 분리 네트워크 후반부에 제공하여 정확한 화자 인식 및 음성 분리를 수행할 수 있다.