본 발명은 가상객체를 이용한 음악 합성 장치 및 방법에 관한 것으로, 상기 장치는 복수의 음원 소스 객체들이 배치된 가상공간을 생성하는 가상공간 생성부; 상기 가상공간에 참여한 적어도 하나의 사용자의 움직임을 감지하는 사용자 움직임 감지부; 상기 사용자의 움직임에 관한 사용자 인터랙션에 반응하여 상기 음원 소스 객체의 배치를 갱신하는 객체 반응 갱신부; 및 하나 이상의 음원 소스 객체 간의 배치 조합 상태가 기 설정된 융합 조건을 충족하는 경우 상기 배치 조합 상태에 매칭되는 음악을 합성하여 재생하는 음악 합성부;를 포함한다. 따라서, 본 발명은 사용자가 3차원 공간에서 손을 이용해 리듬, 악기 및 화음 등의 가상객체를 배치 및 구성함으로써 음악을 합성 및 생성하도록 할 수 있다.