본 발명의 일 실시예에 따른 캘리브레이션 시스템은 색상 및/또는 3차원 깊이 정보가 포함된 대상의 형상정보(사람의 관절정보 및 특정 형상을 갖는 물체의 형상)를 획득하는 단수 또는 복수의 형상 스캔(카메라)부; 상기 대상에게 부착된 태그(tag)의 위치 정보를 획득하는 위치 정보 획득 센서부; 일면 또는 다수의 면에 영상을 주사할 수 있는 프로젝션부; 지면에 서 있는 대상의 포인트 클라우드 정보 또는 관절 정보를 이용하여 중심점 또는 대상의 특정형상에 대한 특징점을 계산(추출)하는 중심점 또는 특징점 추출부; 상기 중심점 또는 특징점 추출부에 의해 계산된 대상의 중심점 또는 특징점을 이용하여 축점을 생성하고, 상기 축점으로 이루어진 좌표계를 기준으로 상기 형상스캔(카메라)의 좌표 변환 행렬을 계산하여 캘리브레이션을 수행하는 평면 캘리브레이션부; 상기 대상의 시선 방향과 손끝의 위치 또는 지시가 가능한 도구를 이용하여 이를 잇는 3차원 벡터를 생성하는 지시 벡터 추출부; 상기 지시 벡터 추출부에서 추출된 3차원 벡터를 이용하여 지시된 위치에 축점을 생성하고, 이 축점으로 이루어진 좌표계를 기준으로 카메라의 좌표 변환 행렬을 계산하여 캘리브레이션을 수행하는 이면 캘리브레이션부; 및 상기 형상스캔(카메라) 및 상기 프로젝션부의 좌표계를 일치시키고, 상기 좌표계 상에서 대상의 위치 및 관절 정보를 획득하고...(이하생략)