운동 인식 기반 스포츠 체험 장치 및 이를 이용한 운동 인식 방법이 제공된다. 장치가, 사용자에 대한 깊이 영상과 컬러 영상으로부터 관절 정보를 획득하고, 검출된 관절 정보를 기반으로 기준 관절을 선택하고, 상기 기준 관절을 중심으로 측정되는 각 관절들까지의 상대적 거리의 분산값들을 기반으로 복수의 주요 관절들을 선택한다. 이후, 장치는, 기준 관절로부터 주요 관절까지 도달하는 거리, 속도, 속력, 가속도, 가속력 중 적어도 하나를 기반으로 주요 시점을 결정하고, 주요 시점에 발생한 동작에 대응하는 특징 벡터를 생성하여 동작을 인식한다.