구조물의 변위 판단 장치 및 방법이 개시된다. 일 양상에 따른 구조물의 변위 판단 장치는 서로 직교하는 제1 직선 및 제2 직선으로 구성되며 구조물에 부착된 마커를 촬영한 마커 영상을 획득하는 마커 영상 획득부; 상기 획득된 마커 영상을 분석하여 제1 가버 필터와 제2 가버 필터를 설계하는 필터 파라미터 결정부; 상기 설계된 제1 가버 필터와 상기 설계된 제2 가버 필터를 이용하여 상기 획득된 마커 영상으로부터 제1 위상 영상 및 제2 위상 영상을 생성하는 위상 영상 생성부; 및 상기 생성된 제1 위상 영상 및 상기 생성된 제2 위상 영상을 분석하여 상기 구조물의 변위를 판단하는 변위 판단부; 를 포함한다.