본 발명의 실시 예에 따른 영상 감시 방법은 감시 대상인 영상을 수신하는 단계; 상기 수신된 영상의 배경을 획득하는 단계; 상기 획득된 영상의 배경을 복수의 배경 영역으로 분할하고, 상기 분할된 각 배경 영역에 대해 미리 설정된 의미 정보를 할당하는 단계; 상기 수신된 영상으로부터 이동 객체를 추출하는 단계; 상기 추출된 이동 객체의 종류를 판단하는 단계; 상기 판단된 이동 객체의 종류와, 상기 이동 객체가 위치한 배경 영역에 대응되는 의미 정보를 비교하여 위험도를 판단하는 단계; 및 상기 판단된 위험도에 따라 감시 처리를 수행하는 단계를 포함하는 영상 감시 장치의 영상 감시 방법.