본 발명은 비디오 영상의 시간축상 메디안 필터링 방법에 관한 것으로서 순차적으로 입력되는 비디오 영상 프레임에 대해 설정된 필터 윈도우 구간(W)에 대한 픽셀 값을 갱신하면서 메디안 필터링하며, 비디오 영상 프레임들의 픽셀 값을 필터 윈도우 구간에 대응되게 순차적으로 수신하는 단계와, 수신된 픽셀 값에 해당하는 히스토그램이 존재하는지를 판단하는 단계와, 수신된 픽셀 값에 해당하는 히스토그램이 존재하지 않으면, 입력된 히스토그램 빈(bin) 값과 시간스탬프(TS) 값 및 히스토그램 빈(bin)이 지속되어 발생된 지속횟수(fbin) 정보를 포함하는 단위 히스토그램 매칭정보를 등록하는 단계와, 수신된 픽셀 값에 해당하는 히스토그램이 존재하면 해당 히스토그램 빈(bin)이 지속되어 발생된 횟수(fbin) 및 시간 스탬프를 갱신하는 단계를 포함한다. 이러한 비디오 영상의 시간축상 메디안 필터링 방법에 의하면, 필터 윈도우 구간의 픽셀 (W)입력영상에 대한 히스토그램 정보 갱신에 요구되는 메모리 용량을 줄일 수 있는 장점을 제공한다.