요약
본 발명은 웹사이트 정적 크롤러의 오작동을 모니터링하여 URL(Uniform Resource Locator)서버에 과다한 트래픽(Traffic)이 발생되는 피해를 방지할 수 있는 웹 크롤러 모니터링 시스템 및 방법에 관한 것으로, 웹 크롤러(Web crawler)를 모니터링 하는 시스템에 있어서, 입력되는 URL(Uniform Resource Locator)을 상기 크롤러에게 전달하고, 상기 URL의 크롤링 프로세스 정보(PID) 및 크롤링 시작시간을 파일로 저장하며, 기 지정된 크롤링 작업시간이 경과하면 상기 크롤링 프로세스를 강제로 종료한 후, 상기 파일을 삭제하고 구동을 종료하는 제1모니터링부; 상기 제1모니터링부가 저장한 파일로부터 상기 크롤링 프로세스 정보(PID) 및 크롤링 시작시간을 독출하고, 상기 기 지정된 작업시간이 경과하면 상기 크롤링 프로세스 및 상기 제1모니터링부의 구동을 강제로 종료하는 제2모니터링부; 및 상기 URL 및 상기 파일을 저장하는 데이터베이스;를 포함하는 것을 특징으로 하는 웹 크롤러 모니터링 시스템 및 그 모니터링 방법을 제공한다.