산학협력단 로고

지식재산권 지식재산권/사업화

SOONCHUNHYANG INDUSTRY-ACADEMY COOPERATION FOUNDATION

홈아이콘

지식재산권

웹 크롤링 모니터링 시스템 및 방법(system and method for monitoring web crawling)

권리구분
특허
출원일자
2015-12-31
출원번호
10-2015-0191014
등록일자
2017-07-07
등록번호
10-1757822
법적상태
등록
발명자소속
발명자
염흥열 | 유동현 | 김종기
대표출원인
순천향대학교 산학협력단
단독출원여부
Y
특허 상세보기
링크 바로가기
비고
요약
본 발명은 웹사이트 정적 크롤러의 오작동을 모니터링하여 URL(Uniform Resource Locator)서버에 과다한 트래픽(Traffic)이 발생되는 피해를 방지할 수 있는 웹 크롤러 모니터링 시스템 및 방법에 관한 것으로, 웹 크롤러(Web crawler)를 모니터링 하는 시스템에 있어서, 입력되는 URL(Uniform Resource Locator)을 상기 크롤러에게 전달하고, 상기 URL의 크롤링 프로세스 정보(PID) 및 크롤링 시작시간을 파일로 저장하며, 기 지정된 크롤링 작업시간이 경과하면 상기 크롤링 프로세스를 강제로 종료한 후, 상기 파일을 삭제하고 구동을 종료하는 제1모니터링부; 상기 제1모니터링부가 저장한 파일로부터 상기 크롤링 프로세스 정보(PID) 및 크롤링 시작시간을 독출하고, 상기 기 지정된 작업시간이 경과하면 상기 크롤링 프로세스 및 상기 제1모니터링부의 구동을 강제로 종료하는 제2모니터링부; 및 상기 URL 및 상기 파일을 저장하는 데이터베이스;를 포함하는 것을 특징으로 하는 웹 크롤러 모니터링 시스템 및 그 모니터링 방법을 제공한다.