웹의 변경에 관한 실험적 연구

Abstract

웹 문서들은 매우 동적으로 생성, 소멸, 변경을 반복하고 있으며, 웹 데이타베이스는 최신의 웹 상태를 반영하기 위해 빈번히 변경되어야 한다. 웹 데이타베이스의 효과적인 갱신 전략 수립을 위하여 실제 웹의 변화 성향을 파악하는 일은 매우 중요하다. 웹의 변화를 관찰한 연구들이 다양하게 발표되고 있으나 기존의 연구들은 웹 문서의 내용 변경에 주된 초첨이 맞추어 있고 웹 문서의 생성과 소멸에 대한 결과가 부족하였다. 본 논문에서는 웹의 변화를 표현할 수 있는 척도로서 URL의 '발견연속성','다운로드성공률','변경률','나이변이계수'를 소개한다. 실제 웹의 변화를 파악하기 위하여 한국의 유명 사이트 집합과 임의(random)사이트 집합에서 발견된 300만 개의 URL들을 2일 주기로 100동안 관찰하고, 제안된 척도에 따라 관찰 결과를 분석한다.