| 1 |
1
지정된 다양한 타겟 웹사이트 별로 문서 객체 모델(DOM; Document Object Model)의 패턴을 분석하는 패턴 인식기;상기 다양한 타겟 웹사이트로부터 상기 문서 객체 모델을 기반으로 데이터를 크롤링하는 웹 크롤러;상기 웹 크롤러를 구비한 서버에 구비되어 상기 타겟 웹사이트의 데이터를 사용자 단말기를 통해 수집하는 데이터 수집부; 및크롤링된 상기 다양한 타겟 웹사이트의 데이터를 상기 사용자 단말기로 일괄하여 제공하는 데이터 제공부를 포함하고,상기 데이터 수집부는,상기 사용자 단말기로부터 정보 요청시, 상기 사용자 단말기가 상기 타겟 웹사이트에 접근하게 하고, 상기 사용자 단말기의 응용 프로그램 어플리케이션에서 상기 타겟 웹사이트로부터 받은 데이터를 상기 웹 크롤러를 구비한 서버로 전달하게 하여 상기 타겟 웹사이트의 데이터를 상기 사용자 단말기를 통해 수집하고,상기 데이터 제공부는,상기 사용자 단말기로부터 정보 요청시, 요청된 정보가 상기 서버의 데이터베이스에 저장되어 있는지 판단하고;상기 요청된 정보가 상기 서버의 데이터베이스에 저장되어 있는 경우, 상기 데이터베이스에 저장된 정보를 상기 사용자 단말기로 제공하고; 그리고상기 요청된 정보가 상기 서버의 데이터베이스에 저장되어 있지 않은 경우, 상기 사용자 단말기에서 상기 타겟 웹사이트의 타겟 웹페이지에 접근하여 수집한 데이터를 상기 서버로 전달하도록 상기 사용자 단말기의 응용 프로그램 어플리케이션을 실행시키는 지능형 크롤링 시스템
|
| 2 |
2
제1항에 있어서,상기 다양한 타겟 웹사이트 별로 인식된 문서 객체 모델의 패턴을 기반으로 상기 다양한 타겟 웹사이트로부터 수집한 데이터에서 필요 정보를 추출하는 스크랩부를 더 포함하는 지능형 크롤링 시스템
|
| 3 |
3
삭제
|
| 4 |
4
삭제
|
| 5 |
5
제1항에 있어서,상기 다양한 타겟 웹사이트 별로 상기 타겟 웹사이트로부터 수집한 데이터에서 마이닝 블록, 상기 마이닝 블록의 속성 및 필드를 지정하는 관리자 단말기를 더 포함하는 지능형 크롤링 시스템
|
| 6 |
6
제5항에 있어서,상기 패턴 인식기는 상기 관리자 단말기에 의해 지정된 마이닝 블록, 속성 및 필드를 기반으로 상기 다양한 타겟 웹사이트 별로 상기 문서 객체 모델을 인식하는 지능형 크롤링 시스템
|
| 7 |
7
제1항에 있어서,상기 다양한 웹사이트는 온라인 부동산 정보 제공 웹사이트들을 포함하는 지능형 크롤링 시스템
|
| 8 |
8
제1항에 있어서,상기 데이터 제공부는,서로 다른 문서 객체 패턴으로 데이터를 제공하는 다양한 타겟 웹사이트로부터 필요 정보를 추출하여, 일관된 문서 객체 패턴으로 통합하여 표시하는 지능형 크롤링 시스템
|
| 9 |
9
패턴 인식기에 의해, 지정된 다양한 타겟 웹사이트 별로 문서 객체 모델(DOM; Document Object Model)의 패턴을 분석하는 단계;웹 크롤러에 의해, 상기 다양한 타겟 웹사이트로부터 상기 문서 객체 모델을 기반으로 데이터를 크롤링하는 단계;데이터 수집부에 의해, 사용자 단말기를 통해 상기 타겟 웹사이트의 데이터를 수집하는 단계; 및데이터 제공부에 의해, 상기 사용자 단말기로 크롤링된 상기 다양한 타겟 웹사이트의 데이터를 일괄하여 제공하는 단계를 포함하고,상기 타겟 웹사이트의 데이터를 수집하는 단계는,상기 사용자 단말기로부터 정보 요청시, 상기 사용자 단말기가 상기 타겟 웹사이트에 접근하게 하고, 상기 사용자 단말기의 응용 프로그램 어플리케이션에서 상기 타겟 웹사이트로부터 받은 데이터를 상기 웹 크롤러를 구비한 서버로 전달하게 하여 상기 타겟 웹사이트의 데이터를 상기 사용자 단말기를 통해 수집하는 단계를 포함하고,상기 다양한 타겟 웹사이트의 데이터를 일괄하여 제공하는 단계는,상기 사용자 단말기로부터 정보 요청시, 요청된 정보가 상기 서버의 데이터베이스에 저장되어 있는지 판단하는 단계;상기 요청된 정보가 상기 서버의 데이터베이스에 저장되어 있는 경우, 상기 데이터베이스에 저장된 정보를 상기 사용자 단말기로 제공하는 단계; 및상기 요청된 정보가 상기 서버의 데이터베이스에 저장되어 있지 않은 경우, 상기 사용자 단말기에서 상기 타겟 웹사이트의 타겟 웹페이지에 접근하여 수집한 데이터를 상기 서버로 전달하도록 상기 사용자 단말기의 응용 프로그램 어플리케이션을 실행시키는 단계를 포함하는 지능형 크롤링 방법
|
| 10 |
10
제9항에 있어서,스크랩부에 의해, 상기 다양한 타겟 웹사이트 별로 인식된 문서 객체 모델의 패턴을 기반으로 상기 다양한 타겟 웹사이트로부터 수집한 데이터에서 필요 정보를 추출하는 단계를 더 포함하는 지능형 크롤링 방법
|
| 11 |
11
삭제
|
| 12 |
12
삭제
|
| 13 |
13
제9항에 있어서,관리자 단말기에 의해, 상기 다양한 타겟 웹사이트 별로 상기 타겟 웹사이트로부터 수집한 데이터에서 마이닝 블록, 상기 마이닝 블록의 속성 및 필드를 지정하는 단계를 더 포함하는 지능형 크롤링 방법
|
| 14 |
14
제13항에 있어서,상기 문서 객체 모델의 패턴을 분석하는 단계는, 상기 관리자 단말기에 의해 지정된 마이닝 블록, 속성 및 필드를 기반으로 상기 다양한 타겟 웹사이트 별로 상기 문서 객체 모델을 인식하는 지능형 크롤링 방법
|
| 15 |
15
제9항에 있어서,상기 다양한 타겟 웹사이트의 데이터를 일괄하여 제공하는 단계는, 서로 다른 문서 객체 패턴으로 데이터를 제공하는 다양한 타겟 웹사이트로부터 필요 정보를 추출하여, 일관된 문서 객체 패턴으로 통합하여 표시하는 지능형 크롤링 방법
|
| 16 |
16
제9항 내지 제10항, 제13항 내지 제15항 중 어느 한 항에 기재된 지능형 크롤링 방법을 실행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체
|
