본문 바로가기
🌱 Computer Science

스크래핑 기술 vs 크롤링

by 카프리썬_ 2020. 1. 22.
728x90
728x90

크롤링

여러 인터넷 사이트의 페이지(문서,HTML)를 수집해서 분류 하는것

대체로 찾아낸 데이터를 저장한 후 쉽게 찾을 수 있게 인덱싱

일종의 스크래핑 기술

자동화된 웹크롤러가 정해진 규칙에 따라서 데이터를 수집?

스크래핑

HTTP를 통해 웹사이트 내용을 긁어다 원하는 형태로 가공하는것

웹사이트의 데이터를 수집하는 모든 작업

원하는 부분을 자동으로 추출 및 수집?

 

출처

 

728x90
반응형