Web Scraping
CODEDRAGON ㆍDevelopment/Python
반응형
Web Scraping
· ≒ 크롤링(crawling)
· ≒ 웹페이지를 대상으로 이뤄지기 때문에 웹 스크래핑 ≒ 웹 크롤링(Web Crawling) ≒ 웹스파이더링(Web Spidering) ≒ HTML 파싱(HTML Parsing)이라고 합니다.
· Web에서 전문적으로 정보를 수집해주는 프로그램을 봇(로봇)이라고 합니다.
· 웹사이트에서 HTML을 읽어와 필요한 데이터를 긁어오는 것을 말합니다.
· 검색엔진도 웹 페이지를 스크래핑합니다.
· 수집된 데이터를 통해 다양한 작업을 할 수 있습니다.
https://en.wikipedia.org/wiki/Web_scraping
https://en.wikipedia.org/wiki/Web_crawler
'Development > Python' 카테고리의 다른 글
Scraping을 하는 이유 (0) | 2020.02.25 |
---|---|
Web Scraping 도식도 (0) | 2020.02.25 |
Response 객체의 주요 메소드 (0) | 2020.02.25 |
requests 패키지 (0) | 2020.02.25 |
HTTP 요청 방식에 따른 방법 (0) | 2020.02.25 |