scrapy 특징

 

 

scrapy 특징

scrapy는 파이썬 기반의 프레임워크로 스크랩 과정이 단순합니다. 특히 한 번에 여러페이지를 불러오기 수월하고, scrapyd, scrapinghub 등 부가적인 요소들이 많습니다.

 

특징	설명
파이썬 기반	파이썬 코드에 친숙하다면 쉬운 설정 가능
단순한 스크랩 과정	크롤링 후, 바로 데이터 처리가 가능
다양한 부가 요소	scrapyd, scrapinghub 등 부가요소, 쉬운 수집, 로깅 지원