본문 바로가기
Big Data/Scraping

Crawling / Scraping

by Wikinist 2023. 7. 11.

웹 크롤링(Crawling) vs 웹 스크래핑(Scraping)

기상청 우리나라 최근 3년간 기후변화
한화 최근 5년간의 성적
=> 특정 문서의 데이터 수집
웹 크롤링 : 특정 문서와 링크된 문서를 수집

웹 스크래핑 조합

1. requests + beautifulsoup4 > 정적인 페이지 분석
2. requests + selenium > 동적인 페이지 분석

 

'Big Data > Scraping' 카테고리의 다른 글

스크레이핑시 데이터 구조 클래스화  (0) 2023.07.18
스크래핑 사람처럼 꾸미기  (0) 2023.07.17
웹의 동작  (0) 2023.07.11