728x90
웹 크롤링
- 웹 크롤링 (Crawling) 또는 웹 스크랩핑 (Scraping)은 웹 페이지를 원본 그대로 불러와 웹 페이지 내에 데이터를 추출하는 기술
- 크롤링(Crawling)은 사전적으로 ' 기어다니는것 ' 을 뜻하기도 한다.
- 웹 크롤링을 하기 위해 웹 소캣을 이용하여 원하는 웹사이트 연결 요청을 진행해야 한다.
- 연결 요청을 응답으로 웹 서버는 응답을 보내면 보통 HTML이나 JSON으로 변환한다.
파이썬 데이터 크롤링
728x90
'대학교 코딩공부 > 빅데이터 프로젝트' 카테고리의 다른 글
| 빅데이터 프로젝트 7주 [ Hadoob ] (0) | 2022.10.11 |
|---|---|
| 빅데이터 프로젝트 2번째 도커 설치 (1) | 2022.09.27 |
| 빅데이터 프로젝트 4주차 [ 데이터 분류 ] (0) | 2022.09.22 |
| 빅데이터 프로젝트 4주차 [ 빅데이터 기본 ] (0) | 2022.09.20 |
| 빅데이터 프로젝트 3주차 [ 빅데이터와 머신러닝 ] (0) | 2022.09.13 |